Объединить объединить несколько фреймов данных

Question

Объединить объединить несколько фреймов данных

1

Мои данные:

Name    test1   test2    test3     Count
Emp1    X,Y      A       a1,a2      1
Emp2    X       A,B,C    a3         2
Emp3    Z        C       a4,a5,a6   3

Разделить ячейки test1 и test2 с несколькими значениями на отдельные строки и объединить их вместе.

    df2 =  df.test1.str.split(',').apply(pd.Series)
    df2.index =  df.set_index(['Name', 'Count']).index
    df2=df2.stack().reset_index(['Name', 'Count'])
    df3 = df.test2.str.split(',').apply(pd.Series)
    df3.index = df.set_index(['Name', 'Count']).index
    df3=df3.stack().reset_index(['Name', 'Count'])

    df2.merge(df3,on=['Name', 'Count'],how='outer')

Вне кода:

Out[132]: 
   Name  Count 0_x 0_y
0  Emp1      1   X   A
1  Emp1      1   Y   A
2  Emp2      2   X   A
3  Emp2      2   X   B
4  Emp2      2   X   C
5  Emp3      3   Z   C

Код для разделения Test3 с несколькими значениями на отдельные строки

    df4.index = df.set_index(['Name', 'Count']).index
    df4=df4.stack().reset_index(['Name', 'Count'])

Может ли кто-нибудь мне помочь, как многократно подключиться к Test3 с test2 и test1 Как я объединил Test1 и Test в вышеприведенном коде?

PieSquare 22 сен. 2018, в 05:17

Источник

Теги:

python

pandas

3 ответа

Ещё вопросы

RafaelC · Answer 1 · 2018-09-22T02-06-00.000Z

(Не уверен, что я понял правильно, но) Завершив this answer, вы можете

expand(expand(df.drop('test3', 1), 'test1', ','), 'test2')

или же

expand_all(df.drop('test3', axis=1), cols=['test1', 'test2'], seps=[',', ','])

где оба выхода

    Name    test1   test2   Count
0   Emp1    X   A   1
1   Emp1    Y   A   1
2   Emp2    X   A   2
3   Emp2    X   B   2
4   Emp2    X   C   2
5   Emp3    Z   C   3

деталь:

def expand(df, col, sep=','):
    r = df[col].str.split(sep)
    d = {c: df[c].values.repeat(r.str.len(), axis=0) for c in df.columns}
    d[col] = [i for sub in r for i in sub]
    return pd.DataFrame(d)

W-B · Answer 2 · 2018-09-22T01-06-00.000Z

Скорее

df1=df.stack().str.split(',').apply(pd.Series)
df1.stack().unstack(level=2).groupby(level=[0,1]).ffill().reset_index(level=[0,1])
Out[124]: 
   Name  Count test1 test2 test3
0  Emp1      1     X     A    a1
1  Emp1      1     Y     A    a2
0  Emp2      2     X     A    a3
1  Emp2      2     X     B    a3
2  Emp2      2     X     C    a3
0  Emp3      3     Z     C    a4
1  Emp3      3     Z     C    a5
2  Emp3      3     Z     C    a6

Можете ли вы объяснить мне логику ответа вы опубликовали, у меня есть несколько столбцов, где 3 столбца нужно разделить и объединить с другими столбцами
@Mahesh сначала сглаживает строковый столбец до одного столбца, затем мы просто unstack

piRSquared · Answer 3 · 2018-09-22T02-26-00.000Z

Мне нравится использовать понимание

pd.DataFrame([
    (T.Name, T.Count, t1, t2)
    for T in df.itertuples()
    for t1, t2 in product(T.test1.split(','), T.test2.split(','))
], columns=['Name', 'Count', '0_x', '0_y'])

   Name  Count 0_x 0_y
0  Emp1      1   X   A
1  Emp1      1   Y   A
2  Emp2      2   X   A
3  Emp2      2   X   B
4  Emp2      2   X   C
5  Emp3      3   Z   C