Python Pandas：使用 Aggregate 与 Apply 定义新列

假设我有一个像这样的数据框：

n = 20
dim1 = np.random.randint(1, 3, size=n)
dim2 = np.random.randint(3, 5, size=n)
data1 = np.random.randint(10, 20, size=n)
data2 = np.random.randint(1, 10, size=n)
df = pd.DataFrame({'a': dim1, 'b': dim2 ,'val1': data1, 'val2': data2})

如果我定义一个按组返回的函数：

def h(x):
    if x['val2'].sum() == 0:
        return 0
    else:
        return (x['val1'].sum())*1.0/x['val2'].sum()*1.0

按其中一列分组并聚合会返回结果：

df.groupby(['a']).aggregate(h)['val1']

尽管它将所有现有列转换为所需的结果，而不是添加新列

使用聚合时按两列分组会导致错误：

df.groupby(['a','b']).aggregate(h)['val1']

KeyError: 'val2'

但将聚合切换为应用似乎有效。

我有两个问题：

1. 为什么应用有效而不是聚合？
2. 如果按一组键对数据帧进行分组后，我想使用将组值聚合为新列的函数，那么最好的方法是什么？

提前致谢。

稍微退后一步，执行此特定“聚合”的更快方法是仅使用sum（在 cython 中进行了优化） http://pandas.pydata.org/pandas-docs/stable/groupby.html#cython-optimized-aggregation-functions一些时间。

In [11]: %timeit g.apply(h)
1000 loops, best of 3: 1.79 ms per loop

In [12]: %timeit g['val1'].sum() / g['val2'].sum()
1000 loops, best of 3: 600 µs per loop

IMO groupby 代码非常复杂，通常通过创建所看到的值的列表来懒惰地“黑匣子”查看正在发生的事情：

def h1(x):
   a.append(x)
   return h(x)
a = []

警告：有时此列表中的数据类型不一致（其中pandas 尝试了一些不同的事情在进行任何计算之前）...如本例所示！

第二个聚合被卡住了each列，因此该组（会引发错误）：

0     10
4     16
8     13
9     17
17    17
19    11
Name: val1, dtype: int64

这是 val1 列的子系列，其中 (a, b) = (1, 3)。

这很可能是一个错误，在引发这个错误之后，也许它可以尝试其他方法（我怀疑这就是第一个版本起作用的原因，它是特殊情况）......

对于那些有兴趣的人a我得到的是：

In [21]: a
Out[21]: 
[SNDArray([125755456, 131767536,        13,        17,        17,        11]),
 Series([], name: val1, dtype: int64),
 0     10
4     16
8     13
9     17
17    17
19    11
Name: val1, dtype: int64]

我不知道 SNDArray 是怎么回事......