python - Pandas 数据框描述给出了 float 数据类型的平均值和标准差的 nan 值

Question

当我使用 df.describe() or np.mean(df[col]) or df[col].mean() 时，我有一个包含 8M 行的数据框我得到nan作为输出。

但是，当我检查np.mean(df[col].values)时， 这是工作。我能够得到平均值。 没有nan该列中的值。我已经使用 df[col].isna().sum() and df[col].isnull().sum() 进行了测试

不确定如何重现该错误。

更新:

>>> df.head()
    col1        col2
0   2.289062    290
1   2.289062    290
2   2.289062    290
3   2.289062    290
4   2.289062    290

>>> df[col1].dtype
dtype('float16')

有办法调试或解决此错误吗？

>>> pd.__version__
'1.3.4'

Answer 1

我认为您需要将列转换为float64/float32，因为no hardware support for float16 on a typical processor :

df[col].astype('float64').mean()
df[col].astype('float32').mean()