【问题标题】:Standardization Result is different between Patsy & Pandas - PythonPatsy 和 Pandas 之间的标准化结果不同 - Python
【发布时间】:2021-02-26 13:22:21
【问题描述】:

我发现了一个有趣的问题,我很想听听你的解释。

from patsy import dmatrix,demo_data
df = pd.DataFrame(demo_data("a", "b", "x1", "x2", "y", "z column"))

Patsy_Standarlize_Output = dmatrix("standardize(x2) + 0",df).ravel()
output = (df['x2'] - df['x2'].mean()) / df['x2'].std()
Pandas_Standarlize_Output = output.ravel()

如果您打印出标准化 x2 列的结果,您会发现结果完全不同。结果如下:

Patsy_Standarlize_Output = [-1.21701061, -0.07791372, -0.66884723, 2.23584028, 0.69898536, -0.71843674, -0.00416815, -0.2484492 ]

Pandas_Standarlize_Output = [-1.13840918, -0.07288161, -0.62564929, 2.09143707, 0.65384094, -0.67203603, -0.00389895, -0.23240294]

我的问题是,我对同一列进行了标准化,为什么结果不同?

我期待听到您的精彩演绎!非常感谢您的宝贵时间和帮助!

【问题讨论】:

    标签: python pandas data-processing patsy standardization


    【解决方案1】:

    pandas 的 std() 执行 Bessel correction,而大多数其他库没有。一旦你有几十个点实际上并不重要,但对于小样本来说这是一个非常合理的事情。

    证明:如果将df['x2'].std()替换为numpy版本(df['x2'].values.std()),结果会匹配

    【讨论】:

    • 非常感谢您的详细解释!真的很有帮助!
    猜你喜欢
    • 2016-04-30
    • 1970-01-01
    • 2016-07-17
    • 2017-02-24
    • 1970-01-01
    • 2019-12-20
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多