如何检查python中变量的分布？ [关闭]

Question

在单元测试中，我需要检查数组的值分布是否均匀。例如：

在数组中 = [1, 0, 1, 0, 1, 1, 0, 0] 值是均匀分布的。由于有四个“1”和四个“0”

对于更大长度的数组，分布更“均匀”

如何证明正在测试的数组是均匀分布的？

注意：数组是用random.randint(min,max,len) 创建的，来自numpy.random

Answer 1

您可以将 Kolmogorove-Smirnov 检验用于连续 和 离散分布。该功能由scipy.stats.kstesthttp://docs.scipy.org/doc/scipy/reference/generated/scipy.stats.kstest.html#scipy.stats.kstest提供。

In [12]:

import scipy.stats as ss
import numpy as np
In [14]:

A=np.random.randint(0,10,100)
In [16]:

ss.kstest(A, ss.randint.cdf, args=(0,10))
#args is a tuple containing the extra parameter required by ss.randint.cdf, in this case, lower bound and upper bound
Out[16]:
(0.12, 0.10331653831438881)
#This a tuple of two values; KS test statistic, either D, D+ or D-. and p-value

这里得到的 P 值为 0.1033，因此我们得出结论，数组A 与均匀分布没有显着差异。考虑 P 值的方法是，它测量在假设原假设为真的情况下，使检验统计量与观察到的一样极端的概率（这里：元组中的第一个数字）。在 KS 检验中，我们实际上有一个零假设，即A 与均匀分布没有区别。 0.1033 的 p 值通常被认为不足以拒绝零假设。通常 P 值必须小于 0.05 或 0.01 才能拒绝空值。如果这个例子中的这个 p 值小于 0.05，那么我们会说A 与均匀分布有很大的不同。

使用scipy.stats.chisquare()的替代方法：

In [17]:

import scipy.stats as ss
import numpy as np
In [18]:

A=np.random.randint(0, 10, 100)
In [19]:

FRQ=(A==np.arange(10)[...,np.newaxis]).sum(axis=1)*1./A.size #generate the expect frequecy table.
In [20]:

ss.chisquare(FRQ) #If not specified, the default expected frequency is uniform across categories.
Out[20]:
(0.084000000000000019, 0.99999998822800984)

第一个值是卡方，第二个值是P值。