scipy.stats.

ttest_ind#

scipy.stats.ttest_ind(a, b, *, axis=0, equal_var=True, nan_policy='propagate', permutations=None, random_state=None, alternative='two-sided', trim=0, method=None, keepdims=False)[源代码]#

计算两个独立样本的均值的 T 检验。

这是一个检验两个独立样本是否具有相同平均值(期望值)的零假设的检验。此检验默认假设总体具有相同的方差。

自版本 1.17.0 起已弃用: 按位置使用参数 {'trim', 'method', 'alternative', 'nan_policy', 'axis', 'keepdims', 'equal_var'} 已弃用;从 SciPy 1.17.0 开始,这些参数将仅限关键字。参数 {'permutations', 'random_state'} 已弃用,无论通过位置还是关键字传递;它们将在 SciPy 1.17.0 中删除。使用 method 执行排列检验。

参数:
a, barray_like

数组必须具有相同的形状,除了对应于 axis 的维度(默认情况下为第一个)。

axisint 或 None,默认值:0

如果为 int,则为沿其计算统计量的输入轴。输入的每个轴切片(例如,行)的统计量将出现在输出的对应元素中。如果为 None,则在计算统计量之前将输入展平。

equal_varbool,可选

如果为 True(默认值),则执行假设总体方差相等的标准独立 2 样本检验 [1]。如果为 False,则执行不假设总体方差相等的 Welch 的 t 检验 [2]

在 0.11.0 版本中添加。

nan_policy{‘propagate’, ‘omit’, ‘raise’}

定义如何处理输入 NaN。

  • propagate:如果沿着计算统计量的轴切片(例如,行)中存在 NaN,则输出的相应条目将为 NaN。

  • omit:执行计算时将省略 NaN。如果在沿着计算统计量的轴切片中剩余的数据不足,则输出的相应条目将为 NaN。

  • raise:如果存在 NaN,则将引发 ValueError

permutations非负整数,np.inf 或 None(默认值),可选

如果为 0 或 None(默认值),则使用 t 分布计算 p 值。否则,permutations 是将用于使用排列检验估计 p 值的随机排列的数量。如果 permutations 等于或超过合并数据的不同分区的数量,则改为执行精确检验(即,每个不同的分区仅使用一次)。有关详细信息,请参阅“备注”。

自版本 1.17.0 起已弃用: permutations 已弃用,将在 SciPy 1.7.0 中删除。请改为使用 PermutationMethodn_resamples 参数,并将该实例作为 method 参数传递。

random_state{None, int, numpy.random.Generator,

如果 seed 为 None(或 np.random),则使用 numpy.random.RandomState 单例。如果 seed 为 int,则使用新的 RandomState 实例,并使用 seed 进行播种。如果 seed 已经是 GeneratorRandomState 实例,则使用该实例。

用于生成排列的伪随机数生成器状态(仅当 permutations 不为 None 时使用)。

自版本 1.17.0 起已弃用: random_state 已弃用,将在 SciPy 1.7.0 中删除。请改为使用 PermutationMethodrng 参数,并将该实例作为 method 参数传递。

alternative{‘two-sided’, ‘less’, ‘greater’}, 可选

定义备择假设。以下选项可用(默认值为“two-sided”)

  • ‘two-sided’:样本的基础分布的均值不相等。

  • ‘less’:第一个样本的基础分布的均值小于第二个样本的基础分布的均值。

  • ‘greater’:第一个样本的基础分布的均值大于第二个样本的基础分布的均值。

trimfloat,可选

如果非零,则执行截尾(Yuen 的)t 检验。定义从输入样本的每一端截尾的元素的分数。如果为 0(默认值),则不会从任何一侧截尾任何元素。从每个尾部截尾的元素的数量是截尾值乘以元素数量的向下取整。有效范围为 [0, .5)。

methodResamplingMethod,可选

定义用于计算 p 值的方法。如果 methodPermutationMethod/MonteCarloMethod 的实例,则使用 scipy.stats.permutation_test/scipy.stats.monte_carlo_test 以及提供的配置选项和其他适当的设置来计算 p 值。否则,通过将检验统计量与理论 t 分布进行比较来计算 p 值。

在 1.15.0 版本中添加。

keepdimsbool,默认值:False

如果将其设置为 True,则缩减的轴将作为大小为 1 的维度保留在结果中。使用此选项,结果将正确地广播到输入数组。

返回值:
resultTtestResult

具有以下属性的对象

statisticfloat 或 ndarray

t 统计量。

pvaluefloat 或 ndarray

与给定备择假设关联的 p 值。

dffloat 或 ndarray

用于计算 t 统计量的自由度数。对于排列 t 检验,这始终为 NaN。

在 1.11.0 版本中添加。

该对象还具有以下方法

confidence_interval(confidence_level=0.95)

计算给定置信水平下,两个总体均值之差的置信区间。置信区间以 namedtuple 的形式返回,其中包含 lowhigh 字段。当执行排列 t 检验时,不计算置信区间,lowhigh 字段包含 NaN。

在 1.11.0 版本中添加。

注释

假设我们观察到两个独立的样本,例如花瓣长度,我们正在考虑这两个样本是否来自同一总体(例如,同一花种或两种具有相似花瓣特征的物种)或两个不同的总体。

t 检验量化了两个样本的算术平均值之间的差异。p 值量化了在假设零假设(即样本来自具有相同总体均值的总体)为真的情况下,观察到等于或更极端的值的概率。大于选定阈值(例如 5% 或 1%)的 p 值表明,我们的观察结果并非太不可能偶然发生。因此,我们不拒绝总体均值相等的零假设。如果 p 值小于我们的阈值,那么我们就有证据反对总体均值相等的零假设。

默认情况下,p 值是通过将观察数据的 t 统计量与理论 t 分布进行比较来确定的。

(在下面,请注意参数 permutations 本身已弃用,但可以通过创建 scipy.stats.PermutationMethod 的实例,并将 n_resamples=permutuations 作为 method 参数传递来执行几乎相同的测试。)当 1 < permutations < binom(n, k) 时,其中

  • ka 中的观测值数量,

  • nab 中观测值的总数,以及

  • binom(n, k) 是二项式系数(nk),

数据被合并(连接),随机分配到组 ab,并计算 t 统计量。这个过程会重复执行(permutation 次),在零假设下生成 t 统计量的分布,并将观察数据的 t 统计量与此分布进行比较以确定 p 值。具体来说,报告的 p 值是 [3] 中 4.4 定义的“达到的显著性水平”(ASL)。请注意,还有其他方法可以使用随机排列测试来估计 p 值;对于其他选项,请参阅更通用的 permutation_test

permutations >= binom(n, k) 时,执行精确测试:数据在每种不同的方式中仅被分组一次。

排列测试可能计算量很大,而且不一定比分析测试更准确,但它不对基础分布的形状做出强假设。

使用修剪通常被称为修剪 t 检验。有时也称为 Yuen 的 t 检验,它是 Welch t 检验的扩展,区别在于在计算方差时使用 winsorized 均值,以及在计算统计量时使用修剪后的样本大小。如果基础分布是长尾的或被异常值污染,则建议进行修剪 [4]

统计量计算为 (np.mean(a) - np.mean(b))/se,其中 se 是标准误差。因此,当 a 的样本均值大于 b 的样本均值时,统计量将为正值;当 a 的样本均值小于 b 的样本均值时,统计量将为负值。

从 SciPy 1.9 开始,np.matrix 输入(不建议用于新代码)在执行计算之前会转换为 np.ndarray。在这种情况下,输出将是标量或适当形状的 np.ndarray,而不是 2D np.matrix。类似地,虽然会忽略掩码数组的掩码元素,但输出将是标量或 np.ndarray,而不是 mask=False 的掩码数组。

参考文献

[3]
  1. Efron 和 T. Hastie. 计算机时代统计推断。(2016)。

[4]

Yuen, Karen K. “The Two-Sample Trimmed t for Unequal Population Variances.” Biometrika, vol. 61, no. 1, 1974, pp. 165-170. JSTOR, www.jstor.org/stable/2334299. 访问日期:2021 年 3 月 30 日。

[5]

Yuen, Karen K. 和 W. J. Dixon。“The Approximate Behaviour and Performance of the Two-Sample Trimmed t.” Biometrika, vol. 60, no. 2, 1973, pp. 369-374. JSTOR, www.jstor.org/stable/2334550. 访问日期:2021 年 3 月 30 日。

示例

>>> import numpy as np
>>> from scipy import stats
>>> rng = np.random.default_rng()

使用具有相同均值的样本进行测试

>>> rvs1 = stats.norm.rvs(loc=5, scale=10, size=500, random_state=rng)
>>> rvs2 = stats.norm.rvs(loc=5, scale=10, size=500, random_state=rng)
>>> stats.ttest_ind(rvs1, rvs2)
TtestResult(statistic=-0.4390847099199348,
            pvalue=0.6606952038870015,
            df=998.0)
>>> stats.ttest_ind(rvs1, rvs2, equal_var=False)
TtestResult(statistic=-0.4390847099199348,
            pvalue=0.6606952553131064,
            df=997.4602304121448)

ttest_ind 低估了不等方差的 p 值

>>> rvs3 = stats.norm.rvs(loc=5, scale=20, size=500, random_state=rng)
>>> stats.ttest_ind(rvs1, rvs3)
TtestResult(statistic=-1.6370984482905417,
            pvalue=0.1019251574705033,
            df=998.0)
>>> stats.ttest_ind(rvs1, rvs3, equal_var=False)
TtestResult(statistic=-1.637098448290542,
            pvalue=0.10202110497954867,
            df=765.1098655246868)

n1 != n2 时,等方差 t 统计量不再等于不等方差 t 统计量

>>> rvs4 = stats.norm.rvs(loc=5, scale=20, size=100, random_state=rng)
>>> stats.ttest_ind(rvs1, rvs4)
TtestResult(statistic=-1.9481646859513422,
            pvalue=0.05186270935842703,
            df=598.0)
>>> stats.ttest_ind(rvs1, rvs4, equal_var=False)
TtestResult(statistic=-1.3146566100751664,
            pvalue=0.1913495266513811,
            df=110.41349083985212)

具有不同均值、方差和 n 的 t 检验

>>> rvs5 = stats.norm.rvs(loc=8, scale=20, size=100, random_state=rng)
>>> stats.ttest_ind(rvs1, rvs5)
TtestResult(statistic=-2.8415950600298774,
            pvalue=0.0046418707568707885,
            df=598.0)
>>> stats.ttest_ind(rvs1, rvs5, equal_var=False)
TtestResult(statistic=-1.8686598649188084,
            pvalue=0.06434714193919686,
            df=109.32167496550137)

取这两个样本,其中一个具有极端的尾部。

>>> a = (56, 128.6, 12, 123.8, 64.34, 78, 763.3)
>>> b = (1.1, 2.9, 4.2)

使用 trim 关键字执行修剪 (Yuen) t 检验。例如,使用 20% 的修剪,trim=.2,该测试将减少样本 a 每个尾部的一个(np.floor(trim*len(a)))元素的影响。它对样本 b 没有影响,因为 np.floor(trim*len(b)) 为 0。

>>> stats.ttest_ind(a, b, trim=.2)
TtestResult(statistic=3.4463884028073513,
            pvalue=0.01369338726499547,
            df=6.0)