典型相关分析中的统计检验问题

合集下载

报告中数据分析的有效性和可靠性的统计检验和验证

报告中数据分析的有效性和可靠性的统计检验和验证

报告中数据分析的有效性和可靠性的统计检验和验证一、什么是数据分析的有效性和可靠性数据分析的有效性和可靠性是指通过科学的统计方法对获得的数据进行验证和检验,以确定数据分析的结果是否具备科学可靠性和有效性。

有效性是指数据分析结果能否准确地反映问题的本质和实际情况,可靠性则是指数据分析结果是否稳定一致,不受抽样误差和其他随机因素的影响。

二、数据收集的有效性和可靠性的验证1. 大样本抽样方法验证数据收集的有效性和可靠性使用大样本抽样方法可以增加样本的代表性和数据的稳定性。

通过随机抽取足够数量的样本进行分析,可以降低抽样误差对分析结果的影响。

另外可以采用多次重复抽样的方法验证结果的稳定性。

2. 问卷设计和调查数据的有效性和可靠性验证在数据收集过程中,问卷设计是至关重要的环节。

合理的问卷设计能够保证所收集的数据具备科学性和准确性。

可以通过内部一致性检验、评估问卷的信度和效度等方法验证问卷的有效性和可靠性。

三、数据分析方法的有效性和可靠性验证1. 描述性统计分析的有效性和可靠性验证描述性统计分析是常用的数据分析方法之一,它可以通过概括和总结数据的方式揭示数据的基本情况。

在验证描述性统计分析结果的有效性和可靠性时,可以采用置信区间方法和假设检验方法进行验证。

2. 相关分析的有效性和可靠性验证相关分析是用来研究两个或多个变量之间关联关系的统计方法。

在验证相关分析结果的有效性和可靠性时,可以使用假设检验方法验证相关性是否显著,并通过散点图等图形展示变量之间的关系。

四、数据预处理的有效性和可靠性验证在进行数据分析之前,通常需要对数据进行预处理,包括数据清洗、缺失值处理、异常值处理等。

数据预处理的有效性和可靠性验证可以通过对处理过程的透明度、一致性、可复现性进行检验。

五、模型分析的有效性和可靠性验证在数据分析过程中,常常会使用统计模型来解释数据之间的关系。

模型的有效性和可靠性验证可以通过拟合度检验、参数估计的置信区间、模型稳定性的检验等方法进行验证。

医学论文中常用统计分析方法错误大全

医学论文中常用统计分析方法错误大全

医学论文中常用统计分析方法错误大全在医学研究领域,统计分析方法的正确应用对于得出科学、可靠的结论至关重要。

然而,在实际的医学论文中,我们常常能发现各种各样的统计分析方法错误,这些错误不仅影响了研究结果的准确性和可信度,还可能导致错误的临床决策。

下面,我们就来详细梳理一下医学论文中常见的统计分析方法错误。

一、样本量不足样本量的大小直接关系到研究结果的可靠性和普遍性。

如果样本量过小,可能无法准确反映总体的特征,导致统计效能不足,从而得出错误的结论。

例如,在比较两种治疗方法的疗效时,如果每组的样本量只有十几例,那么很可能因为偶然因素而得出错误的差异结论。

二、数据类型错误医学研究中数据类型多种多样,包括计量数据(如身高、体重、血压等)、计数数据(如治愈人数、死亡人数等)和等级数据(如病情的轻、中、重)。

如果对数据类型的判断错误,就会选择错误的统计分析方法。

例如,将本来应该是计数数据的治愈率当作计量数据进行 t 检验,这是不正确的。

三、忽视数据分布许多统计方法都有其适用的数据分布条件。

例如,t 检验和方差分析要求数据服从正态分布。

如果数据不服从正态分布而强行使用这些方法,就会得出错误的结果。

在这种情况下,应该先对数据进行正态性检验,如果不满足正态分布,可以考虑使用非参数检验方法,如秩和检验。

四、多重比较问题在医学研究中,常常需要进行多个组之间的比较。

如果不注意控制多重比较带来的误差,就会增加得出错误阳性结果的概率。

例如,在比较多个药物剂量组的疗效时,如果不进行适当的校正(如 Bonferroni 校正),就可能因为多次比较而错误地认为存在显著差异。

五、相关与回归分析的错误相关分析用于研究两个变量之间的线性关系,但不能得出因果关系。

在医学论文中,有时会错误地将相关关系解释为因果关系。

回归分析中,自变量的选择、模型的拟合度评估等方面也容易出现错误。

例如,没有考虑自变量之间的共线性问题,导致回归结果不准确。

六、生存分析的错误生存分析常用于研究疾病的发生、发展和预后。

何晓群版—多元统计分析课后练习答案

何晓群版—多元统计分析课后练习答案

计算:边远及少数民族聚居区社会经济发展水平的指标数据.xls
T 2 =9* (-2003.23 2.25 -1006.11 2.71 12.01)*s^-1* (-2003.23 2.25
-1006.11 2.71 12.01)’=9*50.11793817=451,06144353 F 统计量=45.2>6.2 拒绝零假设,边缘及少数民族聚居区的社会经济发展水平与 全国平均水平有显著差异。
零假设的拒绝区域 {(n-p)/[(n-1)*p]}*T 2 > Fp,np ( )
1/10*T 2 >F5,4(5) μ0=( 6212.01 32.87 2972 9.5 15.78)’ 样本均值(4208.78 35.12 1965.89 12.21 27.79)’
(样本均值-μ0)’=(-2003.23 2.25 -1006.11 2.71
4、如果正态随机向量 X (X1, X2, X p ) 的协方差阵为对角阵,证明 X 的分量 是相互独立的随机变量。
解: 因为 X (X1, X2, X p ) 的密度函数为
f
(
x1
,
...,
x
p
)
1 2
p
Σ
1/
2
exp
1 2
(x
μ)Σ1(x
μ)
12
又由于
Σ
2 2
2 p
Σ
12
2 2
2 p
1
2 1
1
Σ 1
2 2
1
2 p
则 f (x1,..., xp )
1
ห้องสมุดไป่ตู้
2 1
p
1
1 2
Σ

典型相关分析及其应用实例

典型相关分析及其应用实例

摘要典型相关分析是多元统计分析的一个重要研究课题.它是研究两组变量之间相关的一种统计分析方法,能够有效地揭示两组变量之间的相互线性依赖关系.它借助主成分分析降维的思想,用少数几对综合变量来反映两组变量间的线性相关性质.目前它已经在众多领域的相关分析和预测分析中得到广泛应用.本文首先描述了典型相关分析的统计思想,定义了总体典型相关变量及典型相关系数,并简要概述了它们的求解思路,然后深入对样本典型相关分析的几种算法做了比较全面的论述.根据典型相关分析的推理,归纳总结了它的一些重要性质并给出了证明,接着推导了典型相关系数的显著性检验.最后通过理论与实例分析两个层面论证了典型相关分析的应用于实际生活中的可行性与优越性.【关键词】典型相关分析,样本典型相关,性质,实际应用ABSTRACTThe Canonical Correlation Analysis is an important studying topic of the Multivariate Statistical Analysis. It is the statistical analysis method which studies the correlation between two sets of variables. It can work to reveal the mutual line dependence relation availably between two sets of variables. With the help of the thought about the Principal Components, we can use a few comprehensive variables to reflect the linear relationship between two sets of variables. Nowadays It has already been used widely in the correlation analysis and forecasted analysis.This text describes the statistical thought of the Canonical Correlation Analysis firstly, and then defines the total canonical correlation variables and canonical correlation coefficient, and sum up their solution method briefly. After it I go deep into discuss some algorithm of the sample canonical correlation analysis thoroughly. According to the reasoning of the Canonical Correlation Analysis, sum up some of its important properties and give the identification, following it, I infer the significance testing about the canonical correlation coefficient. According to the analysis from the theories and the application, we can achieve the possibility and the superiority from canonical correlation analysis in the real life.【Key words】Canonical Correlation Analysis,Sample canonical correlation,Character,Practical applications目录前言 (1)第1章典型相关分析的数学描述 (2)第2章典型变量与典型相关系数 (3)2.1 总体典型相关 (3)2.2 样本典型相关 (4)2.2.1 第一对典型相关变量的解法 (4)2.2.2 典型相关变量的一般解法 (8)2.2.3 从相关矩阵出发计算典型相关 (9)第3章典型相关变量的性质 (11)第4章典型相关系数的显著性检验 (15)第5章典型相关分析的计算步骤及应用实例 (18)5.1 典型相关分析的计算步骤 (18)5.2 实例分析 (19)结语 (26)致谢 (27)参考文献 (28)附录 (29)前言典型相关分析(Canonical Correlation Analysis ,CCA)作为多元统计学的一个重要部分,是相关分析研究的一个主要内容.典型相关分析不仅其方法本身具有重要的理论意义,而且它还可以作为其他分析方法,如多重回归、判别分析和相应分析的工具,因此在多元分析方法中占有特殊的地位.典型相关的概念是在两个变量相关的基础上发展起来的.我们知道,两个随机变量的相关关系可以用它们的简单相关系数来衡量;一个随机变量与一组随机变量之间的相关关系可以用复相关系数来衡量.但考虑一组随机变量与另一组随机变量的关系时,如果运用两个变量的相关关系,分别考虑第一组每个变量和第二组中每个变量的相关,或者运用复相关关系,考虑一组变量中的每个变量和另一组变量的相关,这样做比较繁琐,抓不住要领.因此,为了用比较少的变量来反映两组变量之间的相关关系,一种考虑的思路就是类似主成分分析,考虑两组变量的线性组合,从这两个线性组合中找出最相关的综合变量,通过少数几个综合变量来反映两组变量的相关性质,这样便引出了典型相关分析.典型相关分析的基本思想是首先在每组变量中找出变量的线性组合,使其具有最大相关性,然后再在每组变量中找出第二对线性组合,使其分别与第一对线性组合不相关,而第二对本身具有最大的相关性,如此继续下去,直到两组变量之间的相关性被提取完毕为止.有了这样线性组合的最大相关,则讨论两组变量之间的相关,就转化为只研究这些线性组合的最大相关,从而减少研究变量的个数.典型相关分析是由Hotelling于1936年提出的.就目前而言,它的理论己经比较完善,计算机的发展解决了典型相关分析在应用中计算方面的困难,成为普遍应用的进行两组变量之间相关性分析技术.如在生态环境方面,用典型相关理论对预报场与因子场进行分析,实现了短期气象预测;借助典型相关,分析了植被与环境的关系;在社会生活领域,应用典型相关分析了物价指标和影响物价因素的相关关系等等.第1章 典型相关分析的数学描述一般地,假设有一组变量p X X X ,,,21 与另一组变量q Y Y Y ,,,21 ,我们要研究这两组变量之间的相关关系,如何给两组变量之间的相关性以数量的描述.当q p 1时,就是我们常见的研究两个变量X 与Y 之间的简单相关关系,其相关系数是最常见的度量,定义为:)()(),(Y Var X Var Y X Cov xy当1 p ,1 q (或1,1 p q )时,p 维随机向量'21),(p X X X X ,设),(~1p N Y X , 22211211,其中,11 是第一组变量的协方差阵,12 是第一组与第二组变量的协方差阵,22 是第二组变量的协方差阵.则称221211121R 为Y 与p X X X ,,,21 的全相关系数,全相关系数用于度量一个随机变量Y 与另一组随机变量p X X X ,,,21 的相关系数.当1, q p 时,利用主成分分析的思想,可以把多个变量与多个变量之间的相关化为两个新的综合变量之间的相关.也就是做两组变量的线性组合即X X X X U p p '2211 Y Y Y Y V q q '2211其中,'21),,,(p 和'21),,,(q 为任意非零向量,于是我们把研究两组变量之间的问题化为研究两个变量V U 与之间的相关问题,希望寻求 ,使U ,V 之间最大可能的相关,我们称这种相关为典型相关,基于这种原则的分析方法就是典型相关分析.第2章 典型变量与典型相关系数2.1 总体典型相关设有两组随机变量'21),,,(p X X X X ,'21),,,(q Y Y Y Y ,分别为维维和q p 随机向量,根据典型相关分析的思想,我们用X 和Y 的线性组合X ' 和Y ' 之间的相关性来研究两组随机变量X 和Y 之间的相关性.我们希望找到 和,使得)(‘Y X ', 最大.由相关系数的定义)()(),(),(''''''Y Var X Var Y X Cov Y X易得出对任意常数d c f e ,,,,均有),(])(,)([''''Y X d Y c f X e这说明使得相关系数最大的Y X '', 并不唯一.因此,为避免不必要的结果重复,我们在求综合变量时常常限定1)(' X Var , 1)(' Y Var于是,我们就有了下面的定义:设有两组随机变量'21),,(p X X X X ,'21),,(q Y Y Y Y ,q p 维随机向量Y X 的均值向量为零,协方差阵0 (不妨设q p ).如果存在'1111),,(p 和'1111),,(q ,使得在约束条件1)(' X Var ,1)(' Y Var 下,),(m ax ),('''1'1Y X Y X则称Y X '1'1, 是Y X ,的典型相关变量,它们之间的相关系数称为典型相关系数;其他典型相关变量定义如下:定义了前1 k 对典型相关变量之后,第k 对典型相关变量定义为:如果存在'1),,(pk k k 和'1),,(qk k k ,使得 ⑴ Y X k k '', 和前面的1 k 对典型相关变量都不相关;⑵ 1)(' X Var k ,1)(' Y Var k ; ⑶ Y X k k '' 和的相关系数最大,则称Y X k k '' 和是Y X ,的第k 对(组)典型相关变量,它们之间的相关系数称为第k 个典型相关系数(p k ,,2 ).2.2 样本典型相关以上是根据总体情况已知的情形进行,而实际研究中,总体均值向量 和协方差阵 通常是未知的,因而无法求得总体的典型相关变量和典型相关系数,首先需要根据观测到的样本数据阵对 进行估计. 2.2.1 第一对典型相关变量的解法设总体'11),,,,,(q p Y Y X X Z ,已知总体的n 次观测数据为:1)()()()(q p t t t Y X Z (n t ,,2,1 ), 于是样本数据阵为)(212122221222211121111211q p n nq n n np n n q p q p y y y x x x y y y x x xy y y x x x若假定),,(~ q p N Z 则由参考文献【2】中定理2.5.1知协方差阵 的最大似然估计为'1)()()()(1nt t t Z Z Z Z n其中Z = nt t Z n 1)(1,样本协方差矩阵S 为:22211211S S S SS 式中nj j j X X X X n S 1'11)()(1'112)()(1 Y Y X X n S j nj j 21S nj j j X X Y Y n 1')()(1 '122)()(1 Y Y Y Y n S j nj jn j j X n X 11, nj j Y n Y 11令j j X U ' ,j j Y V ' ,则样本的相关系数为nj jnj jj nj j j j V VU UV V U U V U r 1212'1)()()()(),(又因为:X X n X n U n U n j j n j j n j j '1'1'1111Y Y n Y n V n V n j j n j j n j j '1'1'111112''''1'''1)()(1)()(1S Y Y X X n V V U U n S j n j j j n j j V U jj 11''''1'''1)()(1)()(1S X X X X n U U U U n S j n j j j n j j U U jj 22''''1'''1)()(1)()(1S Y Y Y Y n V V V V n S j n j j j n j j V V jj 所以22'11'12'),(S S S V U r j j由于j U ,j V 乘以任意常数并不改变他们之间的相关系数,即不妨限定取标准化的j U 与j V ,即限定j U 及j V 的样本方差为1,故有:1 j j j j V V U U S S (2.2.1) 则 12'),(S V U r j j (2.2.2) 于是我们要求的问题就是在(2.2.1)的约束条件下,求p R ,q R ,使得式(2.2.2)达到最大.这是条件极值的问题,由拉格朗日乘子法,此问题等价于求 , ,使)1(2)1(2),(22'11'12'S S S(2.2.3) 达到最大.式中,,为拉格朗日乘数因子.对上式分别关于 , 求偏导并令其为0,得方程组:0022211112S S S S (2.2.4)分别用' ,' 左乘方程(2.2.4)得22'21'11'12'S S S S 又 '12')( S 21'S 所以'12'21')(S S也就是说,正好等于线性组合U 与V 之间的相关系数,于是(2.2.4)式可写为:0022211112 S S S S 或 022211211S S S S(2.2.5) 而式(2.2.5)有非零解的充要条件是:022211211S S S S (2.2.6)该方程左端是的q p 次多项式,因此有q p 个根.求解的高次方程(2.2.6),把求得的最大的代回方程组(2.2.5),再求得 和 ,从而得出第一对典型相关变量.具体计算时,因的高次方程(2.2.6)不易解,将其代入方程组(2.2.5)后还需求解q p 阶方程组.为了计算上的方便,我们做如下变换:用12212 S S 左乘方程组(2.2.5)的第二式,则有12212 SS 21S -02212212S S S 即 12212 S S 21S = 12S又由(2.2.5)的第一式,得 1112S S代入上式: 12212 SS 21S 0112S(0)1122112212 S S S S (2.2.7)再用111 S 左乘式(2.2.7),得(111S12212 SS 0)221p I S (2.2.8)因此,对2有p 个解,设为22221p r r r ,对 也有p 个解.类似地,用11121 S S 左乘式(2.2.5)中的第一式,则有011111211211121S S S S S S (2.2.9)又由(2.2.5)中的第二式,得2221S S代入到(2.2.8)式,有 11121( SS 12S 0)222S再以122 S 左乘上式,得0)(21211121122q I S S S S (2.2.10)因此对2有q 个解,对 也有q 个解,因此2为111S 12212 S S 21S 的特征根, 是对应于2的特征向量.同时2也是1211121122S S S S 的特征根, 为相应特征向量.而式(2.2.8)和(2.2.10)有非零解的充分必要条件为:002121112112222112212111q p I S S S S I S S S S (2.2.11)对于(2.2.11)式的第一式,由于011 S ,022 S ,所以0111S ,0122 S ,故有:2112212111S S S S 2121221221221112111S S S S S S 而2121221221221112111S S S S S S 与2111211222122122111 S S S S S S 有相同的特征根.如果记T 12212111 S S S则 2111211222122122111S S S SS S='T T类似的对式(2.2.11)的第二式,可得T T S S SSS S'21221221112111212122而'T T 与T T '有相同的非零特征根,从而推出(2.2.8)和(2.2.10)的非零特征根是相同的.设已求得'T T 的p 个特征根依次为: 022221p则T T '的q 个特征根中,除了上面的p 个外,其余的p q 个都为零.故p 个特征根排列是021 p ,, 1210 p p ,因此,只要取最大的1 ,代入方程组(2.2.5)即可求得相应的1 ,1 .令U =X '1 与Y V '1 为第一对典型相关变量,而1'112'1),( S V U r 为第一典型相关系数.可见求典型相关系数及典型相关变量的问题,就等价于求解'T T 的最大特征值及相应的特征向量. 2.2.2 典型相关变量的一般解法从样本典型相关变量的解法中,我们知道求典型相关变量和典型相关系数的问题,就是求解'T T 的最大特征值及相应的特征向量.不仅如此,求解第k 对典型相关变量和典型相关系数,类似的也是求'T T 的第k 大的特征值和相应的特征向量.下面引用参考文献【2】中定理10.1.1 来得出样本典型相关的一般求法.设总体的n 次观测数据为:1)()()()( q p t t t Y X Z (n t ,,2,1 ) 不妨设q p ,样本均值为0,协方差矩阵S 为:22211211S S S SS 0 记2122122111S S ST ,并设p 阶方阵'T T 的特征值依次为022221p (p i i ,,1,0 );而p l l l ,,,21 为相应的单位正交特征向量.令 kk l S2111,k k k S S 211221则X U k k ',Y V kk '为Y X ,第k 对典型相关变量,'k为第k 典型相关系数. 由上述分析不难看出,典型相关系数i 越大说明相应的典型变量之间的关系越密切,因此一般在实际中忽略典型相关系数很小的那些典型变量,按i 的大小只取前n 个典型变量及典型相关系数进行分析. 2.2.3 从相关矩阵出发计算典型相关以上我们从样本协方差阵S 出发,导出了样本典型相关变量和样本典型相关系数.下面我们从样本相关阵R 出发来求解样本典型相关变量和样本典型相关系数.设样本相关阵为)(ij r R ,其中jj ii ij ij s s s r / ,ij s 为样本协方差阵S 的i 行j 列元素.把R 相应剖分为22211211R R R R R 有时,Y X 和的各分量的单位不全相同,我们希望在对各分量作标准化变换之后再做典型相关.记)(1X E ,)(2Y Epp s s D 00111q p q p p p s s D ,1,1200则 111111D R D S ,222222D R D S 212112D R D S ,121221D R D S , 对Y X 和的各分量作标准化变换,即令)(111* X D X ,)(212* Y D Y现在来求*X 和*Y 的典型相关变量*'*X i ,*'*Y i ,m i ,,2,1 . **11111111X X S D S D R**11222222Y Y S D S D R **11112212X Y S D S D R **11221121Y X S D S D R于是1121122121111112112112221212121111111112112212111)()( D S S S S D D S D D S D D S D D S D R R R R因为 2112212111S S S S i i i r 2 1121122121111 D S S S S D )()(121i i i D r D 所以 2112212111R R R R *2*i i i r 式中*i i D 1 ,有111'1111'*11'* i i i i i i S D R D R同理: 1211121122R R R R *2*i i i r 式中*i i D 1 ,有122'2222'*22'* i i i i i i S D R D R ,由此可见*i ,*i 为**,Y X 的第i 对典型系数,其第i 个典型相关系数为i r ,在标准化变换下具有不变性.第3章 典型相关变量的性质根据典型相关分析的统计思想及推导,我们归纳总结了典型相关变量的一些重要性质并对总体与样本分别给出证明.性质1 同一组的典型变量互不相关 ⅰ总体典型相关设Y X 与的第i 对典型变量为X U i i ' ,Y V i i ' ,m i ,,2,1则有 0),( j i U U 0),( j i V V m j i 1 证明详见参考文献【5】. ⅱ样本典型相关设Y X 与的第i 对典型变量为X U i i ' ,Y V i i ' ,m i ,,2,1因为 '111i i U U i i S S ,'221i iVV i i S S ,m i ,,2,1 '11(,)0i j i j U U i j r U U S S ,m j i 1'22(,)0i ji j VV i j r V V S S ,m j i 1 表明由X 组成的第一组典型变量m U U U ,,,21 互不相关,且均有相同的方差1;同样,由Y 组成的第二组典型变量m V V V ,,,21 也互不相关,且也有相同的方差1.性质2 不同组的典型变量之间的相关性ⅰ总体典型相关i i i V U ),( m i ,,2,10),( j i V U m j i 1 证明详见参考文献【5】. ⅱ样本典型相关i i i i i r V U r S ),(12' , m i ,,2,1'1211''22111222(,)0,1i j i j U V i ji j j i j r U V S S S S S r i j m表明不同组的任意两个典型变量,当j i 时,相关系数为i r ;当j i 时是彼此不相关的.记'21),,,(m U U U U ,'21),,,(m V V V V ,则上述性质可用矩阵表示为 ,UU m VV m S I S IUV S或 mm IU S I V其中12(,,...,)m diag r r r性质3 原始变量与典型变量之间的关系 求出典型变量后,进一步计算原始变量与典型变量之间的相关系数矩阵,也称为典型结构.下面我们分别对总体与样本进行讨论.ⅰ总体典型相关的原始变量与典型变量的相关性详见参考文献【2】. ⅱ样本典型相关 记m p ij m A )(),,,(21 m q ij m B )(),,,(21S22211211S S S S =q p q p p q p pq p q p q p p p p p p p q p p p p pp p q p p p s s s s s s s s s s s s s s s s ,1,,1,,11,1,11,1,1,1,11,1111则A S X A X A X X n S n i i XU11'''1)()(1 B S X B X B X X n S n i i XV12'''1)()(1 A S X A X A Y Y n S n i i YU21'''1)()(1 B S Y B Y B Y Y n S n i i YV22'''1)()(1所以利用协方差进一步可以计算原始变量与典型变量之间的相关关系.若假定原始变量均为标准化变量,则通过以上计算所得到的原始变量与典型变量的协方差阵就是相关系数矩阵.1(,)pi j ik k r X U s,1(,)qi j i p k k r X V sp i ,,2,1 , m j ,,2,1,1(,)pi j i p k kjk r Y U s,1(,)qi j i p p k kjk r Y V s q i ,,2,1 , m j ,,2,1性质4 设Y X 和分别为维维和q p 随机向量,令d X C X '*,h Y G Y '*,其中C 为p p 阶非退化矩阵,d 为p 维常数向量,G 为q q 阶非退化矩阵,q h 为维常数向量.则:ⅰ对于总体典型相关有:⑴ **Y X 和的典型相关变量为*'*)(X a i 和*'*)(Y b i ,其中i i a C a 1* ,i i b G b 1* (p i ,,2,1 );而i i b a 和是Y X 和的第i 对典型相关变量的系数.⑵ ],[])(,)[(''*'**'*Y b X a Y b X a i i i i ,即线性变换不改变相关性. 证明详见参考文献【2】.ⅱ对于样本典型相关有:⑴ **Y X 和的典型相关变量为*'*)(X a i 和*'*)(Y b i ,其中i i a C a 1* ,i i b G b 1* (p i ,,2,1 );而i i b a 和是Y X 和的第i 对典型相关变量的系数.⑵ ],[])(,)[(''*'**'*Y b X a r Y b X a r i i i i ,即线性变换不改变相关性. 证明:⑴ 设**Y X 和的典型相关变量分别为*'*)(X a U i ,*'*)(Y b V i由于 i i a C a 1* ,i i b G b 1*d X C X '*,h Y G Y '*所以 d C a X a d X C C a d X C a C U i i i i '1''''1'''1)()()()()(h G b Y b h Y G G b h Y G b G V i i i i '1''''1'''1)()()()()(即有i i b a 和是Y X 和的第i 对典型相关变量的系数. ⑵ 由⑴的证明可知*'*)(X a U i d C a X a i i '1'')( *'1'''*)()(h G b Y b Y b V i i i由于d C a i '1')( 与h G b i '1')( 都是常数,所以],[])(,)([])(,)[('''1'''1''*'**'*Y b X a r h G b Y b d C a X a r Y b X a r i i i i i i i i 即有线性变换不改变相关性.性质5 简单相关、复相关和典型相关之间的关系当1 q p , Y X 与之间的(惟一)典型相关就是它们之间的简单相关;当Y X q p 与时或,11 之间的(惟一)典型相关就是它们的复相关.复相关是典型相关的一个特例,而简单相关又是复相关的一个特例.从第一个典型相关的定义可以看出,第一个典型相关系数至少同)(Y X 或的任一分量与)(X Y 或的复相关系数一样大,即使所有这些复相关系数都很小,第一个典型相关系数仍可能很大;同样,从复相关的定义也可以看出,当1 p (或1 q )时,)()(X Y Y X 或与或之间的复相关系数也不会小于)()(X Y Y X 或与或的任一分量之间的相关系数,即使所有这些相关系数都很小,复相关系数仍可能很大.第4章 典型相关系数的显著性检验设总体Z 的两组变量'21),,,(p X X X X ,'21),,,(q Y Y Y Y ,且'),(Y X Z ),(~ q p N ,在做两组变量X ,Y 的典型相关分析之前,首先应该检验两组变量是否相关,如果不相关,则讨论两组变量的典型相关就毫无意义. 1.考虑假设检验问题:0H :021 m1H :m ,,,21 至少有一个不为零其中 q p m ,m in .若检验接受0H ,则认为讨论两组变量之间的相关性没有意义;若检验拒绝0H ,则认为第一对典型变量是显著的.上式实际上等价于假设检验问题0H :0),(12 Y X Cov , 1H :012用似然比方法可导出检验0H 的似然比统计量||||||2211S S S其中q p 阶样本离差阵S 是 的最大似然估计,且S =22211211S S S S ,11S ,22S 分别是11 ,22 的最大似然估计.该似然比统计量 的精确分布已由霍特林(1936),Girshik (1939)和Anderson (1958)给出,但表达方式很复杂,又不易找到该分布的临界值表,下面我们采用 的近似分布.利用矩阵行列式及其分块行列式的关系,可得出:||·||||21122121122S S S S S S =|S S S S |·|S |·||21-12212-1111122 p S所以)1(001001||212212112212111ipi p p S S S S其中 2i是'TT 的特征值(2122122111S S S T ),按大小次序排列为 2122 02 p,当1 n 时,在0H 成立下 ln 0m Q 近似服从2f 分布,这里pq f ,)1(211 q p n m ,因此在给定检验水平 之下,若由样本算出的20 Q 临界值,则否定0H ,也就是说第一对典型变量1 U ,1V 具有相关性,其相关系数为1 ,即至少可以认为第一个典型相关系数1为显著的.将它除去之后,再检验其余1 p 个典型相关系数的显著性,这时用Bartlett 提出的大样本2 检验计算统计量:pi ip22223221)1()1()1)(1(则统计量11ln )]1(212[ q p n Q近似地服从(1 p )(1 q )个自由度的2分布,如果21 Q ,则认为2显著,即第二对典型变量2U ,2V 相关,以下逐个进行检验,直到某一个相关系数k检验为不显著时截止.这时我们就找出了反映两组变量相互关系的1 k 对典型变量.2.检验)(0k H : ),,2(0p k k当否定0H 时,表明Y X ,相关,进而可以得出至少第一个典型相关系数01 ,相应的第一对典型相关变量11,V U 可能已经提取了两组变量相关关系的绝大部分信息.两组变量余下的部分可认为不相关,这时0 k ),,2(p k ,故在否定0H 后,有必要再检验)(0k H ),,2(p k ,即第k 个及以后的所有典型相关系数均为0),,3,2(p k .为了减少计算量,下面我们采用二分法来减少检验次数,取检验统计量为p ki i k q p k n Q )1ln()]1(21[2它近似服从)1)(1( k q k p 个自由度的2 分布.在检验水平 下,若)]1)(1[(2k q k p Q k ,则拒绝0H ,即认为第k 对典型相关系数在显著性水平 下是显著的,否则不显著.从第2个典型相关系数到第p 个典型相关系数,共1 p 个数,所以根据二分法的原理,将它们分为一个区间 p ,2,然后先检验第 21p 个典型相关系数即中位数,当021p 时,即认为第 21p 个典型相关系数不相关,否定原假设,接着检验21,2p ;若当021p 时,则检验p p ,21.如此划分区间依次检验下去,由数学分析上的区间套定理,一定存在第k 个数),,3,2(p k ,使得01 k ,而0 k .以上的一系列检验实际上是一个序贯检验,检验直到对某个k 值0H 未被拒绝为止.事实上,检验的总显著性水平已不是 了,且难以确定.还有,检验的结果易受样本容量大小的影响.因此,检验的结果只宜作为确定典型变量个数的重要参考依据,而不宜作为惟一的依据.第5章 典型相关分析的计算步骤及应用实例5.1 典型相关分析的计算步骤设)()1(,,n X X 为取自正态总体的样本(实际上,相当广泛的情况下也对),每个样品测量两组指标,分别记为'1),,(p X X X ,'1),,(q Y Y Y ,原始资料矩阵为:)(212122221222211121111211q p n nq n n np n n q p q p y y y x x x y y y x x xy y y x x x第一步 计算相关矩阵R ,并将R 剖分为22211211R R R R R 其中11R ,22R 分别为第一组变量和第二组变量之间的相关系数矩阵,'2112R R 为第一组与第二组变量之间的相关系数.第二步 求典型相关系数及典型变量首先求2112212111R R R R A的特征根 2i,特征向量)(1i D;1211121122R R R R B的特征根2i,特征向量)(2i D.)()(111)(i i D D,)()(212)(i i D D写出样本的典型变量为 X U ’)1(1,Y V ’)1(1X U ’)2(2,Y V ’)2(2X U p p ’)(,Y V p p ’)(第三步 典型相关系数的显著性检验 首先,检验第一对典型变量的相关系数,即0H :0^1 ,1H :0^1它的似然比统计量为pi i p1^2^2^22^211)1()1()1)(1(则统计量11ln )]1(212[ q p n Q给定显著性水平 ,查表得2,若21 Q ,则否定0H ,认为第一对典型变量相关,否则不相关.如果相关则依次逐个检验其余典型相关系数,直到某一个相关系数^k ),,2(p k 检验为不显著时截止.5.2 实例分析例1:某康复俱乐部对20名中年人测量了三个生理指标:体重)(1x 、腰围(2x )、脉搏(3x )和三个训练指标:引体向上(1y )、起坐次数(2y )、跳跃次数(3y ).数据如附录1:解:记'321),,(x x x X ,'321),,(y y y Y ,其中样本容量20 n .附录1中的数据用SPSS 统计软件计算得六个变量之间的相关矩阵如下:n Sig.(2-tailed) .113 .127. .526 .340 .884 N 20 20 20 202020 Y1Pearson Correlatio n -.390 -.552(*) .1511 .696(**).496(*)Sig.(2-tailed) .089 .012.526 . .001 .026 N 20 20 20202020Y2PearsonCorrelatio n -.493(*)-.646(**).225 .696(**) 1 .669(**)Sig.(2-tailed) .027 .002.340 .001 . .001 N 20 20 20 202020 Y3Pearson Correlatio n -.226 -.191 .035.496(*) .669(**)1Sig.(2-tailed) .337 .419.884 .026 .001 . N 20 2020202020** Correlation is significant at the 0.01 level (2-tailed).* Correlation is significant at the 0.05 level (2-tailed).即样本相关矩阵为:11R =1353.0366.01870.0122R =1669.0496.01696.01'2112R R =035.0225.0151.0192.0646.0552.0226.0493.0390.0于是特征方程 022112212111 R R R R用Matlab 求得矩阵2112212111R R R R 的特征值分别为0.6630、0.0402和0.0053,于是 797.01 ,201.02 ,073.03下面我们进行典型相关系数的显著性检验,先检验第一对典型变量的相关系数,欲检验:0H :01 , 1H :01 它的似然比统计量为)1)(1)(1(2322211 =3504.0)0053.01)(0402.01)(6330.01( 255.163504.0ln 5.15ln )]333(2120[11 Q查2 分布表得,919.16)9(205.0 ,因此在05.0 的显著性水平下,)9(205.01 Q ,所以拒绝原假设0H ,也即认为第一对典型相关变量是显著相关的.然后检验第二对典型变量的相关系数,即进一步检验:0H :02 , 1H :02它的似然比统计量为9547.0)0053.01)(0402.01()1)(1(23222 )4(488.9745.09547.0ln 08.16ln ])333(21120[205.02212 Q 所以无法否定原假设0H ,故接受0H :02 ,即认为第二对典型相关变量不是显著相关的.由以上检验可知只需求第一对典型变量即可. 于是求797.01 的特征向量 *1,而*1*12112211R R ,解得059.0579.1775.0*1,716.0054.1350.0*1 , 因此,第一对样本典型变量为*3*2*1*1059.0579.1775.0x x x u *3*2*1*1716.0054.1350.0y y y vY X 与第一对典型变量的相关系数为797.01 ,可见两者的相关性较为密切,即可认为生理指标与训练指标之间存在显著相关性.例2:为了研究某企业不同部门人员工作时间的关系,随机选取25个企业进行入户调查,达到25个被访企业业务部门和技术部门经理每月工作时间和员工每月工作时间(单位为小时),具体数据如附表2分析:设业务部门经理和员工每月工作时间为(21,X X ),技术部门经理和员工每月工作时间为(21,Y Y ),利用典型相关分析研究企业业务部门和技术部门人员工作时间的关系.解:样本容量为25 n ,2 p ,2 q 分别为随机变量Y X 与的维数.⑴ 标准化随机变量'21),(X X X 与'21),(Y Y Y .根据样本均值i x与标准差ii S ,依照公式iiiki ki S x x x*,对数据标准化.⑵ 求解Y X 的相关矩阵R ,并将其分块yy yxxy xx R RR R R . 将数据输入SPSS 软件求得相关系数矩阵如下:Correlations** Correlation is significant at the 0.01 level (2-tailed).所以样本相关矩阵1834.0705.0705.01693.0711.01735.01R 分块后2222 yy yx xy xx R RR R R ⑶ 求解534949.0538840.0538840.0544309.011111yx yy xy xx R R R R M 的两个非零特征根,解得两个非零特征根为6218.021 ,0029.022 .⑷ 进行相关系数的显著性检验,取r m 个显著性检验不为0的特征根.Y X 与第一对典型变量的相关系数为7885.01 ,Y X 与第二对典型变量的相关系数为0537.02 .先检验第一对典型变量的相关系数,假设01H :01 (即第一对典型变量不相关),由典型相关系数的值可得3771.0)1)(1(22211计算统计量97.203771.0ln )5.224(ln )]1(21)1[(11 q p n Q 对于给定的显著性水平05.0488.9)4()1)(1(97.20205.021 m q m p Q所以否定零假设.01H :01 ,即第一对典型变量是显著相关的.然后检验第二对典型变量的相关系数,假设02H :02 (即第二对典型变量不相关),由典型相关系数的值可得9971.0)1(222 计算统计量05945.09971.0ln )5.224(ln )]1(21)2[(22 q p n Q 对于给定的显著性水平05.0841.3)1()1)(1(05945.0205.022 m q m p Q所以无法否定假设.02H :02 ,即第二对典型变量不是显著相关的.由以上检验可知,只需求第一对典型变量即可.⑸ 求1 m 个显著性检验不为0的特征根21 的特征向量1l ,而11111l R R m yx yy,解得'1)521548.0,55216.0( l ,'1)538134.0,504018.0( m .⑹ 求出r 对典型相关变量X l u j j ' ,Y m v j j ' ,.,,2,1m j 根据上面求得的特征向量11m l 和,得第一对典型相关变量为21'1121'11538134.0504018.0521548.055216.0Y Y Y m v X X X l u Y X 与第一对典型变量的相关系数为7885.01 ,可见其相关性较为密切.⑺ 由于21'11521548.055216.0X X X l u ,与业务部门经理和员工每月工作时间都成正比,而且系数差不多,所以u可以解释为业务部门人员工作时间.同1理v可以解释为技术部门人员的工作时间.可见一个企业技术部门和业务部门人1员月工作时间存在显著的相关性.典型相关分析是一种采用类似主成分分析的做法,在每一组变量中都选择若干个有代表性的综合指标(变量的线性组合),通过研究两组的综合指标之间的关系来反映两组变量之间的相关关系.在实际中,只须着重研究相关关系较大的那几对典型相关变量.本文首先根据典型相关分析的统计理论,初步探讨了总体典型相关变量和典型相关系数,然后重点讨论了样本典型相关分析,以及它们的一系列性质与显著性检验,并做了相应的实例分析.通过实例分析,我们进一步明确了典型相关分析是研究两组变量之间相关性的一种降维技术的统计分析方法.而复相关是典型相关的一个特例,简单相关是复相关的一个特例.第一对典型相关包含有最多的有关两组变量间相关的信息,第二对其次,其他对依次递减.各对典型相关变量所含的信息互不重复.并且经标准化的两组变量之间的典型相关系数与原始的两组变量间的相应典型相关系数是相同的.本文是在我的指导老师吴可法教授的精心指导和悉心关怀下完成的,在我的学习生涯和论文工作中无不倾注着老师的辛勤汗水和殷切关怀.吴老师宽厚的人格、敏捷的思维、严谨的治学态度、渊博的知识、积极向上的人生态度、平易近人的师长风范和两年来的谆谆教导,使我深受启迪,并永远铭记在心.从吴老师身上,我不仅学到了扎实的专业知识和技能,更学到了做人的道理,这些教诲必将成为惠及一生的宝贵财富.在此谨向吴老师致以最衷心的感谢和美好的祝愿!论文期间,我得到了许多老师和同学的帮助,本人在这里对他们致以衷心的感谢.我还要感谢我的家人,是他们的理解、支持和鼓励,使我的学习能够顺利进行.最后衷心感谢在百忙之中评审论文和参加答辩的各位专家、教授!。

SPSS典型相关分析

SPSS典型相关分析
还可以得到每个典型变量V和第一组变量的相关系数 见表6以及每个典型变量W和第二组变量的相关系数 见表7.
表6
第18页/共23页
表7
从这两个表中可以看出,V1主要和变量hed相关 (0.99329),而V2主要和led(0.92484)及net (0.75305)相关;W1主要和变量arti(0.99696)及 man(0.92221)相关,而W2主要和com(0.81123) 相关;这和它们的典型系数是一致的。
表1 相关性的若干检验
第12页/共23页
表2给出了特征根(Eigenvalue),特征根所占的百分比 (Pct)和累积百分比(Cum. Pct)和典型相关系数(Canon Cor)及其平方(Sq. Cor)。看来,头两对典型变量(V, W) 的累积特征根已经占了总量的99.427%。它们的典型相 关系数也都在0.95之上。
第14页/共23页
表3 未标准化系数 表4 标准化系数
第15页/共23页
可以看出,头一个典型变量V1相应于前面第一个(也是最 重要的)特征值,主要代表高学历变量hed;而相应于前面 第二个(次要的)特征值的第二个典型变量V2主要代表低 学历变量led和部分的网民变量net,但高学历变量在这里起 负面作用。 从表4中可以得到第一变量的头三个典型变量V1、 V2、V3中的V1 和V2的表达式:
12.3 典型相关分析的实例分析
例12.1为研究业内人士和观众对于一些电视节目的观点 的关系,对某地方30个电视节目做了问卷调查并给出 了平均评分。观众评分来自低学历(led)、高学历(hed) 和网络(net)调查三种,它们形成第一组变量;而业内人 士分评分来自包括演员和导演在内的艺术家(arti)、发 行(com)与业内各部门主管(man)三种,形成第二组变 量。参加图12.1,数据间TV.Sav。

统计分析中常见的错误与注意事项

统计分析中常见的错误与注意事项

统计分析中常见的错误与注意事项统计分析是研究中常用的方法之一,可以帮助我们了解数据的特征、推断总体的属性,并做出相应的决策。

然而,在进行统计分析时,由于各种原因常常出现错误,这些错误可能导致结果的失真,甚至使得我们得出错误的结论。

因此,正确地理解和遵守统计分析中的注意事项至关重要。

本文将介绍统计分析中常见的错误并提供相应的注意事项,以帮助您避免这些错误并获得准确的分析结果。

首先,数据收集是统计分析的第一步,但数据收集过程中常常出现的错误之一是样本选择偏倚。

样本选择偏倚指的是样本不具有代表性,不能反映总体的特征。

为了避免样本选择偏倚,我们应该采用随机抽样的方法,确保每个个体有相等的机会被选中,并且该样本能够充分代表总体。

其次,数据质量问题也是统计分析中常见的错误。

数据质量问题包括数据缺失、数据异常和数据错误等。

在进行统计分析之前,我们应该仔细检查数据的完整性和准确性。

如果发现数据缺失,我们应该采取适当的补充方法,并考虑使用合理的插补技术。

同时,对于异常值和错误数据,我们也需要进行检查和处理,以确保数据的质量。

另一个常见的错误是在统计分析中滥用假设检验。

假设检验是统计学中常用的方法,用于判断样本是否代表了总体。

然而,由于对假设检验的理解不当,往往导致错误的结论。

在进行假设检验时,我们应该明确研究的目的和问题,并选择适当的假设检验方法。

此外,我们也应该注意对假设检验结果的正确解读和合理推断。

另一个常见的错误是在进行统计分析时忽略了样本容量的影响。

样本容量是指样本的大小或样本中观测值的数量。

样本容量的大小会影响统计分析的结果和结论的可靠性。

当样本容量较小时,我们应该使用适当的方法,如准确度更高的置信区间,来更好地描述总体特征。

另一方面,当样本容量较大时,我们可以更自信地进行推断。

此外,我们在进行统计分析时还需要注意多重比较的问题。

多重比较指的是对多个假设进行多次比较,从而增加发生错误的概率。

为了避免多重比较问题,我们可以使用适当的校正方法,如Bonferroni校正,来控制错误的发生。

医学论文中常用统计分析方法错误大全

医学论文中常用统计分析方法错误大全

医学论文中常用统计分析方法错误大全在医学研究领域,准确和恰当的统计分析是得出可靠结论的关键。

然而,在众多医学论文中,却存在着各种各样的统计分析方法错误,这些错误可能会导致研究结果的偏差甚至错误解读,从而影响医学研究的质量和临床实践的指导价值。

接下来,我们就来详细探讨一下医学论文中常见的统计分析方法错误。

一、样本量计算错误样本量的合理计算对于研究的可靠性和有效性至关重要。

许多研究在设计阶段未能充分考虑研究的主要目的、预期效应大小、检验效能以及显著性水平等因素,导致样本量过小或过大。

样本量过小可能使研究无法检测到真实存在的差异,从而得出假阴性结论;样本量过大则会造成资源浪费,同时可能增加研究的复杂性和误差。

例如,在一项比较新药物与传统药物疗效的临床试验中,如果预期的疗效差异较小,而研究者没有充分考虑这一点,计算出的样本量不足,那么即使新药物实际上更有效,也可能由于样本量的限制而无法得出有统计学意义的结果。

二、数据类型错误医学研究中数据类型多样,包括计量资料(如身高、体重、血压等)、计数资料(如疾病的发生例数、治愈例数等)和等级资料(如疾病的严重程度分为轻、中、重)。

错误地判断数据类型会导致选择错误的统计分析方法。

例如,将原本属于计数资料的数据(如疾病的治愈与未治愈),错误地当作计量资料进行 t 检验,这样得出的结果是不准确的。

反之,将计量资料当作计数资料处理,也会造成同样的问题。

三、选择错误的统计检验方法不同的研究问题和数据类型需要相应的统计检验方法。

常见的错误包括:在多个组间比较时,错误地使用 t 检验而不是方差分析;在非正态分布的数据中使用参数检验方法;在不符合独立性假设的情况下使用独立样本检验等。

比如,在比较三种不同治疗方法对患者生存率的影响时,应该使用方差分析或非参数的KruskalWallis 检验,而不是多次进行两两t 检验,因为这样会增加一类错误(即假阳性)的概率。

四、忽视方差齐性检验在进行 t 检验和方差分析时,通常需要先进行方差齐性检验。

数据分析之相关分析的原理方法误区及生活实例01

数据分析之相关分析的原理方法误区及生活实例01

数据分析之相关分析的原理方法误区及生活实例一、相关性“万物皆有联”,是大数据一个最重要的核心思维。

所谓联,这里指的就是事物之间的相互影响、相互制约、相互印证的关系。

而事物这种相互影响、相互关联的关系,在统计学上就叫做相关关系,简称相关性。

世界上的所有事物,都会受到其它事物的影响:•HR经常会问:影响员工离职的关键原因是什么?是工资还是发展空间?•销售人员会问:哪些要素会促使客户购买某产品?是价格还是质量?•营销人员会问:影响客户流失的关键因素有哪些?是竞争还是服务等?•产品设计人员:影响汽车产品受欢迎的关键功能有哪些?价格、还是动力等?所有的这些商业问题,转化为数据问题,不外乎就是评估一个因素与另一个因素之间的相互影响或相互关联的关系。

而分析这种事物之间关联性的方法,就是相关性分析方法。

当然,有相关关系,并不一定意味着是因果关系。

但因果关系,则一定是相关关系。

在过去,传统的统计模型主要是用来寻找影响事物的因果关系,所以过去也叫影响因素分析。

但是,从统计学方法来说,因果关系一定会有统计显著,但统计显著并不一定就是因果关系,所以准确地说,影响因素分析应该改为相关性分析。

所以,在不引起混淆的情况下,我们也会用影响因素分析。

二、相关性的种类及相关性分析方法客观事物之间的相关性,大致可归纳为两大类:一类是函数关系,一类是统计关系。

•函数关系,就是两个变量的取值存在一个函数关系来唯一描述。

比如,销售额与销售量之间的关系,可用函数y=px(y表示销售额,p表示单价,x表示销售量)来表示。

所以,销售量和销售额存在函数关系。

这一类确定性的关系,不是我们关注的重点。

•统计关系,指的是两事物之间的非一一对应关系,即当变量x取一定值时,另一个变量y虽然不唯一确定,但按某种规律在一定的可预测范围内发生变化。

比如,子女身高与父母身高、广告费用与销售额的关系,是无法用一个函数关系唯一确定其取值的,但这些变量之间确实存在一定的关系。

  1. 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
  2. 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
  3. 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。

相关程度 ,这种相关程度越强 ,说明变量间多重共线 性越严重 , 反之 , xj 与其他变量的线性相关程度越 弱 ,说明变量间的多重共线性越弱 。 ( 2) 病态指数法 。根据矩阵行列式的性质 ,矩阵 的行列式等于其特征根的连乘积 。因而当行列式
| X′ X | ≈0 时 , 矩阵 X′ X 至少有一个特征根近似于
零 。反之 ,可以证明 , 当矩阵 X′ X 至少有一个特征 根近似为零时 , X 必存在多重共线性 。 多重共线性的程度常常用病态指数来衡量 。称
CIi =
λ m , ( i = 1 ,2 , …, p) 为特征根的病态指数 ,其 λ i
中 ,这里的 λ X 的最大特征根 。病态指数度 m 是 X′ 量了矩阵 X′ X 的特征根散布程度 , 可以用来判断多 重共线性是否存在以及多重共线性的严重程度。一 般认为 ,0 < CI < 10 时 , 认为 X 没有多重共线性 ;10 ≤CI < 100 时 , 认为 X 存在较强的多重共线性 ; 当
2 2
典型相关分析中的统计检验问题
兰州商学院 傅德印 黄 健 一、 典型相关分析适用性检验 典型相关分析是研究两组变量之间相关关系的 一种统计方法 ,但是并非所有的截面数据都适合于 典型相关分析 。典型相关分析是在原始数据满足一 定条件和假设的前提下进行的 , 这些条件包括原始 变量要服从多元正态分布 , 样本容量至少要大于原 始变量个数 ,这些假设包括两组变量之间要具有相 关性 ,每组原始变量中能够综合出典型变量 ,即原始 变量组内要有一定的相关性等 。若这些条件和假设 无法满足 ,就不能进行典型相关分析 。所以 ,应用典 型相关分析时 ,首先要对其适用性进行检验分析 。 ( 一) 原始变量组内相关性检验 进行典型相关分析时 , 既要求原始变量组内存 在一定相关性 ,但是又不能存在高度的多重共线性 。 为此 ,典型相关分析适用性的检验 ,首先是从原始变 量组内相关性检验开始的 。具体包括 : 11 原始变量组内存在一定相关性的假设检验 。 检验的方法可以借鉴主成分分析适用性的检验方 法 ,运用巴特莱特球性检验来进行 。 巴特莱特球性检验是从原始数据整个相关矩阵 出发进行的检验 , 检验的原假设是相关矩阵为单位 矩阵 ,如果不能拒绝原假设 ,说明原始变量之间相互 独立 ,不适合进行典型相关分析 。事实上 ,如果原始 数据的相关矩阵是一个单位矩阵 , 各个原始变量之 间互不相关 ,这时进行典型相关分析 ,则得到和原始 变量个数一样的典型变量 , 而且典型变量就是各个
2 λ ^i 2 。 1-λ ^i
检验的原假设为 : H0 :Σ12 = 0 H1 :Σ12 ≠ 0。 设 Z - N p + q (μ ,Σ) , 用似然比方法可导出似然 比统计量 Λ=
| S| , | S 11 | | S 22 |
对于上述四种统计量 , 原假设均为所有对应典 型变量的典型相关系数等于 0 , 如果检验得到统计 量的显著性水平小于等于 0105 , 则拒绝 H0 , 表明相 关显著 。 二、 典型相关系数的显著性检验 计算典型相关系数是典型相关分析中最重要的 环节 ,但是并不是所有求出的典型相关系数都是显 著相关的 ,这就必须要对典型相关系数的显著性进
=
i= r
7
p
2 (1 - λ ^ i) , 2
31 其他近似统计量检验法 。 ( 1) 威尔克斯 Λ 统计量 =
i =1
Q r 近似服从χ 分布 ,自由度为 ( p - r + 1) ( q r + 1) 。若在给定的显著性水平 α 下 , Q r 大于等于
7
m
(1 - λ ^ i ) ,其中 λ ^i
・ 110 ・
统计研究
2008 年 7 月
名义收入定标规则更适合目前我国的国情 , 它不存 在像通货膨胀定标规则和泰勒规则那样的技术性问 题 ,现阶段在我国实施名义收入定标规则更具可行 性 。而且 ,名义收入定标规则能够为我国货币政策 提供一个参照尺度 , 可以较好地衡量货币政策的松 紧 。即使将来以利率为政策工具 , 名义收入定标规 则也有用武之地 。所以 , 不应忽视对名义收入定标 规则的研究 。现阶段 , 应加大对名义收入定标规则 的研究力度 ,根据我国的实际情况 ,制定一个优化的 动态相对变化率区间 , 有效促进我国货币政策的平 稳运作 。
Qr = - [ n - r 2
在相关性 。 21 近似的 F 检验法 。即当 n →∞, 在 H0 成立 时有 F = 其中 , t =
1Πt 1- Λ
Λ1Πt

2
df 2 近似服从 F ( df 1 , df 2 ) 分布 。 df 1
p q - 4 , df 1 = pq , w = n - ( p + q 2 2 p + q - 5
原始变量自身 ,显然是不适合进行典型相关分析的 。
21 原始变量组内变量高度多重共线性的检验 。
典型相关分析要求原始变量组内要存在一定的相关 性 ,但同时又要求原始变量之间不能有高度的多重 共线性 ,否则也将不能产生典型变量 ,导致不能进行 典型相关分析 。检验原始变量组内是否存在高度的 多重共线性 ,可以采用如下的检验方法 : (1) 可决系数和方差膨胀因子法 。对于每组变 量 ,分别以其中的每个变量为被解释变量 ( 因变量) , 其他变量为解释变量做回归 , 用 R j 表示任意 xj 为 被解释变量 ,其他变量为解释变量做线性回归的可 决系数 , 由于 R j 度量了 xj 与其他解释变量的线性
CI ≥ 100 时 ,则认为存在严重的多重共线性 。
除上述外 , 还可以根据简单相关系数矩阵来判 断原始变量内部是否存在严重多种共线性 。一般而 言 ,如果每两个解释变量的简单相关系数比较高 ,如 大于 019 ,则可认为存在着较严重的多重共线性 。 ( 二) 原始变量组间线性相关性检验 典型相关分析中 ,原始变量总体 Z 中的两组变 量 X , Y 如果不相关 , 即 COV ( X , Y) = Σ12 = 0 , 则有 关两组变量典型相关的讨论以及典型相关系数的计 算就毫无意义了 。原始变量组间相关性检验 , 即是 典型相关分析适用性的检验 , 同时又是对典型相关 系数的整体检验 。所谓整体检验是同时检验所有的 典型相关系数看是否有一个是显著的。为此 , 这里
1 ( p + q + 1) , Q = ≤ C} ,这里 m = ( n - 1) 2 2 m lnΛ 近似服从χ ( f ) 分布 , 自由度 f = pq 。于是在 给定的显著性水平 α 下 , 当由样本计算的 Q 大于 2 χ α 临界值时 , 拒绝原假设 , 认为两组原始变量间存
λ 0 ( r = 2 ,3 , …, m ) 。维度递减检验具体有两种 r ≠ 做法 : 一是采用巴特莱特大样本的 χ 检验 , 一是采 用近似的 F 检验 。 2 ( 一) 巴特莱特大样本的 χ 检验 - 1 - 1 对于矩阵 A = ( S 11 S 12 S 22 S 21 ) 的 m 个特征值 , 当 n 充分大 , H0 成立时 ,检验第 r 个典型相关系数 的显著性时的统计量为 :
2
2
临界值时 ,则拒绝原假设 H0 , 则至少可以认为第 r 对典型变量具有相关性 , 相关系数为 λ r , 且为显著 的。
( 二) 近似的 F 检验
-1 -1 表 示 A = ( S 11 S 12 S 22 S 21 ) 的 特 征 根 , 这 里 m
= min ( p , q) 。
m
( 2) 皮莱 ( Pillai ) 迹统计量 =
p、 q 分别为两组原始变量的个数 ,Λr 为上述的统计
量 。当近似 F 统计值大于统计量的临界值 F α ( df 1 ,
df 2 ) ,则拒绝 H0 ,接受 H1 ,即认为第 r 个典型相关系
四、 几点讨论 将上述典型相关分析的适用性检验和典型相关 系数的显著性检验结合起来 , 则可以形成典型相关 分析统计检验体系的基本框架 。为了恰当应用典型 相关分析 ,充分发挥典型相关分析的作用 ,建议在应 用典型相关分析时应按照上述框架进行相应的统计 检验 。当然 ,上述体系一方面还需要完善之处 ,另一 方面 ,在实际应用中 ,即使是根据上述内容都进行了 统计检验 ,但也还会存在许多考虑不周之处 ,还要注 意以下问题 :
m
i =1
2 λ ^i 。 ∑
当 n 充分大 , H0 成立时 ,近似服从 F ( df 1 , df 2 ) 分布 。其中 ,
t =
(3 ) 劳 雷2霍 特 林 ( Hotelling2Lawley ) 迹 统 计 量 =
i =1
。 ∑1 - λ ^
2
i
λ ^i
2
( p - r + 1) 2 ( q - r + 1) 2 - 4 , df 1 = ( p - r + 1) 2 + ( q - r + 1) 2 - 5
= min ( p , q) ) ,备择假设 H1 : 至少一个典型相关系数
在具体应用中 ,由于似然比统计量 Λ 的精确分 布很复杂 ,常常使用的是它的近似统计量 。由 Λ 出 发导出检验 H0 的近似统计量 ,可有如下检验方法 :
11 近似的 χ 检验法 。根据巴特莱特证明 , 当
2
n →∞, 在 H0 成立时有 P{ - m lnΛ ≤ C} = P{ Q
11 关于原始数据的总体分布问题 。一般来说 , 典型相关分析要求原始变量服从正态分布 。但在严 格意义上 ,如果变量的分布形式比如高度偏态不会 降低其他变量的相关关系 , 典型相关分析是可以包 含这种非正态变量的 。有时由于多元正态性检验不
i =1
其中 p + q 阶矩阵 S 是Σ 的最大似然估计 , S 11 ,
S 22 分别是 Σ11 ,Σ12 的最大似然估计 。利用矩阵行列
相关文档
最新文档