数据分析实验报告(二)
浙江理工大学实验报告
实验项目名称非参数秩检验方法所属课程名称数据分析
实验类型综合型实验
实验日期
班级
学号
姓名
成绩
【实验目的及要求】
掌握两种处理方法比较的秩检验方法和步骤；掌握成对分组设计下两种处理方法的比较方法；掌握多种处理方法比较的Kruskal-Wallis检验方法；掌握分组设计下多种处理方法的比较方法。了解多组差别秩和检验的注意事项。
【实验原理】
非参数方法具有较好的稳健性，同时有较广泛的适用性。非参数方法繁多，数据的秩是数据本身最基本的信息之一，基于数据的大小排列次序进行统计推断称之为非参数秩方法。对于随机分组下两种处理方法的比较可以用Wilcoxon秩和检验和Kolmogorov-Smirnov检验；为消除试验前个体的差异，进行成对分组设计下两种处理方法的比较，可做符号检验Wilcoxon符号秩检验；在随机分组模型下多种处理方法比较，可用Kruskal-Wallis检验方法进行比较；为避免因个体原有差异对多个处理方法比较的影响，需要进行分组设计下多种处理方法的比较。
【实验环境】
CPU T5100 1.3G；RAM 1024M。
Windows XP；SPSS 15.0等。
【实验方案设计】
（1）在随机分组模型下，两种处理方法比较的秩检验方法是进行非参数秩和检验。选取下面问题的数据进行检验：从24朵大小相近的小蘑菇中随机选出13朵施以维生素B1，另外11朵不施维生素B1，其他条件保持相同。一段时间后测得两组蘑菇的重量。检验维生素B1对刺激蘑菇生长的作用是否显著。
（2）为消除试验前个体的差异，进行成对分组设计下两种处理方法的比较。选取从下面问题的数据进行比较分析：为了检验一种新的复合肥料和原来肥料相比是否显著提高了小麦的产量，在一个农场中选择了10块田地，每块等分为两份，其中一部分使用新的复合肥料，另一部分使用原肥料。小麦成熟后称得各部分小麦的产量。利用符号秩和以及Wilcoxon符号秩和检验法检验这两种催化剂对该产品得率的影响是否显著。
（3）在随机分组模型下多种处理方法比较，可用Kruskal-Wallis检验方法
进行比较。选取从下面问题的数据进行比较分析：选取某年我国各地区（省、区、市）地区生产总值，检验各地区生产总值有无显著差异，并对各地区生产总值平均得分排序。
（4）为避免因个体原有差异对多个处理方法比较的影响，需要进行分组设计下多种处理方法的比较。选取下面问题的数据进行比较分析：研究人们在睡眠状态下对各种情绪的反应力是否有差异，选取8人进行试验。在睡眠状态下，按要求每人按任意次序做出恐惧、愉快、忧虑和平静4种反应。测得在四种情绪状态反应下，受试者皮肤的电位变化值。检验受试者在催眠状态下对这4中情绪的反应力是否有显著差异。
【实验过程】（实验步骤、记录、数据、分析）
（1）打开SPSS软件，输入两组蘑菇的重量数据以及对是否使用维生素B1进行标记。点Analyze菜单按钮中的Nonparametric Tests命令项中的 2 Dependent Samples…命令，跳出命令框后将左侧“蘑菇重量”调到右边的Test variables栏中，将左侧“是否使用维生素B1”调到右边的Grouping variables栏中，再点击Define Groups，输入1和2；再在Test type中点击Mann-Whitney U和Kolmogorov-Smirnov Z钮，再点击 OK 钮。
结果为
分析：从秩的实验结果看，未使用维生素B1的蘑菇重量的平均秩仅为7.27，使用维生素B1的蘑菇重量的平均秩为16.92，两者差别较显著。从检验统计量的结果看，Wilcoxon W统计量的值为80.0，正态逼近下检验的p值为0.001（双侧），精确计算的p值小于0.001；Kolmogorov-Smirnov Z统计量为1.775，正态逼近下检验的p值为0.004（双侧），精确计算的p值小于0.002（双侧）；因而在显著性水平为0.05或者0.01下，认为使用维生素B1与否对蘑菇的生长重量有着极其显著的差别。
（2）打开SPSS软件，输入小麦成熟后称得各部分小麦的产量的数据。点Analyze菜单按钮中的Nonparametric Tests命令项中的 2 Related Samples…命令，跳出命令框后将左侧“复合肥料，原肥料”调到右边的Test Pair(s) List栏中；在Test type中点击Wilcoxon 和Sign选项，在点击Exact…选项，进入Exact Tests复选框，点击Exact，点击 Continue ，点击Option按钮，选Statistics, 点击 Continue钮返回2-Related-Samples Test对话框，再点击 OK 钮。
符号检验结果：
Wilcoxon符号秩和检验输出结果
符号检验输出结果
分析：从描述性统计量表中，我们得到新复合肥料和原来肥料的产量均值为388.20和360.50，而二者的方差十分接近。从秩的实验结果看，“原肥料产量—新复合肥料产量”的秩中负号的有8，正号的个数为2，各自的秩的绝对值分别5.88和4.00，二者有差别。从检验统计量的结果看，符号检验的p值为0.109（双侧），0.055（单侧），在显著性水平为0.05下，可以认为新肥料与原肥料对小麦的产量没有显著差别，或说新复合肥料对小麦产量的影响没有优于原肥料对小麦的产量的影响；而Wilcoxon 符号秩检验Z统计量的值为-1.988，正态逼近下检验的p值为0.047（双侧），精确计算的p值为0.049（双侧）和0.024（单侧），因而在显著性水平为0.05下，认为新复合肥料对小麦产量的影响显著优于原肥料对小麦产量的影响。从结果中可以看出，符号检验和Wilcoxon 符号秩检验得到两个不同的结论。这说明，就所给数据而言，符号检验不足以区分两种肥料对提高小麦产量的差异，而Wilcoxon 符号秩检验比符号检验在探测差异性方面更有效。
（3）打开SPSS软件，输入我国各地区（省、区、市）地区生产总值的数据。点Analyze菜单按钮中的Nonparametric Tests命令项中的K Dependent Samples…命令，跳出命令框后将左侧“生产总值”调到右边的Test variables 栏中，将左侧“地区”调到右边的Grouping variables栏中，再点击Define Groups，输入最小值为1和最大值6；再在Test type中点击Kruskal-Wallis 钮，再点击 OK 钮。
检验结果：
分析：从Ranks表中，秩的实验结果看出，华北、东北、华东、中南、西南和西北各地区生产总值的平均秩分别为17.60、17.33、23.99、19.55、9.40和5.80，其中华东地区最大，西北地区最小，且二者差距的绝对值较大。从Test 检验统计量表中可以得到，检验统计量卡方等于14.531，正态逼近的检验的p值为0.013，蒙特卡洛模拟计算下的p值为0.005，所以在显著性水平为0.01下，即拒绝原假设，认为我国各个地区的国民生产总值有显著差异。
（4）打开SPSS软件，输入在四种情绪状态反应下，受试者皮肤的电位变化值的数据。点Analyze菜单按钮中的Nonparametric Tests命令项中的K Related Samples…命令，跳出命令框后将左侧“恐惧，愉快，忧虑和平静”调到右边的Test List栏中；在Test type中点击Friedman选项，在点击Exact…选项，进入Exact Tests复选框，点击Exact，点击 Continue 钮返回K-Related-Samples Test对话框；点击statistics...钮，选择descriptive，点击 Continue 钮返回K-Related-Samples Test对话框，再点击 OK 钮。
结果输出：
分析：从描述性统计表中，可以看出四种情绪电位值的改变的均值差别不大，分别为27.825 ，25.4125,23.875和23.1875。各自的方差差别也不大。从秩的结果看，恐惧时电位改变值的秩的平均值最大为3.38。从Friedman检验的结果看，卡方统计量的值为6.450，正态逼近和精确计算的p值为0.092，精确计算的p值为0.094，在显著性水平为0.1下，认为四种情绪的反应力有显著差异，在显著性水平为0.05下，认为四种情绪的反应力则没有有显著差异。
【小结】
通过本次实验，基本掌握了两种处理方法比较的秩检验方法，成对分组设计下两种处理方法的比较，多种处理方法比较的Kruskal-Wallis检验方法以及分组设计下多种处理方法的比较方法，知道上述几种非参数比较方法的区别和联系，了解在何种情形下正确选择上述几种非参数比较方法，多组差别秩和检验的注意事项。
【指导教师评语及成绩】
指导教师：
批阅日期：
数据分析实验报告
数据分析实验报告 文稿归稿存档编号：[KKUY-KKIO69-OTM243-OLUI129-G00I-FDQS58-
第一次试验报告 习题1.3 1建立数据集，定义变量并输入数据并保存。 2数据的描述，包括求均值、方差、中位数等统计量。 分析—描述统计—频率，选择如下： 输出： 统计量 全国居民 农村居民 城镇居民 N 有效 22 22 22 缺失 均值 1116.82 747.86 2336.41 中值 727.50 530.50 1499.50 方差 1031026.918 399673.838 4536136.444 百分位数 25 304.25 239.75 596.25 50 727.50 530.50 1499.50 75 1893.50 1197.00 4136.75 3画直方图，茎叶图，QQ 图。（全国居民） 分析—描述统计—探索，选择如下： 输出： 全国居民 Stem-and-Leaf Plot Frequency Stem & Leaf 5.00 0 . 56788 数据分析实验报告 【最新资料，WORD 文档，可编辑修改】
2.00 1 . 03 1.00 1 . 7 1.00 2 . 3 3.00 2 . 689 1.00 3 . 1 Stem width: 1000 Each leaf: 1 case(s) 分析—描述统计—QQ图，选择如下： 输出： 习题1.1 4数据正态性的检验：K—S检验，W检验数据： 取显着性水平为0.05 分析—描述统计—探索，选择如下：（1）K—S检验
结果：p=0.735 大于0.05 接受原假设，即数据来自正太总体。 （2 ）W 检验 结果：在Shapiro-Wilk 检验结果972.00 w ，p=0.174大于0.05 接受原假设，即数据来自正太总体。 习题1.5 5 多维正态数据的统计量 数据：
社会科学研究数据分析与仿真实验室软件建设方案
社会科学研究数据分析与仿真实验室软件建设方案 基于政策方针的研究路径，针对数据收集、数据分析（规则提取）和仿真建模等三个主要阶段，为了满足政策方针各研究步骤的软件工具需要，政策分析实验室软件建设大致可以分为下列几大部分： 1.数据采集（合计58.2万元）PASW Data Collection25用户授权58.2万元 软件简介：Data Collection 是SPSS公司和IBM合并后的一款支持调查研究的软件平台，详见附件“PASW Data Collection产品介绍”。 2.数据分析（合计74.8万元）（1）统计分析软件（三大统计软件的介绍从略）（合计36.4万元）SAS EM模块学科带头人版本 3.3万元注：人大已经购买了SAS22模块版本，本次可以购买数据挖掘模块（EM模块）予以补充完善。 SPSS20用户授权10.8万元 SPSS CLEMENTINE20用户授权10.8万元注：这一软件是SPSS的数据挖掘模块STATA20用户授权11.5万元 （2）博弈分析软件（合计38.4万元）GAMS10用户授权18.6万元注：数学规划与优化高级建模软件（博弈分析软件），详见“百度百科”。 Xpress10用户授权19.8万元注：这一软件同样是一款博弈分析的软件，案例介绍中有供水管理的例子可供“水项目”参考（优化实例文件第15章），具体软件介绍和 实例详见附件。 3.仿真（合计81.6万元）（1）通用仿真软件 Anylogic1个用户专业版授权19万注：该软件仿真功能强大，为政策分析实验室核心2个用户专业版授权27万软件，每个专业版授权可获赠10个教育版授 3个用户专业版授权39万权，详见附件。 （2）领域仿真软件 Enterprise Dynamics (ED) 基本包（生产仓储仿真）+物流网络规划模块10用户授权7万元 基本包（生产仓储仿真）+应急疏散模块10用户授权7万元 基本包（生产仓储仿真）+机场解决方案模块10用户授权15万元 注：软件介绍详见附件 Autotrack 1用户授权9.6万元注：交通基础设施仿真软件，详见附件。 4.其他（合计43万元）Decision Tools 10用户授权31万元注：风险分析模拟软件，详见附件。 Risk Simulation 1用户授权6万元注：风险分析模拟软件，详见附件。 Vanguard System 1用户授权6万元注：风险分析模拟软件，详见附件。
数据分析实验报告
《数据分析》实验报告 班级： 07信计0班 学号： 姓名： 实验日期 2010-3-11 实验地点： 实 验楼505 实验名称： 样本数据的特征分析 使用软件名称：MATLAB 1. 熟练掌握利用Matlab 软件计算均值、方差、协方差、相关系数、标准差 与变异系数、偏度与峰度，中位数、分位数、三均值、四分位极差与极差; 2. 熟练掌握jbtest 与lillietest 关于一元数据的正态性检验； 3. 掌握统计作图方法； 4. 掌握多元数据的数字特征与相关矩阵的处理方法； 安徽省1990-2004年万元工业GDP 废气排放量、废水排放量、固体废物排放 量以及用于污染治理的投入经费比重见表 6.1.1,解决以下问题： 表6.1.1 实 验 目 的
1. 计算各指标的均值、方差、标准差、变异系数以及相关系数矩阵； 2. 计算各指标的偏度、峰度、三均值以及极差； 3?做出各指标数据直方图并检验该数据是否服从正态分布？若不服从正态分布，利用boxcox变换以后给出该数据的密度函数； 4.上网查找1990-2004江苏省万元工业GDR废气排放量，安徽省与江苏省是否 服从同样的分布？
程序如下： clear;clc format ba nk %保留两位小数 %%%%%%%%%%%安徽省%数据%%%%%%%%%%%%%%%%%% A=[104254.40 519.48 441.65 0.18 94415.00 476.97 398.19 0.26 89317.41 119.45 332.14 0.23 63012.42 67.93 203.91 0.20 45435.04 7.86 128.20 0.17 46383.42 12.45 113.39 0.22 39874.19 13.24 87.12 0.15 38412.85 37.97 76.98 0.21 35270.79 45.36 59.68 0.11 35200.76 34.93 60.82 0.15 35848.97 1.82 57.35 0.19 40348.43 1.17 53.06 0.11 40392.96 0.16 50.96 0.12 37237.13 0.05 43.94 0.15 34176.27 0.06 36.90 0.13]; %计算各指标的均值、方差、标准差、变异系数、偏度、峰度以及极差 A1=[mea n(A);var(A);std(A);std(A)./mea n(A);skew ness(A,0);kurtosis(A,0)-3;ra nge( A)] %E均值 A2=[1/4 1/2 1/4]*prctile(A,[25 50 75]) % 十算各指标的相关系数矩阵 A3=corrcoef(A) %做岀各指标数据直方图 subplot(221),histfit(A(:,1),8) subplot(222),histfit(A(:,2),8) subplot(223),histfit(A(:,3),8) subplot(224),histfit(A(:,4),7) %检验该数据是否服从正态分布 for i=1:4 [h(i),p(i),lstat(i),cv(i)]=lillietest(A(:,i),0.05); end h,p %十算岀前二列不服从正态分布，利用boxcox变换以后给岀该数据的密度函数[t1,l1]=boxcox(A(:,1)) [t2,l2]=boxcox(A(:,2)) [t3,I3]=boxcox(A(:,3))
大数据分析技术与应用_实验2指导
目录 1实验主题 (1) 2实验目的 (1) 3实验性质 (1) 4实验考核方法 (1) 5实验报告提交日期与方式 (1) 6实验平台 (1) 7实验内容和要求 (1) 8实验指导 (2) 8.2 开启Hadoop所有守护进程 (2) 8.2 搭建Eclipse环境编程实现Wordcount程序 (3) 1.安装Eclipse (3) 2.配置Hadoop-Eclipse-Plugin (3) 3.在Eclipse 中操作HDFS 中的文件 (7) 4.在Eclipse 中创建MapReduce 项目 (8) 5.通过Eclipse 运行MapReduce (13) 6.在Eclipse 中运行MapReduce 程序会遇到的问题 (16)
1实验主题 1、搭建Hadoop、Eclipse编程环境 2、在Eclipse中操作HDFS 3、在Eclipse中运行Wordcount程序 4、参照Wordcount程序，自己编程实现数据去重程序 2实验目的 （1）理解Hadoop、Eclipse编程流程； （2）理解MapReduce架构，以及分布式编程思想； 3实验性质 实验上机内容，必做，作为课堂平时成绩。 4实验考核方法 提交上机实验报告，纸质版。 要求实验报告内容结构清晰、图文并茂。 同学之间实验报告不得相互抄袭。 5实验报告提交日期与方式 要求提交打印版，4月19日（第10周）之前交到软件学院412。 6实验平台 操作系统：Linux Hadoop版本：2.6.0或以上版本 JDK版本：1.6或以上版本 Java IDE：Eclipse 7实验内容和要求 （1）搭建Hadoop、Eclipse编程环境； （2）运行实验指导上提供的Wordcount程序； （3）在Eclipse上面查看HDFS文件目录； （4）在Eclipse上面查看Wordcount程序运行结果； （5）熟悉Hadoop、Eclipse编程流程及思想； 程序设计题，编程实现基于Hadoop的数据去重程序，具体要求如下： 把data1文件和data2文件中相同的数据删除，并输出没有重复的数据，自己动手实现，把代码贴到实验报告的附录里。 设计思路： 数据去重实例的最终目标是让原始数据中出现次数超过一次的数据在输出文件中只出现一次。具体就是Reduce的输入应该以数据作为Key，而对value-list则没有要求。当Reduce 接收到一个
数据分析实验报告
《数据分析》实验报告 班级：07信计0班学号：姓名：实验日期2010-3-11 实验地点：实验楼505 实验名称：样本数据的特征分析使用软件名称：MATLAB 实验目的1.熟练掌握利用Matlab软件计算均值、方差、协方差、相关系数、标准差与变异系数、偏度与峰度，中位数、分位数、三均值、四分位极差与极差； 2.熟练掌握jbtest与lillietest关于一元数据的正态性检验； 3.掌握统计作图方法； 4.掌握多元数据的数字特征与相关矩阵的处理方法； 实验内容安徽省1990-2004年万元工业GDP废气排放量、废水排放量、固体废物排放量以及用于污染治理的投入经费比重见表6.1.1，解决以下问题：表6.1.1废气、废水、固体废物排放量及污染治理的投入经费占GDP比重 年份 万元工业GDP 废气排放量 万元工业GDP 固体物排放量 万元工业GDP废 水排放量 环境污染治理投 资占GDP比重 （立方米）（千克）（吨）（%）1990 104254.40 519.48 441.65 0.18 1991 94415.00 476.97 398.19 0.26 1992 89317.41 119.45 332.14 0.23 1993 63012.42 67.93 203.91 0.20 1994 45435.04 7.86 128.20 0.17 1995 46383.42 12.45 113.39 0.22 1996 39874.19 13.24 87.12 0.15 1997 38412.85 37.97 76.98 0.21 1998 35270.79 45.36 59.68 0.11 1999 35200.76 34.93 60.82 0.15 2000 35848.97 1.82 57.35 0.19 2001 40348.43 1.17 53.06 0.11 2002 40392.96 0.16 50.96 0.12 2003 37237.13 0.05 43.94 0.15 2004 34176.27 0.06 36.90 0.13 1.计算各指标的均值、方差、标准差、变异系数以及相关系数矩阵； 2.计算各指标的偏度、峰度、三均值以及极差； 3.做出各指标数据直方图并检验该数据是否服从正态分布？若不服从正态分布，利用boxcox变换以后给出该数据的密度函数； 4.上网查找1990-2004江苏省万元工业GDP废气排放量，安徽省与江苏省是 否服从同样的分布？
数值分析实验报告
学生实验报告实验课程名称 开课实验室 学院年级专业班 学生姓名学号 开课时间至学年学期
if(A(m,k)~=0) if(m~=k) A([k m],:)=A([m k],:); %换行 end A(k+1:n, k:c)=A(k+1:n, k:c)-(A(k+1:n,k)/ A(k,k))*A(k, k:c); %消去end end x=zeros(length(b),1); %回代求解 x(n)=A(n,c)/A(n,n); for k=n-1:-1:1 x(k)=(A(k,c)-A(k,k+1:n)*x(k+1:n))/A(k,k); end y=x; format short;%设置为默认格式显示,显示5位 （2）建立MATLAB界面 利用MA TLAB的GUI建立如下界面求解线性方程组： 详见程序。 五、计算实例、数据、结果、分析 下面我们对以上的结果进行测试，求解：
? ? ? ? ? ? ? ? ? ? ? ? - = ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? - - - - - - 7 2 5 10 13 9 14 4 4 3 2 1 13 12 4 3 3 10 2 4 3 2 1 x x x x 输入数据后点击和，得到如下结果： 更改以上数据进行测试，求解如下方程组： 1 2 3 4 43211 34321 23431 12341 x x x x ?? ???? ?? ???? ?? ???? = ?? ???? - ?? ???? - ???? ?? 得到如下结果：
实验数据分析中的
实验数据分析中的 误差、概率和统计 §1 实验测量及误差 §2 粒子物理实验的测量数据 §3 粒子物理实验的数据分析 §1 实验测量及误差 大量科学问题（自然科学、社会科学）的研究与解决依赖于实验或测量数据（包括统计数据）。 §1.1 实验测量的目的及分类 》目的： 得到一个或多个待测量的数值及误差（确定数值）； 确定多个量之间的函数关系（寻找规律，确定分布）。 》分类： 1. 测量方式 直接测量 － 用测量仪器直接测得待测量 （尺量纸的长度） 间接测量 － 直接测量量为x r ，待测量为 y r ，y r 是x r 的函数 ()y f x =r r 例如待测量为大楼高度h ， 实测量为距离和仰角,x θ， 则tan h x θ=。 绝大部分问题是间接测量问题。 2. 测量过程 静态测量 － 待测量在测量过程中不变 多次测量求得均值 动态测量 － 待测量在测量过程中变化 例雷达站测离飞行气球的距离 多次测量求得气球的运动轨迹 3. 测量对象 待测量 － 固定常量 待测量 － 随机变量 例放射源单位时间内的计数 （假定寿命极长） 每次测量值不一定相同。
粒子物理实验数据分析中处理的都是间接、动态、随机变量的测量和处理问题。 随机变量―― 一次测量所得的值是不确定的， 无穷多次测量，一定测量值的概率是确定的。（统计规律性） 离散随机变量――测量值是离散的分立值（掷硬币和扔骰子试验） 二项分布、泊松分布、多项分布。 连续随机变量――测量值一个区间内的所有值 均匀分布、指数分布、正态分布、2 χ分布、F 分布、t 分布。 描述随机变量的特征量――概率分布或概率密度 非负性、 可加性、 归一性 ()0.f x ≥ 2 33 1 2 1 ()()().x x x x x x f x dx f x dx f x dx +=??? () 1.f x dx Ω =? ()0.i P x ≥ ()()().i j i j P x x P x P x ?=+ 1 () 1.n i i P x ==∑ 期望值（概率意义上的平均值） 离散型 ()()i i i E X x p x μ==∑ 连续型 ()xf x dx Ω= ? 方差（标准离差σ的平方） 离散型 2() ()(),i i i V X x p x μ=-∑ 连续型 2()()().V X x f x dx Ω μ=-? §1.2 测量误差及其分类 1．报导误差的重要性 ? 物理量的测量值及其误差是衡量其可靠性及精度的依据。 ? 没有误差的结果是没有意义的，因而是无法引用的。 ? 要改正只给测量中心值、不给误差的坏习惯。
数据分析实验报告
数据分析实验报告 【最新资料，WORD文档，可编辑修改】 第一次试验报告 习题1.3 1建立数据集，定义变量并输入数据并保存。 2数据的描述，包括求均值、方差、中位数等统计量。 分析—描述统计—频率，选择如下： 输出：
方差1031026.918399673.8384536136.444百分位数25304.25239.75596.25 50727.50530.501499.50 751893.501197.004136.75 3画直方图，茎叶图，QQ图。（全国居民） 分析—描述统计—探索，选择如下： 输出： 全国居民Stem-and-Leaf Plot Frequency Stem & Leaf 9.00 0 . 122223344 5.00 0 . 56788 2.00 1 . 03 1.00 1 . 7 1.00 2 . 3 3.00 2 . 689
1.00 3 . 1 Stem width: 1000 Each leaf: 1 case(s) 分析—描述统计—QQ图，选择如下： 输出： 习题1.1 4数据正态性的检验：K—S检验，W检验数据： 取显着性水平为0.05 分析—描述统计—探索，选择如下：（1）K—S检验 单样本Kolmogorov-Smirnov 检验 身高N60正态参数a,,b均值139.00
标准差7.064 最极端差别绝对值.089 正.045 负-.089 Kolmogorov-Smirnov Z.686 渐近显着性(双侧).735 a. 检验分布为正态分布。 b. 根据数据计算得到。 结果：p=0.735 大于0.05 接受原假设，即数据来自正太总体。（2）W检验
数据仓库与数据挖掘实验二(多维数据组织与分析)
一、实验内容和目的 目的： 1．理解维（表）、成员、层次（粒度）等基本概念及其之间的关系； 2．理解多维数据集创建的基本原理与流程； 3．理解并掌握OLAP分析的基本过程与方法； 内容： 1．运用Analysis Server工具进行维度、度量值以及多维数据集的创建（模拟案例）。 2．使用维度浏览器进行多维数据的查询、编辑操作。 3．对多维数据集进行切片、切块、旋转、钻取操作。 二、所用仪器、材料（设备名称、型号、规格等） 操作系统平台：Windows 7 数据库平台：SQL Server 2008 SP2 三、实验原理 在数据仓库系统中，联机分析处理（OLAP）是重要的数据分析工具。OLAP的基本思想是企业的决策者应能灵活地、从多方面和多角度以多维的形式来观察企业的状态和了解企业的变化。 OLAP是在OLTP的基础上发展起来的，OLTP是以数据库为基础的，面对的是操作人员和低层管理人员，对基本数据的查询和增、删、改等进行处理。而OLAP是以数据仓库为基础的数据分析处理。它具有在线性（online）和多维分析（multi-dimension analysis）的特点。OLAP超越了一般查询和报表的功能，是建立在一般事务操作之上的另外一种逻辑步骤，因此，它的决策支持能力更强。 建立OLAP的基础是多维数据模型，多维数据模型的存储可以有多种不同的形式。MOLAP和ROLAP是OLAP的两种主要形式，其中MOLAP（multi-dimension OLAP）是基
于多维数据库的OLAP，简称为多维OLAP；ROLAP（relation OLAP）是基于关系数据库的OLAP，简称关系OLAP。 OLAP的目的是为决策管理人员通过一种灵活的多维数据分析手段，提供辅助决策信息。基本的多维数据分析操作包括切片、切块、旋转、钻取等。随着OLAP的深入发展，OLAP也逐渐具有了计算和智能的能力，这些能力称为广义OLAP操作。 四、实验方法、步骤 要求：利用实验室和指导教师提供的实验软件，认真完成规定的实验内容，真实地记录实验中遇到的各种问题和解决的方法与过程，并根据实验案例绘出多维数据组织模型及其OLAP操作过程。实验完成后，应根据实验情况写出实验报告。 五、实验过程原始记录(数据、图表、计算等) 本实验以实验一建立的数据仓库为基础，使用Microsoft的SQL Server Business Intelligence Development Studio工具，建立OLAP相关模型，并实现OLAP的一些简单基本功能。 首先打开SQL Server Business Intelligence Development Studio工具，新建一个Analysis Service项目，命名为：DW
【最全最详细】数据分析与挖掘实验报告
《数据挖掘》实验报告 目录 1.关联规则的基本概念和方法 (2) 1.1数据挖掘 (2) 1.1.1数据挖掘的概念 (2) 1.1.2数据挖掘的方法与技术 (2) 1.2关联规则 (3) 1.2.1关联规则的概念 (3) 1.2.2关联规则的实现——Apriori算法 (4) 2.用Matlab实现关联规则 (6) 2.1Matlab概述 (6) 2.2基于Matlab的Apriori算法 (7) 3.用java实现关联规则 (11) 3.1java界面描述 (11) 3.2java关键代码描述 (14) 4、实验总结 (19) 4.1实验的不足和改进 (19) 4.2实验心得 (20)
1.关联规则的基本概念和方法 1.1数据挖掘 1.1.1数据挖掘的概念 计算机技术和通信技术的迅猛发展将人类社会带入到了信息时代。在最近十几年里，数据库中存储的数据急剧增大。数据挖掘就是信息技术自然进化的结果。数据挖掘可以从大量的、不完全的、有噪声的、模糊的、随机的实际应用数据中，提取隐含在其中的，人们事先不知道的但又是潜在有用的信息和知识的过程。 许多人将数据挖掘视为另一个流行词汇数据中的知识发现（KDD）的同义词，而另一些人只是把数据挖掘视为知识发现过程的一个基本步骤。知识发现过程如下：·数据清理（消除噪声和删除不一致的数据） ·数据集成（多种数据源可以组合在一起） ·数据转换（从数据库中提取和分析任务相关的数据） ·数据变换（从汇总或聚集操作，把数据变换和统一成适合挖掘的形式） ·数据挖掘（基本步骤，使用智能方法提取数据模式） ·模式评估（根据某种兴趣度度量，识别代表知识的真正有趣的模式） ·知识表示（使用可视化和知识表示技术，向用户提供挖掘的知识）。 1.1.2数据挖掘的方法与技术 数据挖掘吸纳了诸如数据库和数据仓库技术、统计学、机器学习、高性能计算、模式识别、神经网络、数据可视化、信息检索、图像和信号处理以及空间数据分析技术的集成等许多应用领域的大量技术。数据挖掘主要包括以下方法。 神经网络方法：神经网络由于本身良好的鲁棒性、自组织自适应性、并行处理、分布存储和高度容错等特性非常适合解决数据挖掘的问题，因此近年来越来越受到人们的关注。典型的神经网络模型主要分3大类：以感知机、bp反向传播模型、函数型网络为代表的，用于分类、预测和模式识别的前馈式神经网络模型；以hopfield的离散模型和连续模型为代表的，分别用于联想记忆和优化计算的反馈式神经网络模型；以art模型、koholon模型为代表的，用于聚类的自组织映射方法。神经网络方法的缺点是"黑箱"性，人们难以理解网络的学习和决策过程。 遗传算法：遗传算法是一种基于生物自然选择与遗传机理的随机搜索算法，是一种仿生全局优化方法。遗传算法具有的隐含并行性、易于和其它模型结合等性质使得它在数据挖掘中被加以应用。sunil已成功地开发了一个基于遗传算法的数据挖掘工具，利用该工具对两个飞机失事的真实数据库进行了数据挖掘实验，结果表明遗传算法是进行数据挖掘的有效方法之一。遗传算法的应用还体现在与神经网络、粗糙集等技术的结合上。如利用遗传算法优化神经网络结构，在不增加错误率的前提下，删除多余的连接和隐层单元；用遗传算法和bp算法结合训练神经网络，然后从网络提取规则等。但遗传算法的算法较复杂，收敛于局部极小的较早收敛问题尚未解决。 决策树方法：决策树是一种常用于预测模型的算法，它通过将大量数据有目的分类，从
实验现象和实验数据的搜集整理与分析
实验现象和实验数据的搜集整理与分析 一．问题阐述 实验现象和数据是定量实验结果的主要表现形式，亦是定量研究结果的主要证据。数据对于实验教学来讲，有着重要的意义和价值。然而在我们的教学中，不尊重事实，漠视实验数据的现象仍经常出现，具体分析，在小学科学实验数据教学中主要存在以下一些问题： （一）数据收集存在的问题 1.数据收集不真实 如《摆的研究》一课教学中，由于测量的次数多，时间紧，而测同一摆重或同一摆长前后时间又几近相同，于是有小组就根据前面的实验数据，推测了后面的数据。又如教学《热是怎样传递的》一课时，有一小组的火柴掉下来的顺序明明不是有规律地从左往右，但听到其他小组火柴都是从左往右有顺序地掉下来，于是他们也修改了自己的数据。 2.数据收集不准确 如教学《水和食用油的比较》一课时，教师引导学生把水和食用油分别装入相同的试管中来比较，结果教学中却出现了相反的现象——装油的试管比装水的试管还要重，原来是装水的试管壁薄，装油的试管壁厚，实验准备时教师并没有发现这个现象，结果出现了上述问题。 3.数据收集不全面 教师在收集数据过程中，各小组虽然都做了同一个实验，但教师只挑选1-2个组的实验表进行展示汇报，而其他组的实验数据一概不论，就草草作结论，这样的实验过程和结果很难说服所有人，也很容易出错。 （二）数据整理存在的问题 1.整理方式简单 课堂上教师比较重视设计小组或个人填写的实验数据表格，但对全班汇总的实验数据形式容易忽视，呈现方式比较简单。在数据呈现时，要么逐一呈现小组原始记录单，要么按小组顺序呈现数据，平时更少使用统计图来整理。黑板上数据显得杂乱无章，不易发现其中的规律。 2.数据取舍不清
数值分析实验(2)word版本
数值分析实验(2)
实验二 插值法 P50 专业班级：信计131班 姓名：段雨博 学号：2013014907 一、实验目的 1、熟悉MATLAB 编程； 2、学习插值方法及程序设计算法。 二、实验题目 1、已知函数在下列各点的值为 试用4次牛顿插值多项式()4P x 及三次样条函数()S x （自然边界条件）对数据进行插值用图给出(){},,0.20.08,0,1,11,10i i i x y x i i =+=，()4P x 及()S x 。 2、在区间[]1,1-上分别取10,20n =用两组等距节点对龙格函数()2 1125f x x = +作多项式插值及三次样条插值，对每个n 值，分别画出插值函数及()f x 的图形。 3、下列数据点的插值 可以得到平方根函数的近似，在区间[]0,64上作图 （1）用这9个点作8次多项式插值()8L x （2）用三次样条（第一边界条件）程序求()S x 从得到结果看在[]0,64上，哪个插值更精确；在区间[]0,1上，两种插值哪个更精确？ 三、实验原理与理论基础
1、拉格朗日差值公式 )()(111k k k k k k x x x x y y y x L ---+ =++ 点斜式 k k k k k k k k x x x x y x x x x y x L --+--=++++11111)( 两点式 2、n 次插值基函数 ....,2,1,0,)()(0n j y x l y x L i j n k k k j n ===∑= n k x x x x x x x x x x x x x l n k n k k k k k ,...,1,0,) () (... ) () (... ) () ()(1100=------= -- 3、牛顿插值多项式 ...))(](,,[)](,[)()(102100100+--+++=x x x x x x x f x x x x f x f x P n ))...(](,...,[100---+n n x x x x x x f )(],...,,[)()()(10x x x x f x P x f x R n n n n +=-=ω 4、三次样条函数 若函数],,[)(2b a C x S ∈且在每个小区间],[1+j j x x 上是三次多项式，其中， b x x x a n =<<<=...10是给定节点，则称)(x S 是节点n x x x ,...,,10上的三次样条函数。若在节点j x 上给定函数值),,...,2,1,0)((n j x f y j i ==并成立,,...,2,1,0,)(n j y x S i j ==则称)(x S 为三次样条插值函数。 5、三次样条函数的边界条件 （1）0)()(''''''00''====n n f x S f x S （2）'''00')(,)(n n f x S f x S == 四、实验内容 1、M 文件： function [p]=Newton_Polyfit(X,Y) format long g r=size(X); n=r(2); M=ones(n,n); M(:,1)=Y'; for i=2:n
数据分析与挖掘实验报告
数据分析与挖掘实验报告
《数据挖掘》实验报告 目录 1.关联规则的基本概念和方法 (1) 1.1数据挖掘 (1) 1.1.1数据挖掘的概念 (1) 1.1.2数据挖掘的方法与技术 (2) 1.2关联规则 (5) 1.2.1关联规则的概念 (5) 1.2.2关联规则的实现——Apriori算法 (7) 2.用Matlab实现关联规则 (12) 2.1Matlab概述 (12) 2.2基于Matlab的Apriori算法 (13) 3.用java实现关联规则 (19) 3.1java界面描述 (19) 3.2java关键代码描述 (23) 4、实验总结 (29) 4.1实验的不足和改进 (29) 4.2实验心得 (30)
1.关联规则的基本概念和方法 1.1数据挖掘 1.1.1数据挖掘的概念 计算机技术和通信技术的迅猛发展将人类社会带入到了信息时代。在最近十几年里，数据库中存储的数据急剧增大。数据挖掘就是信息技术自然进化的结果。数据挖掘可以从大量的、不完全的、有噪声的、模糊的、随机的实际应用数据中，提取隐含在其中的，人们事先不知道的但又是潜在有用的信息和知识的过程。 许多人将数据挖掘视为另一个流行词汇数据中的知识发现（KDD）的同义词，而另一些人只是把数据挖掘视为知识发现过程的一个基本步骤。知识发现过程如下： ·数据清理（消除噪声和删除不一致的数据）·数据集成（多种数据源可以组合在一起）·数据转换（从数据库中提取和分析任务相关的数据） ·数据变换（从汇总或聚集操作，把数据变换和统一成适合挖掘的形式） ·数据挖掘（基本步骤，使用智能方法提取数
据模式） ·模式评估（根据某种兴趣度度量，识别代表知识的真正有趣的模式） ·知识表示（使用可视化和知识表示技术，向用户提供挖掘的知识）。 1.1.2数据挖掘的方法与技术 数据挖掘吸纳了诸如数据库和数据仓库技术、统计学、机器学习、高性能计算、模式识别、神经网络、数据可视化、信息检索、图像和信号处理以及空间数据分析技术的集成等许多应用领域的大量技术。数据挖掘主要包括以下方法。神经网络方法：神经网络由于本身良好的鲁棒性、自组织自适应性、并行处理、分布存储和高度容错等特性非常适合解决数据挖掘的问题，因此近年来越来越受到人们的关注。典型的神经网络模型主要分3大类：以感知机、bp反向传播模型、函数型网络为代表的，用于分类、预测和模式识别的前馈式神经网络模型；以hopfield 的离散模型和连续模型为代表的，分别用于联想记忆和优化计算的反馈式神经网络模型；以art 模型、koholon模型为代表的，用于聚类的自组
光电效应实验报告数据处理 误差分析
表1-1：不同频率下的遏止电压表 λ（nm）365 404.7 435.8 546.1 577 v（10^14）8.219 7.413 6.884 5.493 5.199 |Ua|(v) 1.727 1.357 1.129 0.544 0.418 表1-2：λ=365（nm）时不同电压下对应的电流值 U/(v)-1.927 -1.827 -1.727 -1.627 -1.527 -1.427 -1.327 I/(10^-11)A-0.4 -0.2 0 0.9 3.9 8.2 14 -1.227 -1.127 -1.027 -0.927 -0.827 -0.727 -0.718 24.2 38.1 52 66 80 97.2 100 表1-3：λ=404.7（nm）时不同电压下对应的电流值 U/(v) -1.477 -1.417 -1.357 -1.297 -1.237 -1.177 -1.117 I/(10^-11)A -1 -0.4 0 1.8 4.1 10 16.2 -1.057 -0.997 -0.937 -0.877 -0.817 -0.757 -0.737 24.2 36.2 49.8 63.9 80 93.9 100 表1-4：λ=435.8（nm）时不同电压下对应的电流值 U/(v)-1.229 -1.179 -1.129 -1.079 -1.029 -0.979 -0.929 I/(10^-11)A-1.8 -0.4 0 2 4.2 10.2 17.9 -0.879 -0.829 -0.779 -0.729 -0.679 -0.629 -0.579 -0.575 24.8 36 47 59 71.6 83.8 98 100 表1-5：λ=546.1（nm）时不同电压下对应的电流值 U/(v)-0.604 -0.574 -0.544 -0.514 -0.484 -0.454 -0.424 I/(10^-11)A-4 -2 0 3.8 10 16.2 24 -0.394 -0.364 -0.334 -0.304 -0.274 -0.244 -0.242 34 46 56.2 72 84.2 98.2 100 表1-6：λ=577（nm）时不同电压下对应的电流值 U/(v)-0.478 -0.448 -0.418 -0.388 -0.358 -0.328 -0.298 I/(10^-11)A-3.1 -1.8 0 2 6 10.2 16.1 -0.268 -0.238 -0.208 -0.178 -0.148 -0.118 -0.088 -0.058 22.1 31.8 39.8 49 58 68.2 79.8 90.1 -0.04 100
数据分析实验报告p
第一次试验报告 习题1.3 1建立数据集，定义变量并输入数据并保存。 2数据的描述，包括求均值、方差、中位数等统计量。 分析—描述统计—频率，选择如下： 输出： 3画直方图，茎叶图，QQ 图。（全国居民） 分析—描述统计—探索，选择如下： 输出： 全国居民 Stem-and-Leaf Plot Frequency Stem & Leaf 5.00 0 . 56788 2.00 1 . 03 数据分析实验报告 【最新资料，WORD 文档，可编辑修改】
1.00 1 . 7 1.00 2 . 3 3.00 2 . 689 1.00 3 . 1 Stem width: 1000 Each leaf: 1 case(s) 分析—描述统计—QQ图，选择如下： 输出： 习题1.1 4数据正态性的检验：K—S检验，W检验 数据： 取显着性水平为0.05 分析—描述统计—探索，选择如下： （1）K—S检验 单样本 Kolmogorov-Smirnov 检验 身高 N 60 正态参数a,,b均值139.00 标准差7.064 最极端差别绝对值.089 正.045 负-.089 Kolmogorov-Smirnov Z .686 渐近显着性(双侧) .735 a. 检验分布为正态分布。 b. 根据数据计算得到。 结果：p=0.735 大于0.05 接受原假设，即数据来自正太总体。（2）W检验 正态性检验
结果：在Shapiro-Wilk 检验结果972.00=w ，p=0.174大于0.05 接受原假设，即数据来自正太总体。 习题1.5 5多维正态数据的统计量 均值向量为：)767.33,505.4,836.27,219.18(=- X
spss相关分析实验报告
实验五相关分析实验报关费 一、实验目的： 学习利用spss对数据进行相关分析(积差相关、肯德尔等级相关)、偏相关分析。利用交叉表进行相关分析。 二、实验内容： 某班学生成绩表1如实验图表所示。 1.对该班物理成绩与数学成绩之间进行积差相关分析和肯德尔等级相关 分析。 2.在控制物理成绩不变的条件下，做数学成绩与英语成绩的相关分析（这 种情况下的相关分析称为偏相关分析）。 3.对该班物理成绩与数学成绩制作交叉表及进行其中的相关分析。 三、实验步骤： 1.选择分析→相关→双变量，弹出窗口，在对话框的变量列表中选变量 “数学成绩”、“物理成绩”，在相关系数列进行选择，本次实验选择 皮尔逊相关（积差相关）和肯德尔等级相关。单击选项，对描述统计 量进行选择，选择标准差和均值。单击确定，得出输出结果，对结果 进行分析解释。 2.选择分析→相关→偏相关，弹出窗口，在对话框的变量列表选变量“数 学成绩”、“英语成绩”，在控制列表选择要控制的变量“物理成绩” 以在控制物理成绩的影响下对变量数学成绩与英语成绩进行偏相关分 析；在“显著性检验”框中选双侧检验，单击确定，得出输出结果， 对结果进行分析解释。 3.选择分析→描述统计→交叉表，弹出窗口，对交叉表的行和列进行选 择，行选择为数学成绩，列选择为物理成绩。然后对统计量进行设置， 选择相关性，点击继续→确定，得出输出结果，对结果进行分析解释。 四、实验结果与分析：
表1
五、实验结果及其分析：
分析一：由实验结果可观察出，数学成绩与物理成绩的积差相关系数r=，肯德尔等级相关系数r=可知该班物理成绩和数学成绩之间存在显著相关。
试验设计与数据分析
1.方差分析在科学研究中有何意义？如何进行平方和与自由度的分解？如何进行F检验和 多重比较？ （1）方差分析的意义 方差分析，又称变量分析，其实质是关于观察值变异原因的数量分析，是科学研究的重要工具。方差分析得最大公用在于：a. 它能将引起变异的多种因素的各自作用一一剖析出来，做出量的估计，进而辨明哪些因素起主要作用，哪些因素起次要作用。b. 它能充分利用资料提供的信息将试验中由于偶然因素造成的随机误差无偏地估计出来，从而大大提高了对实验结果分析的精确性，为统计假设的可靠性提供了科学的理论依据。 （2）平方和及自由度的分解 方差分析之所以能将试验数据的总变异分解成各种因素所引起的相应变异，是根据总平方和与总自由度的可分解性而实现的。 （3）F检验和多重比较 ①F检验的目的在于，推断处理间的差异是否存在，检验某项变异原因的效应方差是否为零。实际进行F检验时，是将由试验资料算得的F值与根据df1=df t（分子均方的自由度）、df2=df e（分母均方的自由度）查附表4（F值表）所得的临界F值（F0.05（df1，df2）和F0.01（df1，df2））相比较做出统计判断。若F< F0.05（df1，df2），即P>0.05，不能否定H0，可认为各处理间差异不显著；若F0.05（df1，df2）≤F＜F0.01（df1，df2），即0.01