高校大数据专业课程解析

高校大数据专业课程解析
高校大数据专业课程解析

高校大数据专业课程解析

从IT时代进入DT时代,高校在大数据方向上设置了哪些专业,具体学什么,就业怎么样,作为新兴专业,考生如何报考?

具体内容

专业名称:数据科学与大数据技术;

人才培养目标:以大数据为核心研究对象,利用大数据的方法解决具体行业应用问题。

学制:四年;学位:工学或理学学位。

目前已有35所高校申报了大数据专业:

第一批(3所):北京大学、对外经济贸易大学、中南大学;

第二批(32所):中国人民大学、复旦大学、北京邮电大学、华东师范大学、电子科技大学、北京信息科技大学、中北大学、长春理工大学、上海工程技术大学、上海纽约大学、浙江财经大学、广西科技大学、昆明理工大学、云南师范大学、云南财经大学、重庆理工大学、晋中学院、福建工程学院、黄河科技学院、湖北经济学院、佛山科学技术学院、广东白云学院、北京师范大学-香港浸会大学联合国际学院、成都东软学院、电子科技大学成都学院、贵州大学、贵州师范大学、安顺学院、贵州商学院、贵州理工学院、宁夏理工学、宿州学院。

数据科学与大数据技术专业都学些什么?

属于交叉学科:以统计学、数学、计算机为三大支撑性学科;生物、医学、环境科学、经济学、社会学、管理学为应用拓展性学科。此外还需学习数据采集、分析、处理软件,学习数学建模软件及计算机编程语言等,知识结构是二专多能复合的跨界人才(有专业知识、有数据思维)。

以中国人民大学为例:

基础课程(38学分):数学分析、高等代数、普通物理数学与信息科学概论、数据结构、数据科学导论、程序设计导论、程序设计实践。

必修课(37学分):离散数学、概率与统计、算法分析与设计、数据计算智能、数据库系统概论、计算机系统基础、并行体系结构与编程、非结构化大数据分析。

选修课:数据科学算法导论、数据科学专题、数据科学实践、互联网实用开发技术、抽样技术、统计学习、回归分析、随机过程。

数据科学与大数据技术专业人才需求情况怎样?

根据领英发布的《2016年中国互联网最热职位人才报告》显示,研发工程师、产品经理、人力资源、市场营销、运营和数据分析是中国护理万网行业需求最旺盛的职位。

目前国内有30万数据人才,预计2018年,大数据人才需求将有大幅增长,高端人才如大数据科学家的缺口在14万至19万之间;懂得利用大数据做决策的分析师和经理缺口达到150万,数据分析师

现在需求就很旺盛了,2年工作经验的月薪可达到8K,硕士学历的数据分析师月薪可达到12K,5年工作经验的可达到40万至60万元。

数据科学与大数据技术专业可以从事的工作有哪些?

重视数据的机构已经越来越多,上到国防部,下到互联网创业公司、金融机构需要通过大数据项目来做创新驱动,需要数据分析或处理岗位也很多;常见的食品制造、零售电商、医疗制造、交通检测等也需要数据分析与处理,如优化库存,降低成本,预测需求等。人才主要分成三大类:大数据系统研发类、大数据应用开发类、大数据分析类,热门岗位有:

1.大数据系统架构师

大数据平台搭建、系统设计、基础设施。

技能:计算机体系结构、网络架构、编程范式、文件系统、分布并行处理等。

2.大数据系统分析师

面向实际行业领域,利用大数据技术进行数据安全生命周期管理、分析和应用。

技能:人工智能、机器学习、数理统计、矩阵计算、优化方法。

3.hadoop开发工程师。

解决大数据存储问题。

4.数据分析师

不同行业中,专门从事行业数据搜集、整理、分析,并依据数据做出行业研究、评估和预测的专业人员。在工作中通过运用工具,提取、分析、呈现数据,实现数据的商业意义。

作为一名数据分析师,至少需要熟练SPSS、STATISTIC、Eviews、SAS、大数据魔镜等数据分析软件中的一门,至少能用Acess等进行数据库开发,至少掌握一门数学软件如matalab、mathmatics 进行新模型的构建,至少掌握一门编程语言。总之,一个优秀的数据分析师,应该业务、管理、分析、工具、设计都不落下。

5.数据挖掘工程师

做数据挖掘要从海量数据中发现规律,这就需要一定的数学知识,最基本的比如线性代数、高等代数、凸优化、概率论等。经常会用到的语言包括Python、Java、C或者C++,我自己用Python或者Java 比较多。有时用MapReduce写程序,再用Hadoop或者Hyp来处理数据,如果用Python的话会和Spark相结合。

6.大数据可视化工程师

随着大数据在人们工作及日常生活中的应用,大数据可视化也改变着人类的对信息的阅读和理解方式。从百度迁徙到谷歌流感趋势,再到阿里云推出县域经济可视化产品,大数据技术和大数据可视化都是幕后的英雄。

大数据可视化工程师岗位职责:

1、依据产品业务功能,设计符合需求的可视化方案。

2、依据可视化场景不同及性能要求,选择合适的可视化技术。

3、依据方案和技术选型制作可视化样例。

4、配合视觉设计人员完善可视化样例。

5、配合前端开发人员将样例组件化。

中国人民大学与人大、北大、中科院大学、中财、首经贸五校联合培养数据分析硕士第一届毕业生就业情况:

腾讯、百度等IT公司:22人;金融、银行等:21人;出国、读博等:5人;国家事业单位:6人;其它:2人;

共55人。

数据科学与大数据技术专业报考建议

当下企业用人现象:一个专业集群对应一个行业热点。大数据是交叉学科,走的是“复合型”培养路线,行业内从事相关职能的人专业背景各异。大数据作为人才培养方向在探索中,如果直接从各专业人才中遴选学苗开展硕士研究生阶段的教育会更适合一些,直接开设本科阶段的教育还相对不够成熟。人才培养与行业发展存在差距。由于教学大纲更新不会太及时,大数据人才7年毕业(本科四年、硕士研究生三年)后,所学恐怕落后于行业发展。

大数据人才的典型胜任特征:善于做需求分析、写代码;善于与人沟通,喜欢探索未知;需要根据数据推演、分析、提出解决方案,有数据思维;需要持续保持学习状态;内性格上能动能静。

不同办学层次的院校开设此专业,培养模式会有差异。例如,高职类院校学生由于数学基础相对薄弱,会跟多偏向于工具的使用,如数据清洗、数据存储以及数据可视化等相关工具的使用;本科院校会倾向于大数据相关基础知识全面覆盖性教学,在研究生段则会专攻某一技术领域,比如数据挖掘、数据分析、商业智能、人工智能等。

报考建议

注意规避如上缺点,制定、执行相应的解决方案。例如:报考前评估从目标院校毕业后能否在大数据行业中找到理想的职位,各高校一般会根据服务地区经济发展需求开设专业,前几届毕业生一般都有对口的就业机会;根据未来职业规划初步定为初始职位,在大学期间通过选修、培训等方式精修相关学科,夯实基础;对开设院校开设专业的实力进行评估,有些看似平凡的院校和大数据行业企业联合办学,实力不容小觑,例如贵州理工学院与阿里云合建的“贵州理工学院——阿里巴巴大数据学院”,计划

在5年内为贵州省培养1万名大数据专业技术人才,黄河科技学是与中科院、云和数据以及中国科普开等知名大数据相关研究机构及公司开展交流合作,在学校建立联合实验室、在企业设立学生实训基地,实现更好地培养人才;考生也可从相关专业(如应用统计学专业)跨考此专业的研究生,可实现快速切入,但还应注意关注行业发展最新状况并着重弥补能力差距。

大数据类专业有很多,不同院校开设情况不同,应注意比较择选,例如:

?清华大学数据科学研究院开设大数据专业,2014年开始招生;

?北大、人大等五校大数据分析硕士培养协同创新平台开设大数据分析专业,2014年开始招生;

?复旦大学计算机科学技术学院开设数据交通专业,2015年开始招生;

?北航交通科学与工程学院开设计量经济学大数据分析方向,2014年开始招生;

?上海财经大学经济学院开设计量经济学大数据分析方向,2014年开始招生;

?2018年将会有更多的大学开设大数据类专业。

?微信后台回复:“大学”,获取本文图谱

公众号后台回复关键词“数据书籍”

复旦大学大数据学院本科生课程学习手册

复旦大学大数据学院本科生课程学习手册 目录 第一章前言 (2) 第二章大数据学院本科生培养模式 (3) 2.1培养理念 (3) 2.2数据科学与大数据技术“2+2”培养模式 (4) 第三章课程体系 (4) 3.1“2+2”培养体系 (5) 3.2卓越计划 (10) 第四章主要课程简介 (12) 4.1专业必修课程 (12) 4.2专业选修课程 (19) 第五章未来发展 (25) 5.1 未来深造 (25) 5.2 就业前景 (27)

第一章前言 大数据伴随着信息技术革命应运而生, 互联网、物联网、移动通讯、行业企业等数据的大量汇聚使得数据演化为重要的生产力,逐渐成为经济的新资源、发展的新引擎、信息的新矿山、科研的新依据、决策的新源泉。大数据的存取、交换、分析、应用对相关学科带来了诸多新挑战,在极大程度上改变了计算机科学、统计学和计算数学的内涵与外延:从硬件到软件、从存储到超算、从数据库到数据安全、从网络传输到并行计算、从数据分析到统计建模、从科学计算到优化方法等。 数据科学与大数据技术专业是教育部2015年批准新增设立的本科专业。数据科学植根于数学、统计学、计算机科学等学科,但是在研究对象、方法论、学科体系等方面又与这些学科有显著不同。数据科学的内涵包含了两个层次,第一个层次是以来源多样、结构各异、规模巨大、传输高速、应用广泛的大数据为研究对象,解决大数据在获取、处理、分析、展示与应用领域的理论与实践问题,如数据挖掘、机器学习、人工智能、数据库、统计计算等领域;第二个层次则是以大数据为研究手段的数据交叉科学,如生物信息、精准医疗、电子商务、大数据金融、智能电网、智慧城市等领域,大数据分析技术为这些学科提供了新的研究范式、也在解决这些学科计算复杂性问题的过程中获得近一步的发展。由此可见,数据科学与大数据技术专业的内涵已经超出了传统学科的范畴,而是通过将统计分析、系统计算、交叉科学等有机整合,形成一套面向大数据分析全流程、大数据应用全产业链的完整知识体系,培养大数据复合型人才。我国实施创新驱动战略需要加强创新型人才的培养,要能够积极应对全球工业4.0时代所特有

高校科研大数据平台解决方案

教学科研大数据平台 解决方案

目录 1.概述 (3) 1.1.背景 (3) 1.2.建设目标 (3) 1.3.建设的步骤和方法 (3) 2.教学科研大数据平台概要 (4) 2.1.架构设计 (4) 2.2.教学科研大数据平台优势 (6) 2.2.1.应用优势 (6) 2.2.2.未来发展优势 (8) 3.教学科研大数据平台设计 (8) 3.1.大数据资源池 (9) 3.1.1.cProc云计算 (9) 3.1.1.1.cProc云计算概述 (9) 3.1.1.2.数据立方 (10) 3.1.1.3.混合存储策略 (15) 3.1.1.4.云计算核心技术 (15) 3.1.1.4.1.数据处理集群的可靠性与负载均衡技术 (15) 3.1.1.4.2.计算与存储集群的可靠性与负载均衡 (19) 3.1.1.4.3.计算与存储集群的负载均衡处理 (21) 3.1.1.4.4.分布式文件系统的可靠性设计 (23) 3.1.1.4.5.分布式数据立方可靠性设计 (23) 3.1.1.4.6.分布式并行计算可靠性设计 (25) 3.1.1.4.7.查询统计计算可靠性鱼负载均衡设计 (25) 3.1.1.4.8.数据分析与数据挖掘 (27) 3.1.1.4.9.cProc云计算优势 (35) 3.1.2.cStor云存储 (36) 3.1.2.1.cStor云存储介绍 (36) 3.1.2.2.cStor云存储架构 (38) 3.1.2.3.Stor云存储关键技术 (43) 3.1.2.4.数据安全诊断技术 (44) 3.1.2.5.cStor云存储优势 (45) 3.2.大数据教学基础平台 (46) 3.2.1.Hadoop架构 (46) 3.2.2.Hadoop关键技术 (47) 3.2.3.Hadoop优势 (51) 3.2.4.Hadoop教学 (51)

面向大数据时代的专业课程体系建设研究

面向大数据时代的专业课程体系建设 研究

面向大数据时代的专业课程体系建设 1. 大数据时代的特点及其对专业人才的特殊需求分析 重点分析大数据时代特点、大数据技术发展趋势及其对信息技术专业人才的特殊需求。特别是从大数据理念、技术和方法在农业领域的实践,分析农业大数据应用研究。了解涉及到水、土、光、热、气候资源,作物育种、种植、施肥、植保、过程管理、收获、加工、存储、机械化等各环节的农业大数据特征,探索多类型复杂数据采集、挖掘、处理、分析与应用等问题。在此基础上,了解大数据时代对专业人才的特殊需求。 2. 面向大数据需求的我院本科专业设置优化 系统地分析我院本科专业设置及其缺位问题,结合当前中国学科体系及本科专业设置,提出我院面向大数据需求的本科专业调整与优化方案。 (1)我院本科专业设置及其缺位分析:近年来,我院学科建设及本科专业建设取得来显著地发展。学院现在涵盖电气工程与自动化、信息工程与计算机两大学科群,拥有7个本科专业、11个硕士学位授权点和3个博士学位授权点,一个“农业电气化与自动化”国家级重点学科,成为实力雄厚、基础扎实的电气、电子与信息工程学科领域的高级专门人才培养教育基地和科学研究、技术开发与科技成果转化基地。可是,由于受到当前中国学科体系及本科专业设置的限制,面对大数据时

代的特殊人才需求我院本科专业设置表现得特别滞后,本科专业设置与建设存在明显的缺位问题。 (2)当前中国学科体系及本科专业设置分析:专业设置是高等教育部门根据科学分工和产业结构的需要所设置的学科门类。它是人才培养规格的重要标志。在教育部的学科划分中,学科门是最高级别的学科,共有13个:理学、工学、农学、医学、哲学、经济学、法学、教育学、文学、历史学、军事学、管理学、艺术学;比学科门低一级的学科称为学科类,学科类(不含军事学)共有71个;比学科类再低一级的学科称为专业;专业就是高考生填报的志愿,本科专业(不含军事学)共有258个。本科专业设置上由于受到中国学科体系及本科专业设置规范与管理,需要严格遵照相关的要求与规范。可是,国家层面的学科体系及本科专业设置存在滞后问题,因此需要本科专业设置上能够遵循就近的原则。分析当前中国学科体系及本科专业设置,探索面向大数据需求的相近专业及其设置是本部分研究的重要内容。 (3)面向大数据需求的我院本科专业优化:由于农业大数据是由结构化和非结构化数据构成,对大数据分析与处理的技术发生了巨大变化,因此与传统信息学科人才教育内容与培养目标显著不同,大数据时代对专业人才的特殊需求决定了面向大数据需求的我院本科专业设置与优化的方向及其建设内容。经过整合与优化我院本科专业设置,能够为面向大数据需求的专业课程体系建设提供了前提条件与基础支撑。 3. 面向大数据需求的专业课程体系建设

大数据在高校的应用与思考

摘要:随着大数据时代的到来,高校教育将发生深层次的变革。介绍了大数据的定义和高校信息系统中存在的大数据,分析了大数据在高校教育中的应用,并对可能存在的问题做了初步探讨。 关键词:大数据;高校教育;数据挖掘 中图分类号:TP392文献标志码:A 文章编号:1671-6191(2013)02-0084-04 0引言 2009年出现了一种新的甲型H1N1流感病毒,这种流感病毒结合了导致禽流感和猪流感的病毒的特点,在短短几周之内迅速传播开来。在甲型H1N1流感爆发的几周前,互联网巨头谷歌公司的工程师们在《自然》杂志上发表了一篇引人注目的论文,它准确预测了H1N1流感的爆发,这令公共卫生官员们和计算机科学家们都感到震惊。这篇论文介绍了谷歌通过观察人们在网上的搜索记录来实现这个预测的方法,而这种方法以前一直是被忽略的。谷歌保存了多年来所有的用户搜索记录,而且每天都会收到来自全球超过30亿条的搜索指令,如此庞大的数据资源足以支撑和帮助它完成这项工作。谷歌公司的预测与官方数据的相关性高达97%,和疾控中心一样,他们也能判断出流感是从哪里传播出来的,而且他们的判断非常及时,不会像疾控中心一样要在流感爆发一两周之后才可以做到[1]。惊人的是,谷歌公司的方法根本不需要分发口腔试纸和联系医生———它是建立在大数据的基础之上的。2012年3月29日,美国政府宣布了“大数据研究和发展倡议(Big Data Research and Development Initiative )”,以推进从大量的、复杂的数据集合中获取知识和洞见的能力,并承诺政府将为此投资超2亿美元,许多重要国家机构都将参与其中。2012年7月10日,联合国发布大数据政务白皮书《大数据促发展:挑战与机遇》,指出各国政府应当使用极大丰富的数据资源,更好地响应社会和经济指标。日本总务省于2012年7月新发布“活跃ICT 日本”新综合战略,提出正针对大数据推广的现状、发展动向、面临问题等进行探讨,以期对解决社会公共问题做出贡献。随着互联网上数据的不断增多,海洋一般浩瀚的网络数据已成为一种战略资源。大数据技术的目标就是从这些数据中挖掘信息、判断趋势、提高效益。“大数据”是继物联网、云计算之后IT 产业又一次颠覆性的技术变革。 1什么是大数据 大数据也称巨量资料,是指那些大小已经超出了传统意义上的尺度,一般的软件工具难以捕捉、存储、管理和分析的数据。人类可以通过大数据的交换、整合和分析,发现新知识,增长新智慧,创造新价值。大数据具有4V 特点,即数量(Volume )、多样性(Variety )、速度(Velocity )和价值(Value )。 1)数量。数量也许是与大数据最相关的特征,是指数据规模“巨大”。当前数据已经从TB (1024GB =1TB )级别跃升到PB (1024TB =1PB )、EB (1024PB =1EB )乃至ZB (1024EB =1ZB )级别。以脑科学为例,用电子显微镜重建大脑中的突触网络,1mm 3大脑的图像数据就超过了1PB 。社交网络Facebook 每天大数据在高校的应用与思考 桑庆兵 (江南大学物联网工程学院,无锡214122) 收稿日期:2013-04-18 作者简介:桑庆兵(1973-),男,安徽明光人,江南大学物联网工程学院副教授,硕士生导师,研究方向为图像视频质量评价、神经网络、模式识别。 南通纺织职业技术学院学报(综合版)Journal of Nantong Textile Vocational Technology College Vol.13,No.2Jun.2013 第13卷第2期 2013年6月

数据科学与大数据技术 专业建设规划方案

数据科学与大数据技术----专业建设规划 方案 一、总体目标 本专业旨在培养具有良好的数学基础和逻辑思维能力,具备较高的信息素养,掌握计算机学科、大数据科学和信息技术的基本理论、方法与技能,受到系统的科学研究训练,具备一定的大数据科学研究能力及数据工程师岗位的基本能力与素质,掌握大数据工程项目的规划、应用和科学管理决策方法,具有大数据工程项目设计、研发和实施能力的高级复合、应用型卓越人才。毕业生能在国家各级财经政务部门、信息产业、工商企业、金融机构、科研院所等从事大数据分析、挖掘、处理、服务、应用和研究工作,亦可从事各行业大数据系统集成、设计开发、管理维护等各方面的工作,也适合去高等院校和科研院所的相关交叉学科继续深造,攻读硕士学位。 (一)人才培养目标 本专业围绕以培养面向大数据工程与信息技术行业的工程应用型人才为中心,突出“校企合作”的办学特色,强化工程应用实践,兼顾交叉学科专业基础知识,注重培养创新意识和创新实践能力,培养从事大数据项目设计开发、数据挖掘与分析、大数据综合应用的高级复合、创新型卓越人才。 (二)课程体系与学科建设 作为一个新专业,首先,需要考虑是否符合市场需求,要进行深入调研,了解地区对于大数据技术人才是否有一定的需求;其次,需要了解大数据技术岗位需要何种技能,把大数据技术人才需要掌握的技能弄清楚,列出岗位技能清单,将技能清单转化为课程清单,明确了大数据技术专业的人才培养定位和目标,细化了人才培养课程体系。 在教学过程中,不断凝练专业特色和发展方向,本专业在数据科学与大数据研究的基础上,通过数据分析与数据挖掘,逐步开展人工智能与数据推荐等领域的研究。 (三)学科队伍建设 由于大数据涵盖内容广泛,因此需要如下三类关键人才队伍建设: (1)实现大数据的技术支持人才,他们具有很强的编程能力,尤其表现在搭建数据存储、管理以及处理的平台方面; (2)精通处理大数据分析的人才; (3)大数据技术的应用类人才,以适应高校培养高素质人才的需要。 大数据技术需要复合型人才,不仅要具备扎实的基础知识,更需要有充足的实践经验。唯有如此,我们通过典型的算法展示、算法实现结合数据分析的应用场景与案例对学生进行数据分析方面的综合训练,从而实现专业实验教学由理论到应用、涵盖原理验证、综合应用及全方位实验的体系。因此,学校应根据不同类型的人才特点,结合现代企业对大数据人才的需求,以就业为导向,开展全方位立体式(专业拓展模块——技能考证模块——集中实践模块)大数据专业实践教学体系,培养理论与技能并重的大数据高素质人才。与此同时,还要开展职业技能考证培训,如数据挖掘工程师、数据分析工程师、大数据系统运维工程师等。为了适应专业建设的需要,必须实行内培外引的人才培养策略,将青年教师派驻企业学习是一种增强师资队伍实力比较快捷的方式,4年内你派出20余人次国内外高校、大数据企业进行短期进修培训和挂职锻炼,引进大数据相关专业教师4人(硕士研究生及以上,计算机、大数据等相关专业)。另外,还可以通过引进企业工程师作为学校兼职教师,充实教师队伍,4年内拟引进企业大数据工程师4人。 (四)实践平台与科学研究建设

高校大数据平台解决方案-高校智慧校园解决方案

高校大数据平台解决方案、高校智慧校园解决方案

1.项目概况 近年来,随着信息技术产业的蓬勃发展,高校的信息化建设工作也受到了广泛关注。推进高校信息化建设,打造数字化校园已成为各高等院校的普遍共识。由于信息化建设初期缺乏统一规划,数据标准各异,业务系统各自为政,导致数据非集成化并形成了许多的信息孤岛,这使得大量数据无法共享和利用,获得更大价值。 数据共享交换平台是整个数字化校园建设的重要组成部分,利用平台对校园内散乱分布的数据进行集成化整合,同时将原来分散、利用率低下的信息资源进行数据挖掘,对于学校的发展战略和决策支持具有重要意义。 另外,数据共享交换平台的建设是高校信息化建设下一阶段——智慧校园建设的工作基础。完成对学校内大数据有机的整合和继承管理,掌握学校各项活动中发生的庞大、海量数据,并利用大数据处理技术对这些信息资源进行挖掘、整理、分析,为学校的发展提供决策支持,是大数据时代下支撑学校改革、发展的重要手段。 2.智慧校园建设方案!高校统一数据中心解决方案平台设计目标及思路 大数据时代的教育带有“大教育”的特性,具有全员(从全日制学生到全民,面向所有人)、全程(从学前教育到终身教育,服务各个教育阶段)、全方位(家庭、学校、社会三位一体教育,无所不在的教育,虚实结合的教育)等特点。随着在线平台的推广和普及,越来越多的老师将自己的授课视频放上网。互联网上的眼睛将使所有错误无所遁形,在无数人的编辑之下,知识传播的形式将不断优化、效率会不断提高。在数据的不断累积当中,视频将会沉淀下来,成为经典的学习材料。 目前,建设以全局数据为基础的数据共享交换平台已成为各高校信息化建设的核心内容。通过其建设可以有效消除信息孤岛,节约人力、物力、财力成本,提高工作效率。各职能部处可以通过该平台获取其他业务部门的数据信息,通过对数据的交换、共享、分析、挖掘,为广大师生提供更加完善的服务,为高校建设以及科学管理提供重要的依据。

高校教育大数据的分析挖掘与利用

高校教育大数据的分析挖掘与利用摘要,本文从高校教育大数据的汇聚融合与挖掘应用的角度,分析了如何运用教育大数据技术推动大学管理和人才培养的创新改革的思路和方法。首先,分析了教育大数据对高校现代化、精细化、规化管理的4个价值,其次,给出了高等教育大数据技术平台的基本技术架构,第三,结合教育大数据实际应用,介绍了省高等教育质量监管大数据中心、MOOC中国、交通大学教学质量综合监控与评价三个典型案例,最后,提出了教育大数据分析挖掘中的3项基础性关键技术 关键词,高等教育,大数据,分析,挖掘 一、教育大数据分析挖掘的价值 高校大数据分析挖掘至少有四个典型价值, 一是使得大学的管理更加精准高效,可以朝着智慧治理、分类管理、过程监控、趋势预测、风险预警的方向发展,真正实现基于大数据分析规律的精准治理,改变管理的模糊性, 二是可以更加准确地分析评价课堂教学的质量,过去我们对课堂、对老师的评价是定性和模糊的,而在大数据智慧课堂的模式下,可以真正实现采集样本的持久化,采集方式 的多元化,挖掘手段的多样化,分析技术多维度,通过这些方式可以提高课堂教学的质量, 三是使得教和学更加智慧,更加有效。对学生来说,老师可以了解学生学习的进展情况,发现学习兴趣点,以及对老师讲的哪些容理解或者不理解,学习路径分析及课程推荐等等。对教师而言,不仅可以跨校跨地域分享他人的优秀课程,而且可以对学习者进行精准分类,进行个性化指导,

四是资源服务的个性化、精准化推荐与服务,学习绩效的个性化评价,以及个性化教学管理,个性化手机容推送等等,这些功能将有效提升教与学的效率和质量 二、教育大数据技术平台的总体设计 首先,我们对高等教育大数据技术平台有一个总体的顶层设计,如图1所示。这不仅是学校自己要有一个大数据的管理平台或者是数据中心,而且也是面向区域乃至全国的平台。教育部评估中心正在努力建立国家级高等教育教学质量监控大数据中心,省也是这样考虑的。数据来自高校、教育管理部门以及行业、第三方、企业用人单位等等各方面采集的数据,该数据平台既有大学的业务数据、课程资源,也有政府部门的统计数据,还有学生网上学习的日志数据,用户产生的UGC数据,比如微信、微博、论坛等等的数据,基于大数据平台,开展面向学习者、面向高等教育管理机构、教师、高校等提供服务,并和教育部评估中心、主管部门等 进行数据交换与对接 显然,这样一个大数据平台必须是一个高性能的计算平台,没有这样的基础设施一切无从谈起,所以去年我们学校花了很大的力气做了两件事,一个是把校二级单位原来小的集群计算进行整合,形成学校统一的高性能云计算平台,既面向校的科学研究、人才培养提供服务,其实也可以为社会提供合作共建共享模式。目前,我们已建立了一种自我造血机制,四两拨千斤,以这个平台吸引更多的外部资源,努力扩展平台的性能和应用 三、教育大数据分析挖掘的典型应用案例 目前,我校的高性能平台除了应用于材料、航天、能动、信息等大型科学计算之外,还开展了以下三项典型的大数据应用 案例1,省高等教育质量监控与评估大数据应用 图2所示的是省高等教育的整体架构。其数据基础是来自省100多所高校的各种办学状态数据,有将近700个表格,以及省教育厅各个职能部处的各种各样的管理

大数据专业课程有哪些

大数据专业课程有哪些? 大数据产业已进入发展的“快车道”,急需大量优秀的大数据人才作为后盾。能够在大数据行业崛起的初期进入到这个行业当中来,才有机会成为时代的弄潮儿。但面对庞大的大数据知识体系,专业课程都有哪些内容呢? 小编认为学习大数据之前,还是要打好一定的基础的,就像java、Python、scala等编程语言的学习,还是很有必要的,因为大数据的一些核心技术Hadoop、spark等都是以编程语言为开发工具的,编程语言是学习大数据的基础,但一定不是核心知识。真正的大数据学习是从Hadoop开始的,一套专业的Hadoop 入门视频教程对你来说会是一个制胜法宝。 千锋教育作为专业的大数据培训机构,拥有真正的大数据课程,启用商业数据使用、全栈数据开发,吊打初级工程师。与亚马逊达成战略合作,将企业项目真实还原,让学生积累真正的开发经验。培养的是德智体美全面发展,具有良好的职业道德和创新精神,且掌握计算机技术、hadoop 、spark、storm开发、

hive 数据库、Linux 操作系统等知识,具备分布式存储、分布式计算框架等技术,熟悉大数据处理和分析技术,面向大数据平台建设与服务企业的技术人才。 千锋以专业的技术,负责的态度由众多名师全力打造专业的大数据视频教程,不仅内容专业,紧贴时代需求,同时依托千锋线下面授培训课程的教学经验和实力,让千锋教育大数据学科的视频教程更具权威性,更值得学习者信赖,更有学习品质保证。 而且千锋大数据录制的每一节课程时间都是比较短的,时间长度控制在10分钟-20分钟之间。每节课的学习内容非常明确,精准分析,让学习者达到高效率的学习,而不是讲了很多内容,学习者却感觉一无所获。 千锋大数据视频教程,不仅是夯实基础的法宝,更是提高实践能力的武器。在基础内容的理解上,穿插一定的项目实战,让学习者在感受学习乐趣的同时,提高项目实战能力,更好地达到工学结合的要求,实现学习和工作的完美过渡和无缝衔接。 学习大数据从Hadoop开始,从千锋大数据视频教程入门,让你快速掌握大数据的核心技术知识。

高校大数据专业教学科研平台建设方案详细

高校大数据专业教学科研平台建设方案 一、项目建设的意义及目的 芝诺数据自主研发的高校大数据教学科研平台以校企联合培养模式为手段,通过校企合作联合培养机制,让企业、行业深度参与人才培养过程,逐步实现校企共同制定培养目标、共同建设课程体系和教学内容、共同实施培养过程、共同把控培养质量,全面提升学生的应用实践能力。该平台以应用型人才培养为目标定位,在以解决现实问题为目的的前提下,使培养的学生有更宽广和跨学科的知识视野,注重知识的实用性,有创新精神和综合运用知识的能力。注重培养学生具有在创新中应用、在应用中创新的能力,让学生真正学会大数据行业各个岗位真正的职业技能。 二、功能模块和建设思路 芝诺大数据教学科研平台构建总体分为三大部分,一是平台硬件,二是教学与实验支撑系统(包括:芝诺数据综合分析ZDM平台、芝诺数据教学实训平台),三是产品服务体系。 具体如下:

教学与实验支撑系统由芝诺数据综合分析ZDM平台和芝诺数据教学实训平台构成,教学与实验支撑系统部署在大数据教学科研一体机中。 二、项目建设的目标及内容 1、项目建设目标 1)平台的建设能让高校大数据专业与实际应用相结合,提高学生的学习、实践和创新创业能力,能够培养实用性人才所需的专业能力,提升教学效果与就业率,为“大数据时代”的创新人才培养做出贡献。

2)平台的建设将支撑大数据去冗降噪、大数据融合、大数据可视化等关键技术研究,能够服务于学校的教学和科研,有助于大数据方向发展和自主创新,有利于创新团队培育和高水平研究成果积累,有利于提升教师的教学和科研水平,推动教学和科研团队建设。 3)平台的建设搭建可以发挥学校的行业优势,体现学校办学特色,推进与国内外高校、科研机构和企业间的产学研合作,开展项目合作研究和人才培养,促进科研成果转化,促进产学研协同创新。 4)平台的建设有利于促进学科交叉与融合。 2、项目建设内容 1)模块一:平台相关硬件建设 本模块主要包含:大数据教学科研一体机 技术参数:

智慧高校大数据平台建设方案

智慧高校大数据平台 建 设 方 案 I

目录 第1章前言 (8) 1.1、大数据发展分析 (9) 1.1.1、大数据定义 (9) 1.1.2、大数据5v特征及其应用 (10) 1.2、高校大数据建设背景 (11) 1.2.1、战略机遇 (11) 1.2.2、大数据产业政策支持 (12) 1.3、高校大数据建设面临问题 (13) 1.3.1、高校大数据应用分析 (13) 1.3.1.1、数据规模日益庞大 (13) 1.3.1.2、缺乏稳定高效的大数据环境 (14) 1.3.1.3、数据利用不充分 (14) 1.3.1.4、数据驱动带来的科研新挑战 (14) 1.3.2、高校大数据数据源分析 (14) 1.3.2.1、数据涉及面窄 (14) 1.3.2.2、有效数据量少 (15) 1.3.2.3、数据接口不完善 (15) 1.3.3、高校大数据服务用户分析 (15) 1.3.4、高校大数据建设责任制问题 (16) 1.3.4.1、校领导 (16) I

1.3.4.2、教师 (17) 1.3.4.3、学生 (17) 1.3.4.4、家长 (17) 1.3.4.5、校园环境 (17) 1.3.4.6、教学管理与服务 (17) 1.3.4.7、社会 (17) 1.4、建设原则 (18) 1.4.1、安全性 (18) 1.4.2、可扩展性 (18) 1.4.3、灵活性 (18) 1.5、建设目标 (18) 1.5.1、实现数据的共享和交换 (18) 1.5.2、大数据的采集和存储 (19) 1.5.3、大数据分析与决策 (19) 1.6、高校大数据平台建设意义 (19) 1.6.1、实现个性化学习 (19) 1.6.2、实现教育评价体系重构 (20) 1.6.3、实现科学研究范式转型 (20) 1.6.4、开启“大数据创客”新模式 (20) 1.6.5、实现教学模式改革 (20) 1.6.6、实现科学化教育管理 (20) II

高校大数据及其处理架构

高校大数据及其处理架构 高校中汇聚着大量的信息,从学生角度来看,包括联系方式等基本信息,食堂消费、住宿晚归等生活信息,选课、课后作业、借阅图书、成绩等学习信息,参与的社团、竞赛、讲座等第二课堂信息;从教师角度来看,包含教学任务、课件等教学信息,论文著作、科学研究数据等科研信息;从管理者的角度来看,包含学校的资产信息、师资信息、招生就业信息等。同时随着移动互联网以及物联网等新技术的兴起,学校师生主动产生和由设备自动收集的信息越来越多,如微博、微信等社交信息,各类搜索点击记录信息等。上述信息存在着数据量大、结构复杂、产生频率快的特点。这导致利用常用软件工具捕获、管理和处理此类数据所耗费时间超过了可容忍的时间。 大数据的处理流程与一般数据的处理过程类似,可以定义为在合适工具的辅助下对广泛异构的数据源进行抽取和集成,将结果按照一定的标准统一存储,利用合适的数据分析技术对存储的数据进行分析从中提取有益的知识,并利用恰当的方式将结果展现给终端用户。具体来说可以分为数据抽取与集成、数据分析和数据展示。 数据抽取与集成 大数据的数据来源非常广泛,既包括传统的关系型数据库,也包括XML 等半结构化数据,以及以视频、音频、文本和其他形式存在的非结构化数据。数据抽取和集成要解决的主要问题就是收集各种碎片化的数据,对数据进行清洗,保证数据质量,同时根据时间演进不断更新数据模式,确定数据实体及其之间的关系,最终将数据按照统一的格式进行存储,以便提供给上层用来进行数据分析。 目前高校已经基本建立了完备的管理信息系统、学习管理系统等,在统一数据中心中积累了大量的结构化数据;同时各类系统中还散布着大量的半结构化和非结构化数据。半结构化和非结构化的数据经过一定处理后,可以转化为更容易分析使用的结构化数据。 数据分析 经过抽取和集成得到的数据,需要经过分析挖掘其潜在的价值。传统的数据挖掘、机器学习、统计分析等方法仍然可以用来对数据进行分析,只是需要根据大数据的特征进行调整。首先,为了实现对海量数据的分析,需要依Map/Reduce 模型,将数据拆分处理,然后再将结果汇总,一个完整的分析可能会经过多层类似的处理过程;其次,大数据的应用通常具有实时性的特点,数据的价值会随着时间的流逝而递减,因此分析方法需要平衡处理的效率和准确率;最后,大数据一般构建在云计算平台之上,分析方法需要考虑与云计算平台的集成或做为一种云服务。 数据展示

大数据分析在智慧教育中的应用研究

大数据分析在智慧教育中的应用研究 摘要:传统面向高校智慧教育的数据分析平台难以从海量智慧资源中准确分析学生学习行为,导致在面向试题的难度预测中,存在准确率低的问题。针对上述问题,开展面向高校智慧教育的大数据分析研究工作,给出智慧教育体系架构的构成以及数据分析平台,利用 Hadoop 技术对智慧教育资源进行分析与处理,采用数据挖掘算法并结合云计算技术深入分析和解释学生学习行为数据的采集、汇聚,获取学生学习行为的隐性和显性行为,评估教育质量,预测学生日后学习表现,建立学生认知模型与可视化图表,把得到的数据智能融入智慧教育体系架构。将该体系架构应用于在线教育系统提供的答题数据,预测英语阅读试题难度。测试结果表明,试题难度评估预测性能较好。 关键词:大数据分析;高校智慧教育;数据挖掘算法;Hadoop 技术;云计算;学生认知模型

目录 1、引言 (3) 2、高校智慧教育大数据分析 (4) 2.1、高校智慧教育体系架构 (4) 2.2、面向学生学习行为的大数据分析技术 (5) 3、实验结果与分析 (8) 4、结论 (9)

1、引言 大数据、人工智能技术的发展和广泛应用,使得“互联网?教育”成为高等院校教育改革与发展的重要研究方向[1]。“智慧教育”的提出更是将高校教育信息化提升到前所未有的新高度[2]。面向高校智慧教育的大数据分析逐渐成为研究广泛关注的重要研究方向之一[3]。目前,相关学者已研究 出多项针对智能辅助系统的数据分析平台。例如:李爽等人通过学生学习行为投入测量指标构建数 据分析平台[4]。这些测量指标更有利于分析和测量教学智能辅助系统的学习行为。周效章以云计算、大数据分析技术为依托,按照“线上?线下?线上”为教育实施路径,构建了“在线教育平台+学习中心”融合教学模式的数据分析平台[5]。上述数据分析平台缺乏对学生学习行为数据合理的整合管理 模式,易造成信息孤岛,无法准确分析学生学习行为数据,导致在面向试题时的难度预测精度较低。在分析国内智能辅助系统的数据分析平台现存问题的基础上,构建“面向高校智慧教育的大数据分 析平台”,以推动我国高校智慧教育发展。

大数据培训课程内容是什么

大数据培训课程内容是什么 学习大数据首先要了解它的培训课程,只有了解了大数据培训课程,学习起来才会得心应手,为了更好的学习大数据,先来学习培训课程吧。 大数据给大多数人的感觉是,专业性强,操作繁琐,完全属于“高大上”的技术。好奇的人或许只会通过网络搜索了解了一些甚至都谈不上皮毛的东西连概念都说不上来,而有一些人则看到了大数据带来的机遇,想通过专业的培训来学习大数据,投身大数据行业让大数据为自己所用为自己带来利益和价值。 那么,大数据培训学什么呢?千锋教育大数据培训敢负责任的说,行业真正大数据培训,82%主讲都是hadoop生态体系、spark生态体系、storm实时开发。市面所谓“大数据”培训机构85%基本讲的都是JAVA/PHP数据或数据库学习,而真正的大数据课程含量居然不超过15%! 害怕了吧?颤抖了吧?想去学习大数据一定要看准了靠谱的大数据培训机构,还要看大数据培训机构的课程!千锋教育大数据培训机构是国内首家上市的知名大数据培训机构,大数据培训课程分阶段进行教学逐步深入。课程一阶段:Java核心开发;课程二阶段:JavaEE课程大纲;课程三阶段:Linux精讲;课程四阶段:Hadoop生态体系;课程五阶段:Storm实时开发;课程六阶段:Spark生态体系;课程七阶段:大数据项目实战。下面简单介绍下大数据培训必学的hadoop、spark生态体系、storm实时开发。

Hadoop生态体系 Hadoop 是一个分布式系统基础架构,由Apache基金会开发。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力高速运算和存储。Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS。 Hadoop “栈”由多个组件组成。包括: 1·Hadoop分布式文件系统(HDFS):所有Hadoop集群的默认存储层; 2·名称节点:在Hadoop集群中,提供数据存储位置以及节点失效信息的节点。 3·二级节点:名称节点的备份,它会定期复制和存储名称节点的数据,以防名称节点失效。 4·作业跟踪器:Hadoop集群中发起和协调MapReduce作业或数据处理任务的节点。 5·从节点:Hadoop集群的普通节点,从节点存储数据并且从作业跟踪器那里获取数据处理指令。 Spark生态体系 Spark 是一种与Hadoop 相似的开源集群计算环境,但是两者之间还存在

面向大数据时代的专业课程体系建设研究

面向大数据时代的专业课程体系建设 1. 大数据时代的特点及其对专业人才的特殊需求分析 重点分析大数据时代特点、大数据技术发展趋势及其对信息技术专业人才的特殊需求。尤其是从大数据理念、技术和方法在农业领域的实践,分析农业大数据应用研究。了解涉及到水、土、光、热、气候资源,作物育种、种植、施肥、植保、过程管理、收获、加工、存储、机械化等各环节的农业大数据特征,探索多类型复杂数据采集、挖掘、处理、分析与应用等问题。在此基础上,了解大数据时代对专业人才的特殊需求。 2. 面向大数据需求的我院本科专业设置优化 系统地分析我院本科专业设置及其缺位问题,结合当前我国学科体系及本科专业设置,提出我院面向大数据需求的本科专业调整与优化方案。 (1)我院本科专业设置及其缺位分析:近年来,我院学科建设及本科专业建设取得来显著地发展。学院现在涵盖电气工程与自动化、信息工程与计算机两大学科群,拥有7个本科专业、11个硕士学位授权点和3个博士学位授权点,一个“农业电气化与自动化”国家级重点学科,成为实力雄厚、基础扎实的电气、电子与信息工程学科领域的高级专门人才培养教育基地和科学研究、技术开发与科技成果转化基地。但是,由于受到当前我国学科体系及本科专业设置的限制,面对大数据时代的特殊人才需求我院本科专业设置表现得特别滞后,本科专业设置与建设存在明显的缺位问题。 (2)当前我国学科体系及本科专业设置分析:专业设置是高等教育部门根据科学分工和产业结构的需要所设置的学科门类。它是人才培养规格的重要标志。在教育部的学科划分中,学科门是最高级别的学科,共有13个:理学、工学、农学、医学、哲学、经济学、法学、教育学、文学、历史学、军事学、管理学、艺术学;比学科门低一级的学科称为学科类,学科类(不含军事学)共有71个;比学科类再低一级的学科称为专业;专业就是高考生填报的志愿,本科专业(不含军事学)共有258个。本科专业设置上由于受到我国学科体系及本科专业设置规范与管理,需要严格遵照相关的要求与规范。但是,国家层面的学科体系及本科专业设置存在滞后问题,因此需要本科专业设置上可以遵循就近的原则。分析当前我国学科体系及本科专业设置,探索面向大数据需求的相近专业及其设置是本部分研究的重要内容。 (3)面向大数据需求的我院本科专业优化:由于农业大数据是由结构化和非结构化数据构成,对大数据分析与处理的技术发生了巨大变化,因此与传统信息学科人才教

智慧高校大数据分析平台解决方案

智慧高校大数据分析平台 解决方案

目录 第1章建设思路和建设目标 (15) 1.1、总体建设内容概述 (15) 1.2、总体建设理念 (16) 1.2.1、搭平台 (16) 1.2.2、定标准 (16) 1.2.3、上应用 (18) 1.2.4、成体系 (18) 1.2.5、集中管 (21) 1.2.6、特色建 (21) 1.3、总体目标 (22) 1.3.1、培养人才目标 (22) 1.3.2、推动教育治理体系和治理能力现代化目标 (22) 1.3.3、平台建设目标 (23) 1.3.3.1、高校平台建设标准化 (23) 1.3.3.2、平台云化 (23) 1.3.3.3、业务能力云化 (24) 1.3.3.4、服务集中化 (24) 1.3.3.5、应用移动化 (24) 1.3.3.6、应用扩展化 (24) 1.3.3.7、资源可持续化 (24) 1.3.3.8、管理可视化 (25) 1.4、总体架构设计 (25) 1.4.1、总体架构 (25) 1.4.2、云平台整体架构 (27) 1.4.3、系统技术路线设计 (27) 第2章高校大数据总体规划 (29)

2.1、高校大数据建设背景 (29) 2.1.1、战略机遇 (29) 2.1.2、大数据产业政策支持 (31) 2.2、高校大数据的来源 (32) 2.2.1、个体高校大数据 (33) 2.2.2、课程高校大数据 (33) 2.2.3、班级高校大数据 (33) 2.2.4、学校高校大数据 (34) 2.2.5、区域高校大数据 (34) 2.2.6、国家高校大数据 (34) 2.3、高校大数据采集技术图谱 (35) 2.4、高校大数据建设面临问题 (35) 2.4.1、产品同质化严重 (36) 2.4.2、分析端是整体短板 (36) 2.4.3、缺乏统一的行业标准 (36) 2.4.4、大数据价值尚未体现 (36) 2.4.5、数据模型的科学性不足 (37) 2.4.6、数据的权利制度未明确 (37) 2.4.7、数据规模日益庞大 (37) 2.4.8、缺乏稳定高效的大数据环境 (37) 2.4.9、数据利用不充分 (38) 2.4.10、数据驱动带来的科研新挑战 (38) 2.5、高校大数据云平台建设原则 (38) 2.5.1、要提前规划设计 (39) 2.5.2、要有清晰的边界 (40) 2.5.3、要保持连续性和规范性 (40) 2.5.4、采集粒度要尽可能小 (41) 2.5.5、高校大数据数据源分析 (42) 2.5.5.1、数据涉及面窄 (42)

大数据在高校中的应用研究

大数据在高校中的应用研究 高校大数据及其处理架构 高校中汇聚着大量的信息,从学生角度来看,包括联系方式等基本信息,食堂消费、住宿晚归等生活信息,选课、课后作业、借阅图书、成绩等学习信息,参与的社团、竞赛、讲座等第二课堂信息;从教师角度来看,包含教学任务、课件等教学信息,论文著作、科学研究数据等科研信息;从管理者的角度来看,包含学校的资产信息、师资信息、招生就业信息等。同时随着移动互联网以及物联网等新技术的兴起,学校师生主动产生和由设备自动收集的信息越来越多,如微博、微信等社交信息,各类搜索点击记录信息等。上述信息存在着数据量大、结构复杂、产生频率快的特点。这导致利用常用软件工具捕获、管理和处理此类数据所耗费时问超过了可容忍的时问。 大数据的处理流程与一般数据的处理过程类似,可以定义为在合适工具的辅助下对广泛异构的数据源进行抽取和集成,将结果按照一定的标准统一存储,利用合适的数据分析技术对存储的数据进行分析从中提取有益的知识,并利用恰当的方式将结果展现给终端用户。具体来说可以分为数据抽取与集成、数据分析和数据展示。 数据抽取与集成 大数据的数据来源非常广泛,既包括传统的关系型数据库,也包括半结构化数据,以及以视频、音频、文本和其他形式存在的非结构化数据。数据抽取和集成要解决的主要问题就是收集各种碎片化的数据,

对数据进行清洗,保证数据质量,同时根据时问演进小断更新数据模式,确定数据实体及其之问的关系,最终将数据按照统一的格式进行存储,以便提供给上层用来进行数据分析。 目前高校已经基本建立了完备的管理信息系统、学习管理系统等,在统一数据中心中积累了大量的结构化数据;同时各类系统中还散布着大量的半结构化和非结构化数据。半结构化和非结构化的数据经过一定处理后,可以转化为更容易分析使用的结构化数据。 数据分析 经过抽取和集成得到的数据,需要经过分析挖掘其潜在的价值。传统的数据挖掘、机器学习、统计分析等方法仍然可以用来对数据进行分析,只是需要根据大数据的特征进行调整。首先,为了实现对海量数据的分析,需要依据模型,将数据拆分处理,然后再将结果汇总,一个完整的分析可能会经过多层类似的处理过程;其次,大数据的应用通常具有实时性的特点,数据的价值会随着时问的流逝而递减,因此分析方法需要平衡处理的效率和准确率;最后,大数据一般构建在云计算平台之上,分析方法需要考虑与云计算平台的集成或做为一种云服务。 数据展示 数据分析得到的分析结果,需要以直观可理解的方式呈献给最终用户,在大数据时代,数据分析产生的结果有可能也是非常大量的,且结果之问的关联关系复杂、数据维度更多,数据可视化技术通过更加适合人类思维的图形化的方式展示数据分析结果,已经被证明是展示

高校大数据平台建设研究

龙源期刊网 https://www.360docs.net/doc/b95903735.html, 高校大数据平台建设研究 作者:李金旭吕书林 来源:《电脑知识与技术》2017年第16期 摘要:大数据已经成为提升社会、提升高校的创新力和生产力,已经成为高校信息化建设过程中必须要面对的问题。文章讨论了高校大数据平添建设的三大用途,给出了从构建基础硬件层,到利用云计算、大数据的数据集成、数据安全、服务器集群、数据计算与挖掘分析等技术的Hadoop生态体系大数据平台的技术架构。 关键词:高校;大数据;数据集成;挖掘分析 中图分类号:TP393 文献标识码:A 文章编号:1009-3044(2017)16-0013-02 1概述 近年来,移动互联网、云计算、大数据、物联网等信息技术取得了突飞猛进的发展,已经在深刻地改变着人类社会的方方面面。“互联网+”、大数据已经上升到了国家战略层面,成为提升社会的创新力、生产力,促进经济发展新形态的基础设施和现实工具。高校作为人才培养、技术创新的前沿阵地,需要充分感知最新技术发展方向,掌握和创新最前沿科学技术,培养时代迫切需求的创新型人才。 2高校大数据平台的用途 2.1培养大数据人才的平台 根据国内外高校开展大数据课程建设经验以及现有大数据技术就业市场需求而构建的大数据人才培养平台,以大数据为方向,引进国内外先进大数据技术、成熟解决方案以及管理与教学内容,搭建云计算、大数据管理技术、大数据应用软件开发等技术平台,培养学生研究大数据科学与工程领域问题、解决大数据实际应用问题的能力,系统掌握大数据主流的存储、管理、分析处理技术,以及大数据平台架构和建设,实现科研、教学与社会服务的顺畅衔接,逐步打造以培养大数据人才为核心的科研、教学基地。 创新意识、创新精神、创新思维、创造力或创新人格等春心素质的培养需要一个长期的过程、创新教育与科教教育相结合,纳人人才培养体系,利用大数据、“互联网+”、云平台的优势,构建大数据人才平台、打造创新教育人才培养模式、创新教育教学组织新形式,使学生掌握企业运作的过滤与本质,增加师生良性互动,真正培养出社会、企业所需要的创新型人才,如图1所示。

2018年级大数据技术和应用专业人才培养方案报告

附件: 2017年大数据技术与及用人才培养方案 一、培养目标 本专业培养适应生产、建设、服务和管理第一线需要的,德、智、体、美等方面全面发展的,具有大数据行业对应岗位必备的科学文化知识及相关专业知识,以大数据系统运维与管理、数据处理、数据分析、应用系统开发能力为目标,系统掌握大数据技术与应用专业基本理论、大数据分析挖掘与处理、移动开发与架构、软件开发、云计算技术等前沿技术,旨在培养适应新形势下新兴的“互联网+”专业,具有良好职业道德和敬业精神的高素质技能型专门人才。 二、学制及招生对象 (一)学制:三年 (二)招生对象:高中毕业生和中职毕业生 三、人才培养规格 (一)职业面向、预期工作岗位名称 1.主要岗位 本专业大数据基础类岗位:大数据文档编写、大数据采集清洗与转换; 大数据技术类岗位:大数据系统搭建与运维、海量数据库管理、大数据软件开发、大数据可视化、大数据分析; 2.相关岗位 大数据销售服务类岗位:大数据营销、大数据呼叫、大数据售后服务。 3.进阶岗位 大数据技术公司管理岗位和高级技术岗位 (二)起薪标准 4500元/月 (三)人才质量标准 1.知识要求 毕业生应具有大数据技术与应用专业必要的基础理论知识,掌握从事本专业领域实际工作的基本能力和基本技能;具备适应生产、管理、服务一线岗位需要的工作能力,具备良好的职业道德与素养。

①掌握本专业培养目标所要求的基础理论知识、专业知识和技能; ②具备一定的英语知识,能够借助工具书阅读理解本专业所使用的常用计算机英语,包 括技术性文档和资料; ③掌握计算机方面的专业基础知识,能适应信息化建设; ④掌握Linux平台下大数据平台搭建,数据库系统搭建、优化、管理等方面的专业技能; ⑤掌握大数据技术与应用专业基本的专业技能,能满足大数据岗位的基本素质。 2.能力要求 通过三年的学习,学生应具备从事本专业领域相关工作的能力。 ①熟练操作办公自动化软件; ②具备计算机组装、计算机软硬件故障的判断与定位以及故障排除的能力。 ③具备办公自动化设备维护的能力;具备数据库系统管理维护的能力; ④具备非结构化数据处理能力; ⑤具备数据仓库管理基本能力; ⑥具备OOP程序设计能力; ⑦具备Web应用开发能力; ⑧具备Linux Server、Hadoop项目管理维护的能力; ⑨具备数据挖掘、数据清洗、数据可视化的处理能力。 3.素质要求 ①政治思想素质: 热爱祖国,拥护党的基本路线。遵纪守法,善于独立思考,勇于创新的精神。具备良好的职业道德与素养。 ②文化素质: 具有一定的文化素质修养,诚实守信、礼貌待人、为人谦逊的文明习惯;具有自尊自强、爱岗敬业、勤奋好学、追求进步的品格;具备良好的人际交往与勾通和工作协调能力。 ③业务素质: 掌握大数据技术与应用专业的基础理论知识;掌握计算机组装与维护、办公自动化软件操作、办公自动化设备维护、计算机网络系统维护及管理、关系型/非关系型数据库系统维护及管理、Windows/Linux服务器系统配置管理等方面、各类大数据平台搭建管理维护的专业技能的能力。 (四)职业岗位资格证书 至少取得下列证书之一:

相关文档
最新文档