教育大数据实训平台介绍
【大数据实训】联想实训平台介绍
媒体VM
VM
试验机VM（Docker）
VM VM VM
MR
数据处理
Streamin g
Spark
数据采集
Kafka
实训平台
实战平台
数据存储
HDFS
大数据教学实训平台（含课程和试验）
大数据科研实战平台（Leap HD大数据）
-3节点HX1320( xeon 4116*2, 256G, 480G*2, 4T*2) -1台万兆交换机NE1032 -实训管理及试验license-60并发用户
实验操作 480+个实验，实验时长累计超过1000小时。
2018 Lenovo Internal. All rights reserved.
‹#›
联想大数据实训平台丰富的课程
大数据 认知
认识大数据(10讲)
大数据与政府治理（10讲）
医疗健康大数据(10讲）
房产建筑大数据(6讲）
现代金融大数据（5讲）
‹#›
大数据人才培养加速
2016年2月，教育部公布新增“数据科学与大数据技术”专业，北京大 学、对外经济贸易大学、中南大学成为首家获批高校。2017年3月，上 海工程技术大学、北京信息科技大学、中北大学等32所高校获批，2018 年3月，中国农业大学、中国石油大学、齐鲁工业大学等248所高校获批。 2019年新增获批院校至少300+，普教、高职院校大数据教学需求同样 旺盛。
大数据实战实训平台
大数据授课与实验教学平台
1 2018 Lenovo Internal. All rights reserved.
Agenda
联想大数据教学平台产品概念
联想大数据教学平台市场分析 联想大数据教学平台产品介绍 联想大数据教学平台案例
大数据一体化教学实训平台建设方案
大数据一体化教学实训平台建设方案一、背景随着信息技术的快速发展，大数据技术在各行各业的应用愈发广泛。
作为高等教育的核心，教学教育需要及时跟进信息技术领域的发展，将其应用到教学中，提高教学品质和实效性。
因此，建设一套大数据一体化教学实训平台显得尤为必要和迫切。
二、目标本项目的目标是建设一套完整的大数据一体化教学实训平台，以满足教学要求和学生实训需要。
平台要求的功能如下：1.提供课程资源和学习资料，基于大数据分析优化教学内容；2.提供在线实验环境，模拟大数据处理场景，并对用户进行实时评估；3.提供实时交流平台，学生和教师可以通过平台进行互动交流；4.提供一键生成报告和数据可视化工具，方便教师评估学生实验成果。
三、需求分析1. 功能需求根据上述目标，我们需要实现以下具体功能：1.提供课件资料和学习资源，支持学生在线学习和下载；2.搭建大数据处理环境，并提供实验用数据以及相关工具；3.设计在线测验，考核学生在数据分析和处理方面的能力；4.提供实时交流平台，学生可以在此平台上互动交流，老师可以在此发布通知、答疑等；5.提供数据可视化工具，方便学生在实验后可视化分析实验结果。
2. 性能需求1.平台的响应速度要快，保证平台体验流畅，过程无卡顿；2.能够同时为大量用户提供服务，保证用户数大幅度增加时，系统性能不会出现明显降低；3.平台需要安全可靠，对用户的数据进行保护和加密，保证系统运行稳定性；4.系统的稳定性要高，保证平台能够7*24小时不间断运行。
四、技术方案1. 平台架构本平台采用B/S架构，采用前后端分离，前端采用React技术，后端采用Spring Boot。
2. 数据库系统本项目采用MySQL数据库进行存储和管理。
3. 大数据环境在平台上搭建Hadoop或Spark集群，实现大数据处理与分析。
4. 安全平台的用户数据入库前需要进行加密，采用高强度加密算法，保证用户数据的安全性。
5. 系统管理对系统进行管理，必须运用权限控制，保证不同角色只能访问自己的权限，并对系统进行监控保证其稳定性。
实训平台介绍
3
Agenda
联想大数据教学平台产品概念
联想大数据教学平台市场分析
联想大数据教学平台产品介绍 联想大数据教学平台案例
房产建筑大数据(6讲）
现代金融大数据（5讲）
城市规划大数据（10讲）
城市交通大数据（4讲）
社会关系网络大数据（9讲）
统计与分析
数据分析概述 建模分析师
R语言基础 SPSS统计分析
SAS数据统计分析
案例分析及业务应用
产品需求的挖掘与分析
大数据产品有计划的不断迭代与优化
技术开发
Linux基础
Java编程基础
-1台万兆交换机NE1032
-1台万兆交换机NE1032
-实训管理及试验license-60并发用户
-Leap大数据平台license
-60台实训终端（PC或云桌面）
9
大数据实训平台介绍
实训教学平台
视频 习题与测验 在线编程 实验操作
DATA 行业数据
大数据科研实战平台
10
联想大数据实训平台功能
16
实验任务及环境（480+）
Hadoop伪分布模式安装 Hadoop完全分布模式安装 Hadoop开发插件安装 HDFS JAVA API操作 Mapreduce实例——wordcount Mapreduce实例——去重 Mapreduce实例——排序 Mapreduce实例——求平均值 Mapreduce实例——Map端Join Mapreduce实例——Reduce端Join Mapreduce实例——单表Join Mapreduce实例——二次排序 Mapreduce实例——倒排索引
大数据实践教学系统(3篇)
第1篇随着信息技术的飞速发展，大数据已成为当今社会的重要战略资源。
大数据技术不仅为各行各业提供了强大的数据支持，也推动了教育领域的教学改革。
为了更好地培养适应大数据时代需求的人才，我国各大高校纷纷开展大数据实践教学。
本文将介绍大数据实践教学系统的构建及其应用。
一、大数据实践教学系统的构建1. 系统架构大数据实践教学系统采用分层架构，包括数据采集层、数据处理层、应用层和展示层。
（1）数据采集层：负责收集各类数据，包括结构化数据、半结构化数据和非结构化数据。
数据来源包括校内实验室、企业合作项目、公共数据平台等。
（2）数据处理层：对采集到的数据进行清洗、整合、转换等处理，形成可用的数据集。
数据处理层包括数据清洗、数据集成、数据转换等功能。
（3）应用层：根据实际需求，开发各类大数据应用，如数据挖掘、机器学习、预测分析等。
应用层包括数据分析、数据可视化、模型构建等功能。
（4）展示层：将处理后的数据和应用结果以图表、报表等形式展示给用户，便于用户理解和使用。
2. 系统功能（1）数据采集与管理：实现各类数据的采集、存储、管理和维护。
（2）数据处理与分析：对采集到的数据进行清洗、转换、集成等处理，并利用数据挖掘、机器学习等技术进行数据分析。
（3）应用开发与测试：提供丰富的数据接口和工具，方便用户开发大数据应用。
同时，提供测试环境，确保应用质量。
（4）数据可视化与展示：将分析结果以图表、报表等形式展示，便于用户理解和使用。
（5）教学资源库：提供丰富的教学资源，如课程课件、实验指导、案例库等，方便教师和学生进行教学和学习。
3. 系统特点（1）开放性：系统采用开放的设计理念，支持多种数据格式和接口，方便用户扩展和集成。
（2）可扩展性：系统架构设计灵活，可根据需求进行扩展，满足不同规模和类型的数据处理需求。
（3）易用性：系统界面友好，操作简便，降低用户学习成本。
（4）安全性：系统采用多种安全措施，保障数据安全和用户隐私。
教育大数据分析平台及其在教学管理中的应用
教育大数据分析平台及其在教学管理中的应用一、教育大数据分析平台简介在当今信息化时代，大数据技术已经成为了世界各行各业的趋势。
在教育领域，也出现了许多不同形式的教育大数据分析平台，它们使得教育管理者能够更全面地收集和分析数据，并据此设计更有效的教育管理体系。
教育大数据分析平台是一种利用数据仓库和智能分析技术，将各个环节的数据进行融合、分析和利用的系统。
该系统可以广泛地应用于教育领域的各个方面，如教育资源共享、学生学习行为分析、教育管理决策分析等。
二、教育大数据分析平台在学生学习行为分析中的应用1.行为数据的获取和分析教育大数据分析平台能够收集学生在课堂和线上学习过程中留下的大量数据，如观看视频的时间、答题的速度和准确率、查阅资料的次数等。
基于这些数据，系统可以从多个维度分析学生的学习行为，如何根据学生的行为特点来规划教学内容，提高学生的学习效果等。
2.学生学习过程的监控和分析教育大数据分析平台可以实时监控学生的学习过程，通过分析学生在学习过程中的状态，如集中注意力、思考等规律，运用大数据分析方法深入挖掘学生学习的特点和问题，提高学生学习的效率和效果，优化学生学习的过程。
三、教育大数据分析平台在教学评价中的应用1.学生素质档案管理和教学评价学生素质档案是学校评价体系中的重要组成部分，能够更具体地记录每个学生的学习成果、能力和兴趣等信息。
教育大数据分析平台能够自动记录学生在学习过程中产生的数据，并根据学生素质档案中的各项指标来对学生进行评价，更深入地了解学生的各方面情况。
2.教师教学评价和反馈教育大数据分析平台不仅仅能够帮助学校对学生的学习情况进行快速、准确的评价，同时也可以对教师的教学进行全方位的评价和反馈。
系统根据教师的教学记录和心理测量数据，来进行教育管理，优化教学策略。
四、教育大数据分析平台在教学管理中的应用1.学校管理和决策分析教育大数据分析平台能够为学校决策者提供多层次的数据分析和报表功能，为学校管理提供有力支持。
大数据金融应用创新实践教学平台需求说明
大数据金融应用创新实践教学平台需求说明1、平台采用分布式、模块化、组件化、接口标准化的架构设计，选用目前互联网领域最前沿的设计技术，构建一套高负载、易扩展、支持快速迭代开发、可提供持续可用性的开放性平台；平台应不限使用用户数量、不限终端(手机、电脑、平板电脑等移动终端都可以登录使用)、可以根据教师的教学需求即时的开启其他实训课程。
2、系统采用模块化设计，提供前台操作系统以及后台管理系统。
后台管理系统应是集中统一化管理所有的教学实训模块，支持学校-教师-班级-学生四级组织架构管理方式。
应可根据教学进度的需求，自定义实训内容及课时，功能应包含任课信息、排课信息、我的课程、学习资源等功能模块。
3、教师可获取管理员对其授权的所有班级的数据，包括班级信息、学员信息等，教师可编辑和管理自己班级中的学员账号信息；教师端应包含任务管理、成绩查询、链案例分析评价功能模块，教师可通过教师端直接查看学生端已设置任务，查看学生成绩以及查询任务答案。
管理端用于上传内置文件，平台资源、处理数据等。
平台的后台任务设置应能实现实训任务的计划管理、数字人民币、大数据金融、 AI 金融、云金融、物联网金融、区块链金融、银行业金融科技、证券业金融科技、保险业金融科技、监管科技、链设计、链审计等模块化的任务设置及安排。
其中计划管理应包含新增计划、修改计划、删除计划、预览计划和导入计划功能。
4、系统支持学生与教师间的信息互动，学生实训过程中应可实现学生间及与教师的互动交流、讨论、分享学习心得，在大数据应用案例分析评价中教师应能评价学生实现教学互动。
且系统支持多种账号(如QQ 账号、学号、移动*话、电子邮箱、身份证等)共同识别的登陆方式，系统管理员亦可以通过 Excel 表格方式批量导入学生的账号信息。
5、系统支持进行实务教学配置，能够上传课件、教学视频、教学文档，可根据课程的需求新增教学案例满足教学。
平台内置相应的课程教学资源，资源形式不限于文档、视频、课件等，平台应引入共享机制，教师可将优秀的教学资源上传，可向管理班级、学院、校内参加该实训课程的学生开放，真正实现教学优质资源共享共建。
大数据一体化教学实训平台简介
大数据一体化教学实训平台简介一、平台概述大数据一体化教学实训平台是为了满足现代教育需求而开发的一款综合性教学平台。
该平台结合了大数据技术和教学实践，旨在提供一个全面、高效、灵活的教学环境，帮助学生更好地掌握大数据相关知识和技能。
平台提供了丰富的学习资源和实训项目，并支持在线学习、实时互动和自主实践，帮助学生在实际操作中提升能力。
二、平台特点1. 多样化的学习资源：平台集成了丰富的学习资源，包括教材、课件、视频教程等，供学生自主学习和参考。
这些资源涵盖了大数据技术的各个方面，如数据采集、数据存储、数据分析等，能够满足不同学生的学习需求。
2. 实时互动的学习环境：平台提供了实时互动的学习环境，学生可以通过在线讨论、问答等方式与教师和其他学生进行交流。
这样的学习环境能够促进学生之间的合作学习和知识分享，提高学习效果。
3. 灵活的实训项目：平台提供了多样化的实训项目，学生可以根据自己的兴趣和需求选择适合的项目进行实践。
实训项目涵盖了大数据处理、数据挖掘、机器学习等多个领域，学生可以通过实际操作来巩固和应用所学知识。
4. 实时监测和评估：平台具有实时监测和评估功能，可以对学生的学习情况进行实时跟踪和评估。
教师可以通过平台查看学生的学习进度、作业完成情况等，及时给予指导和反馈，帮助学生提高学习效果。
5. 数据安全和隐私保护：平台采用先进的数据安全技术和隐私保护机制，确保学生的学习数据和个人信息得到有效的保护。
学生可以放心使用平台进行学习和实践，不用担心数据泄露和隐私泄露的问题。
三、平台应用场景大数据一体化教学实训平台适用于各级各类教育机构，包括高校、职业培训机构等。
它可以作为大数据相关专业的教学辅助工具，也可以作为企业内部培训的教学平台。
学生可以通过平台进行自主学习和实践，教师可以通过平台进行教学管理和评估，企业可以通过平台培养和选拔人才。
四、平台效益1. 提高学生学习效果：平台提供了多样化的学习资源和实训项目，帮助学生更好地掌握大数据相关知识和技能。
大数据服务平台功能简介
大数据服务平台简介1.1建设目标大数据服务平台以“整合资源、共享数据、提供服务”为指导思想，构建满足学校各部门信息化建设需求，进而更好为广大师生、各级管理人员、院领导等角色提供集中、统一的综合信息服务。
因此，要建设大数据服务平台主要包括综合查询，教学、科研、人事、学生、图书、消费、资产、财务等数据统计分析和数据采集终端（含数据录入及数据导入）。
通过此平台为学校的校情展示提供所需的基础数据，为学校的决策支持积累所需的分析数据，为广大师生、各级管理人员、校领导的综合信息服务提供所需的开发数据，为学校的应用系统建设提供所需的公共数据。
1.2建设效益协助领导决策、提供智能分析手段通过建设大数据服务平台：为校领导提供独特、集中的综合查询数据，使校领导能够根据自身需要随时查询广大师生的个人情况，有助于校领导及时处理广大师生的各种诉求。
为校领导提供及时、准确的辅助决策支持信息，使校领导能够全面掌握多方面的信息，有助于校领导提高决策的科学性和高效性（以往各部门向校领导提供的信息往往只从部门角度考虑，而校领导无法及时获取多方面的信息，无法及时做出决策）。
为校领导提供丰富、全面的校情展示数据，使校领导能够实时掌握教学、科研、人事、学生、图书、消费、资产、财务等情况，有助于校领导制定学校未来发展战略。
为校领导提供教育部《普通高等学校基本办学条件指标》检测报表，包括具有高级职务教师占专任教师的比例、生均占地面积、生均宿舍面积、百名学生配教学用计算机台数、百名学生配多媒体教室和语音实验室座位数、新增教学科研仪器设备所占比例、生均年进书量。
对提高教学质量和高等学校信息化程度等具有积极的指导作用。
1.3建设内容基于中心数据库，将学校长期以来积累的大量管理数据以一种多维的形式进行重新组织，多层次、多维度的整合、挖掘和分析，从各个层面、各个角度充分展示学校的办学理念、教学质量、科研水平、师资队伍、学生风貌、后勤保障、办学条件等，为各级管理人员、校领导科学决策提供强有力的技术保障与数据支持。
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
平台内容
大数据平台软、硬件环境 教学管理系统 Xdata-EDU IDE实验开发环境（学 生端） 教学课程、实验指导、案例库、推 荐教材 大数据平台与教学软件培训服务
据教学课程、大数据教学系统，大
数据集群实验环境和培训为一体的 软硬件整体平台；
XData-EDU大数据实训平台
6
XData-EDU大数据实训平台 1 2 3 4 5
9
便捷 高效 的教 学系 统平 台
教学管理平台：提供整个平台的管理功能，包括用户、资源、课程、实验过程管理等
运维管理平台：监控、告警、服务管理、参数配置等功能
XData-EDU大数据实训平台
分级教学：课程根据复杂程度划分为初级、中级、高级（可定制课程内容），梯度划分合理， 完成课程后可获得相应等级的证书，提升学员的就业能力。 初级课程：面向职业教育院校、继续教育院所、培训机构提供的大数据开发、运维基础课程，
4
如何提升学生的动手 能力？ 如何提供大数据设备？
那么多大数据技术都是做什么 的？
Hadoop 是什么？ Hadoop能做什么？
学生
如何搭建Hadoop集群？ 怎样开发Hadoop程序？
增加就业竞争力
提升动手能力
了解大数据前沿技术
Hadoop管理与开发
XData-EDU大数据实训平台
5
系统简介
XData-EDU 大数据实训平台是公 司综合分析目前高校的大数据教学 应用现状以及国家和社会对于大数 据人才培养的急迫需求而为高校进 行大数据教育量身定做的，集大数
业界 主流 的大 数据 技术
Flume 日志采 集
内存计算引擎Spark K-V数据库HBase
HadoopUIHue 类SQL编译器Pig
海量数据挖掘算法平台 协同服务Zookeeper
资源管理和任务调度器(YARN) 数据 ETL 分布式存储系统
开源版本上优化
商业产品
开源实现
自主代码
XData-EDU大数据实训平台
数据系统架构师/数据挖掘工程师证书。
XData-EDU大数据实训平台 真实应用案例—用户画像，用户行为分析
用户画像和行为分析：用户画像与行为分析是指根据用户的历史行为数据，对用 户的基本特征做出判断的过程。用户画像是数据挖掘与机器学习算法下的综合应 用，互联网公司已经其他一些企业都非常重视用户画像的分析，例如天猫，京东 等购物网站可以通过用户画像更好的了解客户需求。著名的netflix就是通过精准 的用户画像和推荐系统达到高效的内容推荐和广告投送的。
XData-EDU大数据实训平台
16
先进 易用 的集 群管 理系 统
10
学生完成课程后，可获得大数据软件工程师/大数பைடு நூலகம்系统运维工程师证书。
精心 打造 的大 数据 专业 课程
中级课程：面向高校提供的研究生课程或职业教育、继续教育提供的大数据高级课程，学生 完成课程后，可获得高级大数据软件工程师/高级大数据系统运维工程师证书。 高级课程：面向高校或科研院所提供的大数据挖掘和分析课程，学生完成课程后，可获得大
教育大数据实训平台介绍
技术创新，变革未来
目录
2
1 2
大数据实训平台建设背景 大数据教育面临的问题 XData-EDU大数据实训平台 XData-EDU的优势 成功案例
3 4
5
XData-EDU大数据实训平台建设背景
3
大数据技术—时代的召唤
行业发 展迫切 需求
• 各行各业的发展需要 大数据技术的支撑
11
精心 打造 的大 数据 专业 课程
边学边做
XData-EDU大数据实训平台
12
Hadoop管理软件 （安装、部署、监控、告警、运行、管理） Kafka 消息队 列 个性化推荐引擎 流处理XStorm 数据仓库Hive Map/Reduce 实时计算处理引擎 集群硬件监控 集群硬件监控 Xdata广电大数据分析应用系统 Xdata-Hadoop软件 智能化参数建议 统一用户管理
13
XData-SDH大数据平台
操作系统 计算性能 数据采集 专为Hadoop架构及计算任务而设计
一般Hadoop平台
通用的Linux版本 通用系统环境，环境未经调优 无通用的采集工具 需要手动安装 只有软件 只有软件服务的监控
全系统参数测试优化，比通用的系统 性能提升3-5倍
集成多种数据采集协议 一键部署，8分钟内完成12个节点部署， 含全系统HA、安全认证部署 集网络、分布式文件系统、计算、 管理与一体 实时监测软硬件的服务及用户的作业， 优化作业的响应及性能
XData-EDU大数据实训平台
高度 整合 的大 数据 集群 与教 学系 统
学生 教师 教学 web 客户 端
8
千兆以太网
教学平台实验 管理系统节点
教学投影仪
网络交换机
网络交换机
Hadoop 集群
管理节点
数据节点
学生web客户端 Xdata-EDU IDE开发
XData-EDU大数据实训平台
Xdata-EDU：提供完整的开发运行环境以及详细文档支持 实验开发平台：IDE开发环境，封装有JDK，Hadoop各组间依赖包，预置实验参考代码 实验运行平台：学生可以通过Web界面上传程序包并运行，平台提供结果查看和错误反馈
高度整合的大数据集群 与教学系统 便捷高效的教学系统平 台 精心打造的大数据专业 课程 提供完备的教学与实验 设备 迅速提升教学辅助能力
7
深入大数据教学，快速 掌握大数据知识 真实的大数据生产环境， 快速提高动手能力 高效管理设备，解决后 顾之忧
稳定高效的大数据集群
先进易用的集群管理 系统
最终效果——设备先进，教学高效，课程专业，学生优秀
稳定 高效 的大 数据 集群
集群部署 高融合架构 健全运维
XData-EDU大数据实训平台
提供64位，32位最新版IDE开发工具
14
迅速 提高 动手 开发 能力
XData-EDU大数据实训平台
15
全方位故障诊断 多维度系统监控
XData
一键式快速安装 集中式便捷管理
先进 易用 的集 群管 理系 统
技术教
育相对 落后
前沿技
术不断 创新
• 大数据前沿技术快速 蓬勃发展
• 国家倡导大数据产教 学一体化发展
• 大数据技术人才无法 满足巨大的市场需求 • 现有教学设备无法满 足大数据教学需求
人才储 备严重 缺乏
国家政 策大力 支持
大数据教育面临的问题 教育人员
如何提升学生就业能 力？ 如何进行大数据教学？