大数据技术课程描述

通过本课程的学习，使学生具备大数据时代就业的基本技能，了解未来企业对信息资源的迫切需求。掌握Linux技术、Hadoop技术、分布式数据库技术、数据仓库技术、数据迁移工具的使用、Scala等技术的应用。最终能够达到数据分析师或者更高级别的就业水平。培养学生具备以下能力：

1、能够熟练掌握Linux操作，能完成基本网络服务器的架设工作。

2、能够进行Hadoop技术的基本应用，掌握HDFS运行机制及体系结构，掌握分布式文件系统，能够进行Hadoop环境搭建。

3、能够熟练掌握分布式数据库的技术要求，具有多用户、多媒体环境下使用一种中文平台及相应数据库管理系统进行数据处理工作的能力，具有使用应用开发环境来开发应用程序及与高级语言程序连接的能力。

4、能够熟练应用数据仓库技术，可以进行系统架构分析。具备Hbase基本操作能力，可以进行Hbase树形表设计、Hbase一对多和多对多表设计、具备Hbase调优(读、写、设计)能力。

5、可以熟练应用各种数据迁移工具的使用，具有Sqoop技术的基本使用能力。

6、具备使用Scala的条件表达式、输入输出、循环等控制结构的使用能力，具备对Scala的函数、默认参数、变长参数进行分析的能力，具备对Scala技术的基本操作能力，可以熟练使用数组、结构、变量、函数等单元。