各位老师:
我校大数据实验室即将建成完工,特邀请联想集团大数据事业部专家对我校教师进行为期三天的培训,请感兴趣的教师报名至教学办公室王老师处。电话:86735883,电子邮件:wangxf001@163.com。
培训时间:2019年5月17日——5月19日
培训地点:实验楼E楼大数据实验室
培训人员需自带笔记本电脑参加。
附培训内容:
时间 |
培训内容 |
5月17号 |
上午 (9:00~11:00) |
♢ Hadoop生态体系介绍 ♢ Hadoop架构及运行原理 ♢ Hadoop伪分布模式安装 ♢ Hive安装部署 |
下午 (14:00~16:00) |
♢ Spark架构及运行原理 ♢ Spark Standalone伪分布模式安装 ♢ Kafka架构及运行原理 ♢ Kafka安装及测试 |
5月18号 |
上午 (9:00~11:00) |
♢ Hadoop Shell基本操作 ♢ Mapreduce实例——WordCount ♢ Hive基本操作 ♢ Sqoop数据导入导出(Mysql,HDFS,Hive,HBase) |
下午 (14:00~16:00) |
① 采集电商网站交易及评论数据(局域网) ② 电商评论数据清洗 ③ 利用HiveSQL离线分析评论数据 ④ 利用Sqoop进行数据迁移至Mysql数据库 |
5月19号 |
上午 (9:00~11:00) |
♢ Flume配置:Source、Channel、Sink ♢ Flume传输数据给Kafka ♢ Spark Shell操作 ♢ Spark Streaming Wordcount |
下午 (14:00~16:00) |
⑤ 利用JavaWeb+ECharts完成数据图表展示过程 ⑥ 利用Spark进行实时数据分析(上)(局域网) ⑦ 利用Spark进行实时数据分析(下)(局域网) |