59白菜专区论坛主页大数据技术培训通知
各位老师：
59白菜专区论坛主页大数据实验室即将建成完工，特邀请联想集团大数据事业部专家对公司教师进行为期三天的培训，请老师们安排好时间，自带笔记本电脑参加培训。
培训时间：2019年5月17日——5月19日
培训地点：实验楼E楼大数据实验室
培训人员：公司教师
特此通知。
59白菜专区论坛总站
2019.5.6
附培训内容：
时间 |
培训内容 |
5月17号 |
上午 (9:00~11:00) |
♢ Hadoop生态体系介绍 ♢ Hadoop架构及运行原理 ♢ Hadoop伪分布模式安装 ♢ Hive安装部署 |
下午 (14:00~16:00) |
♢ Spark架构及运行原理 ♢ Spark Standalone伪分布模式安装 ♢ Kafka架构及运行原理 ♢ Kafka安装及测试 |
5月18号 |
上午 (9:00~11:00) |
♢ Hadoop Shell基本操作 ♢ Mapreduce实例——WordCount ♢ Hive基本操作 ♢ Sqoop数据导入导出（Mysql，HDFS，Hive，HBase） |
下午 (14:00~16:00) |
① 采集电商网站交易及评论数据(局域网) ② 电商评论数据清洗 ③ 利用HiveSQL离线分析评论数据 ④ 利用Sqoop进行数据迁移至Mysql数据库 |
5月19号 |
上午 (9:00~11:00) |
♢ Flume配置：Source、Channel、Sink ♢ Flume传输数据给Kafka ♢ Spark Shell操作 ♢ Spark Streaming Wordcount |
下午 (14:00~16:00) |
⑤ 利用JavaWeb+ECharts完成数据图表展示过程 ⑥ 利用Spark进行实时数据分析（上）(局域网) ⑦ 利用Spark进行实时数据分析（下）(局域网) |
