2022白菜网总站大全大数据技术培训通知
各位老师:
2022白菜网总站大全大数据实验室即将建成完工,特邀请联想集团大数据事业部专家对公司教师进行为期三天的培训,请老师们安排好时间,自带笔记本电脑参加培训。
培训时间:2019年5月17日——5月19日
培训地点:实验楼E楼大数据实验室
培训人员:公司教师
特此通知。
800cc全讯白菜网
2019.5.6
附培训内容:
时间 |
培训内容 |
5月17号 |
上午 (9:00~11:00) |
♢ Hadoop生态体系介绍 ♢ Hadoop架构及运行原理 ♢ Hadoop伪分布模式安装 ♢ Hive安装部署 |
下午 (14:00~16:00) |
♢ Spark架构及运行原理 ♢ Spark Standalone伪分布模式安装 ♢ Kafka架构及运行原理 ♢ Kafka安装及测试 |
5月18号 |
上午 (9:00~11:00) |
♢ Hadoop Shell基本操作 ♢ Mapreduce实例——WordCount ♢ Hive基本操作 ♢ Sqoop数据导入导出(Mysql,HDFS,Hive,HBase) |
下午 (14:00~16:00) |
① 采集电商网站交易及评论数据(局域网) ② 电商评论数据清洗 ③ 利用HiveSQL离线分析评论数据 ④ 利用Sqoop进行数据迁移至Mysql数据库 |
5月19号 |
上午 (9:00~11:00) |
♢ Flume配置:Source、Channel、Sink ♢ Flume传输数据给Kafka ♢ Spark Shell操作 ♢ Spark Streaming Wordcount |
下午 (14:00~16:00) |
⑤ 利用JavaWeb+ECharts完成数据图表展示过程 ⑥ 利用Spark进行实时数据分析(上)(局域网) ⑦ 利用Spark进行实时数据分析(下)(局域网) |