班级规模及环境--热线:4008699035 手机:15921673576( 微信同号) |
坚持小班授课,为保证培训效果,增加互动环节,每期人数限3到5人。 |
上课时间和地点 |
上课地点:【上海】:同济大学(沪西)/新城金郡商务楼(11号线白银路站) 【深圳分部】:电影大厦(地铁一号线大剧院站)/深圳大学成教院 【北京分部】:北京中山/福鑫大楼 【南京分部】:金港大厦(和燕路) 【武汉分部】:佳源大厦(高新二路) 【成都分部】:领馆区1号(中和大道) 【沈阳分部】:沈阳理工大学/六宅臻品 【郑州分部】:郑州大学/锦华大厦 【石家庄分部】:河北科技大学/瑞景大厦 【广州分部】:广粮大厦 【西安分部】:协同大厦
近开课时间(周末班/连续班/晚班):2020年12月28日(请尽快联系提前报名) |
实验设备 |
☆资深工程师授课
☆注重质量
☆边讲边练
☆合格学员免费推荐工作
★实验设备请点击这儿查看★ |
质量保障 |
1、培训过程中,如有部分内容理解不透或消化不好,可免费在以后培训班中重听;
2、课程完成后,授课老师留给学员手机和Email,保障培训效果,免费提供半年的技术支持。
3、培训合格学员可享受免费推荐就业机会。 |
课程大纲 |
|
- 第1章大数据入门
1-1大数据入门
1-2大数据入门2
1-3大数据架构问题
1-4大数据架构问题
1-5大数据官网
第2章hadoop快速入门
2-1环境安装准备
2-2服务器网络配置
2-3linux基本操作
2-4域名映射、主机名、ssh免登陆
2-5hadoop安装流程
2-6hdfs shell基本使用
2-7IDEA搭建maven项目
第3章hadoop进阶篇(1)
3-1Idea的快捷键
3-2打成jar包提交到集群
3-3HDFS快速入门
3-4HDFS上传文件
3-5HDFS上传文件流程
3-6HDFS写文件流程
3-7HDFS api代码编写
3-8namenode角色分析
第4章hadoop进阶篇(2)
4-1昨日回顾
4-2定期上传日志到HDFS
4-3log4j代码编写
4-4上传log4j代码到服务器,定期执行
4-5定期上传文件到HDFS
4-6MapReducer
4-7MapReducer-01
4-8MapReducer-02
第5章南京市出租车GPS日志分析
5-1block和split区别
5-2yarn资源调度策略
5-3hdfs-mapreduce-yran
5-4手机流量
5-5自定义Partitioner
5-6mapreduce压缩
5-7gps案例题1
5-8GPS案例题2
5-9GPS案例3,4
5-10GPS案例3
5-11GPS案例4
5-12把数据写入到数据库
5-13echarts的简单入门
5-14前后台数据交互
第6章hadoop高阶篇
6-1combiner介绍
6-2计数器的使用
6-3Hadoop序列化和Java序列化对比
6-4手机流量封装对象案例
6-5对象做Key的时候需要其具有可比性
6-6SequenceFile
6-7小文件合并(1)
6-8自定义输入
6-9自定义输入(2)
6-10自定义输出
6-11groupingcomparator
第7章ganglia配置安装
7-1Hadoop在Idea里面把任务提交到集群
7-2IDEA本地伪造HDFS权限问题
7-3Hadoop监控的安装
7-4HadoopLocal监控
7-5Hadoop的jmx
7-6Zookeeper原理篇
第8章hadoop集群详解
8-1hadoop HA原理篇
8-2hadoopHA的架构图详解
8-3hadoop HA集群搭建
第9章Zookeeper详解
9-1zookeeper集群和结构
9-2zookeeper数据结构和ACL
9-3zookeeper 基本命令使用
9-4zookeeper api使用
9-5zookeeper监听器
9-6zookeeper 上下线感知
第10章数据仓库ETL和Hive
10-1数据仓库和数据库和ETL原理
10-2数据仓库和数据库案例
10-3HIVE原理篇
10-4数据库MySQL的安装
10-5安装hive
10-6内外表区别和hwi页面的安装
第11章hive详解篇
11-1hive分区表
11-2hive分桶
11-3hive列修改
11-4hive其它命令
11-5hive动态分区
11-6hive导出数据
11-7hive的join操作
11-8hive的maperjoin操作
第12章hive实战篇
12-1UDF函数
12-2统计每一年每个月有效访问总和
12-3把上述结果存储到分区表里面
12-4计算UA的有效访问比
12-5统计用户来源情况
12-6sqoop组件导出
12-7hive导入HDFS
12-8Hive访问时长统计
12-9Hive级联求和
第13章Hive的GPS数据分析
13-1基于hive的GPS项目分析
13-2Zepplin数据分析工具的安装
第14章hbase快速入门
14-1hbase概念篇
14-2hbase安装
14-3hbase shell
14-4hbase shell 1
14-5hbase shell 2
14-6hbase 预分区
第15章Hbase详解篇
15-1HBASE原理介绍
15-2Memstore刷入磁盘
15-3Hbase物理存储
15-4Hbase的读写过程
15-5Hbase的wal机制和读取
第16章Hbase实战篇
16-1Hbase的api
16-2Hbase的Bulk进行Loading操作
16-3Hbase的hive进行SQL整合
|