课程介绍:
从安装到linux系统配置,从简单命令到复杂命令,逐步深入;对比windows操作系统学习linux系统,文件操作、用户操作、权限操作、服务软件安装等;对比java编程语言,轻松学习基于linux的shell脚本编程、awk脚本编程。
对hadoop的核心概念,核心模块hdfs和yarn详细讲解;对hadoop进行本地、分布式模式和高可用(HA)进行搭建;讲解hdfs的shell命令、rpc机制和java对hdfs的API操作;对zookeeper作全面讲解和zookeeper集群搭建。mapreduce的重要知识点、运行方式和shuffle的复杂过程讲解;mapreduce的入门案例wordcount详解,经典案例倒排索引、分区、二次排序、join等详解;mapreduce和awk脚本的对比案例展示;mapreduce自定义数据类型;高级案例之mapreduce的自定义输入输出数据格式编写。
课程目录:
01:linux介绍和环境搭建
02:linux相关命令介绍1
03:linux相关命令介绍2
04:linux系统下软件安装
05:shell编程
06:hadoop的简介和单机版安装
07:hdfs的理论讲解
08:yarn的理论讲解
09:hadoop的伪分布式和分布式搭建
10:hdfs的shell命令和hdfs api01
11:hdfs的api02和rpc
12:zookeeper的讲解
13:hadoop的高可用
评论0