课程背景
平台: X86
操作系统:Linux*
课程长度:4天
授课语言:中文
适合学员:课程适合有Linux 使用经验(一年以上)并基本了解开源Hadoop的系统管理员,程序员或者技术带头人。
课程描述
本课程为4天,采用课堂讲解的方式,讲授大数据平台组件原理及构架,方法和应用模式和编程课程。课程结束后,学员能够为CRH编程。
立即报名
讲师简介
讲师均是来自IBM的资深工程师
【讲师资质】讲师持有国际认证开发工程师、管理工程师、讲师认证
Cloudera Certified Developer for Apache Hadoop、
Intel Certified Hadoop Administrator、
Intel Certified Hadoop Developer、
Intel Certified Hadoop Instructor。
《大数据技术及应用》
《大数据分析师》
【讲师培训经验】
讲师培训单位主要开班地点北京、上海、广州、深圳、南京等。
客户群有联想、华为、中兴、汇丰银行等。
【讲师实战经验】
讲师维护集群节点数150+,日增5TB数据,数据量5PB数据量。
【讲师实战行业】
电信行业:国内某运营商云详单管理系统、NTT-DOCOMO
教育行业:广州某教育部云
电商行业:联想商城大数据平台
【讲师项目职责】
各个项目的集群规划、集群搭建,大数据系统搭建,系统架构设计、数据处理、分析、查询等功能实现以及集群性能调优集群维护、权限控制等。
【部分讲师著作】
《大数据处理与编程技术》
【其他优势】
主要从事云端大数据架构设计,涉及Openstack,Bigdata(hadoop生态系统)技术融合。企业级开发平台持续集成自动化架构设计,涉及Docker,Kubernetes,Swarm等技术实战,实现企业内部业务架构的自动化和云化。
课程时间
11月19日、11月26日、12月3日、12月10日(共四天,分别再四个周六)
课程安排((时间+主讲内容)
【第一天上午】
大数据处理的背景
集群系统架构与系统软件
分布式系统概述
Hadoop概述
【第一天下午】
Hadoop运行的软硬件环境
Hadoop安装与运行
Hadoop3.0特性
【第二天上午】
HDFS的操作与编程
HDFS特点、原理。
HDFS工作机制
HDFS接口[b]
【第二天下午】
MapReduce编程
MapReduce原理
MapReduce工作机制
MapReduce编程接口
【第三天上午】
Hive的原理
Hive内部表外部表
Hive分区表、分桶表
Hive编程
【第三天下午】
HBase介绍
HBase原理
Hbase编程
Phoenix介绍
Phoenix编程
【第四天上午】
Storm集群组成
Storm集群原理
Storm topology元素
Storm并行配置
Storm编程思想
【第四天下午】
什么是Spark
Spark生态和安装部署
Spark编程模型和解析
Spark的编程模型
Spark运行架构和解析