《王家林的云计算分布式大数据Hadoop最佳实践.docxVIP

一：课程简介：Hadoop天生是解决大数据高并发问题的，是一个能够对海量数据进行分布式处理的软件框架。互联网企业、金融机构、政府组织和云计算服务企业每天都会产生大量的数据并面临高并发的严峻考验，传统的关系型数据库已经无法满足大数据量高并发的要求，作为云计算实现规范和实施标准的Hadoop应运而生。使用Hadoop，用户可以在不了解分布式底层细节的情况下开发出分布式程序，从而可以使用众多廉价的计算设备的集群的威力来高速的运算和存储，而且Hadoop的运算和存储是可靠的、高效的、可伸缩的，能够使用普通的社区服务器出来PB级别的数据，是分布式大数据处理的存储的理想选择。“云计算分布式大数据Hadoop深入浅出案例驱动实战”基于实务经验萃取而成，从Hadoop开发环境的搭建到到图片服务器、WordCount实现、HBase微博系统、话单查询与统计、Hive数据统计案例、电商业日志流量分析项目理论结合实际案例，祝你轻松驾驭Hadoop以满足大数据的分布式处理与存储。课程以MapReduce、HBase、Hive为主轴，想理解和使用Hadoop，就必须掌握这三大核心。二：课程特色案例驱动教学，全程项目实战训练：图片服务器、WordCount实现、HBase微博系统、话单查询与统计、Hive数据统计案例、电商业日志流量分析；掌握Hadoop三大核心：MapReduce、HBase、Hive萃取出实际开发中最常用、最实用的内容并以深入浅出的方式把难点化于无形之中三：适合对象：软件工程师；数据库开发人员；网络后台开发人员；运维人员；四：基础要求了解Linux系统；了解网络；了解Java；五：讲师简介Hadoop源码级专家，曾负责某知名公司的类Hadoop框架开发工作，专注于Hadoop一站式解决方案的提供，同时也是云计算分布式大数据处理的最早实践者之一，Hadoop的狂热爱好者，不断的在实践中用Hadoop解决不同领域的大数据的高效处理和存储，现在正负责Hadoop在有哪些信誉好的足球投注网站引擎中的研发中国电信的多次Hadoop培训，花旗银行的Hadoop内训，金立手机的Hadoop内训等，著有《云计算分布式大数据Hadoop实战高手之路---从零开始》《云计算分布式大数据Hadoop实战高手之路---高手崛起》《云计算分布式大数据Hadoop。实战高手之路---高手之巅》等；Android架构师、高级工程师、咨询顾问、培训专家；通晓Android、HTML5、Hadoop，迷恋英语播音和健美；致力于Android、HTML5、Hadoop的软、硬、云整合的一站式解决方案；国内最早（2007年）从事于Android系统移植、软硬整合、框架修改、应用程序软件开发以及Android系统测试和应用软件测试的技术专家和技术创业人员之一。HTML5技术领域的最早实践者（2009年）之一,成功为多个机构实现多款自定义HTML5浏览器，参与某知名的HTML5浏览器研发；超过10本的IT畅销书作者；；六：培训内容时间内容备注第一天第1个主题：Hadoop思考1.Hadoop的设计目标和适用场景2.Hadoop架构解析3.MapReduce工作原理和案例说明第2个主题：Hadoop集群与管理1、 Hadoop集群的搭建2、 Hadoop集群的监控3、 Hadoop集群的管理4、集群下运行MapReduce程序第3个主题：HDFS1.HDFS命令行操作实战2. HDFS的配置管理3. NameNode的工作机制第4个主题：HDFS案例实战1.HDFS案例的分析和设计2.环境搭建3.使用Hadoop Java API实现对HDFS写入、读取、删除文件等操作第5个主题：MapReduce剖析1.MapReduce的原理和运行过程2.构建MapReduce的开发环境第6个主题：MapReduce案例实战1.使用MapReduce的Java接口实现经典的WordCount2.wordcount运行过程解析3. MapReduce实现数据去重操作4. MapReduce实现数据排序5. MapReduce实现数据平均数据的计算第7个主题：HBase架构设计和实现剖析1、 HBase定义2、 HBase与RDBMS的对比3、数据模型4、系统架构5、 HBase上的MapReduce6、表的设计第8个主题：HBase集群及其管理1、集群的搭建过程讲解2、集群的监控3、集群的管理第9个主题：HBase客户端1、 HBase Shell以及演示2、 Java客户端以及代码演示时间内容备注第二天第1个主题：HBase案例实战1---使用HBase实现微博系统1.项目架构和设计2.开发环境搭建3.实现用户登录和注销4.“关注”功能的设计和实现5.“发微博”功能的设计和实现6.发布和运行整个基于HBase的