Hadoop实战+超大集群调优
课程观看地址:http://www.xuetuwuyou.com/course/97
课程出自学途无忧网:http://www.xuetuwuyou.com
课程使用到的软件:
apache-maven-3.0.5-bin.tar.gz
eclipse-jee-kepler-R-win32-x86_64
hadoop-1.1.2.tar.gz
hadoop-2.5.0-cdh5.2.0-src.tar.gz
hadoop-2.5.0-cdh5.2.0.tar.gz
hive-0.13.1-cdh5.2.0.tar.gz
jdk-7u67-linux-x64.tar.gz
jdk-7u79-linux-i586.gz
PieTTY 0.3.26.exe
protobuf-2.5.0.tar.gz
SecureCRT.zip
VMWare10
CentOS
zookeeper-3.4.5-cdh5.2.0.tar.gz
第一阶段:hadoop入门学习
第00讲:课程概述
第1讲:hadoop1入门-HDFS架构
第2讲:hadoop1入门-HDFS副本存放策略
第3讲:hadoop1入门-mapreduce架构
第4讲:hadoop1入门-生产环境分布
第5讲:hadoop1伪分布搭建(1)
第6讲:hadoop1伪分布搭建(2)
第7讲:Mapreduce1运行过程详解
第三阶段:HDFS API开发和RPC框架介绍
第19讲:hadoop2伪分布搭建和maven工程搭建
第20讲:URL操作HDFS
第21讲: FileSystem操作HDFS(1)
第22讲:FileSystem操作HDFS(2)
第23讲:HDFS使用伪装用户
第24讲:获取HDFS集群信息
第25讲:HDFS案例演示
第26讲:RPC例子演示
第27讲:Namenode源码导读
第28讲:HDFS读写文件过程总结
第四阶段:Mapreduce开发
第29讲:MapReduce-键值对变化
第30讲:Mapreduce-WordCount例子演示
第31讲:MapReduce-Shuffle详解
第32讲:MapReduce-TOOL优化
第33讲:MapReduce-自定义计数器
第34讲:MapReduce-Map数和Reduce数设置
第35讲:MapReduce-最大值算法
第36讲:MapReduce-combine使用
第37讲:Mapreduce-TopN算法
第38讲:Mapreduce-自定义数据类型(手机流量)
第39讲:Mapreduce-自定义分区(1)
第40讲:Mapreduce-自定义分区(2)
第41讲:Mapreduce-二次排序
第五阶段:超大集群调优
第42讲:集群时间同步
第43讲:句柄数设置
第44讲:HDFS回收站配置
第45讲:配额管理
第46讲:Yarn资源配置
第47讲:日志管理
第48讲:本地库编译
第49讲:压缩格式介绍
第50讲:文件格式介绍
第51讲:YARN调度器配置
第52讲:Linux参数配置
第53讲:HDFS参数配置
第54讲:Mapreduce参数配置
第55讲:hadoop3新功能介绍
《Hadoop架构设计与源码分析第一季》
课程观看地址:http://www.xuetuwuyou.com/course/88
2016年最新Hadoop零基础实战视频教程
课程观看地址:http://www.xuetuwuyou.com/course/62
Hadoop实战+超大集群调优_Hadoop集群调优课程
《Hadoop实战》热门书评
-
非常好的入门书
7有用 0无用 刺猬 2010-11-28
手头上买了本《Hadoop权威指南》,惨不忍睹地翻了一个月,一无所获。宁肯看这本电子书,也不要《Hadoop权威指南》!...
-
上手还行
6有用 1无用 平凡的老鱼 2012-07-04
这是一本不是傻瓜类型的上手书,个人一般称傻瓜型的为入门书。好吧,第一部分就是傻瓜部分,只要你把前三章看完,你就知道hadoop是什么,hadoop总体结构,hadoop的基本运行原理。至少知道了什么是map reduce, 之前听一个搞数据库的哥们说了两回也没有太清楚。第二部分没有细看,粗略翻了翻,...
-
满分100:内容70+翻译20 = 90分
4有用 0无用 bdceo 2013-11-09
书中主要使用的是hadoop-0.19.1版本翻译有些地方还是差强人意,上下文理解起来有时费劲书中代码,不用说,在一个低版本上跑,包括自己搭环境,会是一个问题个人不太推荐此书作为入门hadoop学习整本书涉及的技术点可以说全部都是点到为止,不做深入,读完后,知道相关的技术点概念,实战性东西,靠自己摸...
-
hadoop入门
2有用 0无用 给它一点时间 2013-09-24
1 基本上把mapReduce的思想讲清楚了,hadoop更多是使用方面的。基本上看个前三章,就能对mapreduce和hadoop有基本的理解。2 它其实还没有严格来区分mapreduce和hadoop,根据我的理解。mapReduce是一种算法,一种思路。hadoop则实现了这种思路。为了应用这...
-
datajoin包有坑
1有用 0无用 吃不下筷子咽不下碗 2013-03-07
不能完全照着本书,还需注意几个情况,详见http://www.cnblogs.com/aprilrain/archive/2013/01/28/2880460.html☺☻☺☻☺☻☺☻☺☻☺☻☺☻☺☻☺☻☺☻☺☻☺☻够长了吗?...