Hadoop_HDFS源码分析

1. 源码编译

1.1 为什么要编译源码

1.2 怎么编译源码

1.2.1 Linux平台编译Hadoop

 

 

 1.2.2 Windows平台编译Hadoop

 

 

 

 2. 源码结构分析

2.1 hadoop-hdfs

2.2 hadoop-hdfs-client

2.3 hadoop-hdfs-httpfs

2.4 hadoop-hdfs-native-client

2.5 hadoop-hdfs-nfs

2.6 hadoop-hdfs-rbf

3. IDEA 调试功能

4. 客户端核心类

4.1 Configuration 类

 4.2 FileSystem

 5. Hadoop通信协议

5.1 RPC协议

 5.2  ClinetProtocol

 

5.3 ClientDatanodeProtocol

5.4  DatanodeProtocol

 5.5 流式接口

 5.6 写数据流程

5.6.1 代码

5.6.2 客户端请求创建文件

 5.6.3 NameNode检查

 

 

5.6.4 DataStreamer

 

 

 

5.7 读数据分析