一点一滴

一点一滴

点点滴滴,记录人生

Hadoop踩过的坑

1.20180603遇到一个问题。报异常如下18/06/03 11:07:18 INFO mapreduce.Job: map 100% reduce 20% 18/06/03 11:07:5...

Hadoop 源码学习笔记(5)--Hdfs 之 BlockManager 解析

https://www.jianshu.com/p/7321716b3227之前的章节说过 FSDirectory 中记录了所有的文件节点信息,而具体的文件内容则被分布式的存储在各个 DataN...

HDFS Namenode启动过程

http://www.cnblogs.com/wcwen1990/p/6736595.htmlNamenode保存文件系统元数据镜像,namenode在内存及磁盘(fsimage和editslo...

NameNode格式过程

NameNode.Main()函数1、调用startupShutdownMessage输出启动、停止日志信息;2、创建namenode:通过调用createNameNode(args,null)...

Hadoop-2.4.1学习之创建fsimage和edits源码分析

在Hadoop中fsimage保存最新的检查点信息,edits保存自最新检查点后的命名空间的变化。在分析hdfs namenode–format的源代码时,已经明确了该过程根据配置文件的信息创建...