一点一滴

“大数据”

大数据-分类

datanode-StorageDirectory

https://www.cnblogs.com/xuxm2007/archive/2012/07/04/2576745.html

HDFS的StartupProgress启动跟踪分析

http://blog.csdn.net/Androidlushangderen/article/details/51992107很好 mark一下 以后自己弄一下这个文章。

NameNode启动过程

启动NameNode的进程sbin/start-dfs.sh里面的核心代码如下#通过命令查询处所有的NameNode NAMENODES=$("${HADOOP_HDFS_HOME}/...

Hadoop的scheduler后台界面如何查看完整sql

老是在这个界面看不全看不到完整的sql。

FSImage元数据结构

Fsimage文件采用protobuf编码格式,在源码中proto文件名为fsimag.proto,存储的格式来说是二进制文件。从源码的load方法中可以看到FSImage格式如下:上图为FSI...