“大数据”
大数据-分类HDFS的StartupProgress启动跟踪分析
http://blog.csdn.net/Androidlushangderen/article/details/51992107很好 mark一下 以后自己弄一下这个文章。
NameNode启动过程
启动NameNode的进程sbin/start-dfs.sh里面的核心代码如下#通过命令查询处所有的NameNode NAMENODES=$("${HADOOP_HDFS_HOME}/...
Hadoop的scheduler后台界面如何查看完整sql
老是在这个界面看不全看不到完整的sql。
FSImage元数据结构
Fsimage文件采用protobuf编码格式,在源码中proto文件名为fsimag.proto,存储的格式来说是二进制文件。从源码的load方法中可以看到FSImage格式如下:上图为FSI...
INodeReference机制
在hdfs2.6版本中，引入了许多新的功能，一些原有的源代码设计也有一定的改造。一个重要的更新就是引入了快照功能。但是当HDFS文件或者目录处于某个快照中，并且这个文件或者目录被重命名或者移动到...