一点一滴

“大数据”

大数据-分类

Hive--踩过的坑

1.这两天在做hive集群迁移 hive1.2迁移至hive 2.1,在做迁移的过程中遇到一个问题Exception in thread "main" java.lang.A...

Hive--元数据库

1.BUCKETING_COLS描述了所有采用了分桶技术的SDS表名BUCKETING_COLS 字段类型名称备注SD_IDBIGINT(20)唯一标记一个数据存储记录 BUCKET_COL_...

Hadoop 源码学习笔记(5)--Hdfs 之 BlockManager 解析

https://www.jianshu.com/p/7321716b3227之前的章节说过 FSDirectory 中记录了所有的文件节点信息,而具体的文件内容则被分布式的存储在各个 DataN...

HDFS Namenode启动过程

http://www.cnblogs.com/wcwen1990/p/6736595.htmlNamenode保存文件系统元数据镜像,namenode在内存及磁盘(fsimage和editslo...

NameNode格式过程

NameNode.Main()函数1、调用startupShutdownMessage输出启动、停止日志信息;2、创建namenode:通过调用createNameNode(args,null)...