- Handop是由Apache基金会开发,开源性(java),可靠性,低成本,高效性,灵活性,数据可靠性
- Handop框架核心架构:采用主从架构,由一个 NameNode(主节点)和多个 DataNode(从节点)组成。NameNode 管理文件系统的命名空间和客户端对文件的访问,DataNode 负责存储实际的数据块。
- HDFG分布式框架
- HDFG简介及架构
- HDFG是分布式文件系统
- NameNode存放源信息
- 数据块是128MB
- 特点;高容错性,适合大规模数据的处理,流式数据访问(一次写入,多次读取一旦写入,不能修改)
- 缺点;无法高效储存小文件,不支持多用户写入多次修改,不适合延迟数据访问
- 数据切分--复制(有容错机制)
- 备份处理
- 宕机处理;心跳信息是否接收到,否移除并在寻找
副本存放在di