马上注册,结交更多数据大咖,获取更多知识干货,轻松玩转大数据
您需要 登录 才可以下载或查看,没有帐号?立即注册
x
本帖最后由 168主编 于 2018-9-3 11:38 编辑
1 hadoop1.0时期架构2 hadoop2.0时期架构3 hdfs架构【Active Namenode】:主 Master(只有一个),管理 HDFS 的名称空间,管理数据块映射信息;配置副本策略;处理客户端读写请求 【Secondary NameNode】:NameNode 的热备;定期合并 fsimage 和 fsedits,推送给 NameNode;当 Active NameNode 出现故障时,快速切换为新的 Active NameNode。 【Datanode】:Slave(有多个);存储实际的数据块;执行数据块读 / 写 【Client】:与 NameNode 交互,获取文件位置信息;与 DataNode 交互,读取或者写入数据;管理 HDFS、访问 HDFS。 4 MapReduce架构或 或 或 5 yarn架构6 hadoop1.0与hadoop2.0比较图参考网址: http://blog.csdn.net/babyfish13/article/details/52527665 http://www.cnblogs.com/sharpxiajun/p/3151395.html |