首页 > 代码库 > 分布式文件系统比较出名的有HDFS? 和 GFS
分布式文件系统比较出名的有HDFS? 和 GFS
分布式文件系统比较出名的有HDFS 和 GFS,其中HDFS比较简单一点。本文是一篇描述非常简洁易懂的漫画形式讲解HDFS的原理。比一般PPT要通俗易懂很多。不难得的学习资料。
1、三个部分: 客户端、nameserver(可理解为主控和文件索引,类似Linux的inode)、datanode(存放实际数据)
在这里,client的形式我所了解的有两种,通过Hadoop提供的api所编写的程序可以和hdfs进行交互,另外一种就是安装了hadoop的datanode其也可以通过命令行与hdfs系统进行交互,如在datanode上上传则使用如下命令行:bin/hadoop fs -put example1 user/chunk/
2、如何写数据过程
3、读取数据过程
--------------------------------
1.翻译经典 HDFS 原理讲解漫画 之二----读数据和容错 - hudiefenmu的专栏 - CSDN博客
http://blog.csdn.net/hudiefenmu/article/details/37694503
== 以上 2017/7/8 下午12:40:15
4、容错:第一部分:故障类型及其检测方法(nodeserver 故障,和网络故障,和脏数据问题)
5、容错第二部分:读写容错
--------------------------------
1.翻译经典 HDFS 原理讲解漫画 之三---容错和副本布局策略 - hudiefenmu的专栏 - CSDN博客
http://blog.csdn.net/hudiefenmu/article/details/37820789
== 以上 2017/7/8 下午12:41:57
6、容错第三部分:dataNode 失效
7、备份规则
8、结束语
来源: http://blog.csdn.net/hipilee/article/details/7855612
参考:
--------------------------------
1.【转】【漫画解读】HDFS存储原理 - Bodi - 博客园
http://www.cnblogs.com/raphael5200/p/5497218.html
== 以上 2017/7/8 下午12:44:07
分布式文件系统比较出名的有HDFS? 和 GFS
声明:以上内容来自用户投稿及互联网公开渠道收集整理发布,本网站不拥有所有权,未作人工编辑处理,也不承担相关法律责任,若内容有误或涉及侵权可进行投诉: 投诉/举报 工作人员会在5个工作日内联系你,一经查实,本站将立刻删除涉嫌侵权内容。