博客
关于我
HDFS分布式文件系统架构
阅读量:124 次
发布时间:2019-02-26

本文共 1860 字,大约阅读时间需要 6 分钟。

HDFS?????????

HDFS?????????

HDFS????

?????????????????????????????????????????????????????????????????????????????????

  • ??????????????????????
  • ???????????????????????????????
  • ??????????????????????????????????

????????????????????????????????????????????????????????????????????????????????

??????

??????????????

  • FAT???Windows??????????????????
  • NTFS?Windows NT???????????????????
  • exFAT?????????????????????
  • EXT/EXT4?Linux??????????????????

HDFS??????

HDFS?Hadoop Distributed FileSystem????Google GFS???????????????????????????????????????????????????????

HDFS????????????????????????????????WORM?????????????????????????????????

HDFS????

HDFS??????????

  • NameNode????????????????????????????????
  • DataNode?????????????????????????????????
  • Client????????????NameNode?DataNode???????
  • NameNode??

    NameNode?????????????Editlog???????Fsimage?????????????NameNode??????Editlog??64MB??????????????????????????

    DataNode??

    DataNode??????????????128MB???????????Fsimage?????DataNode???????NameNode??????????????

    Client??

    Client????HDFS??????DistributedFileSystem???NameNode?DataNode??????????JDBC?ODBC???????????????

    HDFS????

    ?????HA?

    HDFS??Zookeeper??HA???????NameNode??????JN?JournalNode??????Editlog????????????

    ????

    HDFS??????????????????????0?2?4????????????????????????????

    ??????

    ???????????Fsimage???????????????????????????????????????????????

    ??????

  • Client?NameNode??RPC??????????
  • Client??FSDataOutputStream??????????
  • DataNode????????????????
  • ??????NameNode?????????????
  • ??????

  • Client?NameNode???????????????
  • Client??DFSInputStream?????????DataNode?????????
  • ??????Client??????????
  • HDFS????

    ??????????

    ????????????????????????????????????????????????????????

    ???Federation?

    Federation???????NameSpace?BlockPool????????????????ClientSideMountTable???????????????????

    ??????

    HDFS????????????????????????????????????????????

    ???????HDFS?????????????????????????????????

    转载地址:http://vxoy.baihongyu.com/

    你可能感兴趣的文章
    POJ2891:Strange Way to Express Integers——题解
    查看>>
    poj3045 Cow Acrobats(二分最大化最小值)
    查看>>
    poj3061 Subsequence(尺取法)
    查看>>
    poj3074 DLX精确覆盖
    查看>>
    poj3252(组合数)
    查看>>
    Qt笔记——QToolBox开发简易QQ聊天界面
    查看>>
    poj3307
    查看>>
    Qt笔记——QString与隐式共享、MVC架构
    查看>>
    Qt笔记——QSemaphore处理生产者/消费者模式
    查看>>
    Qt笔记——QMutex&QWaitCondition处理生产者消费者模式
    查看>>
    Qt笔记——QLable+QPixmap图片缩放踩坑
    查看>>
    Qt笔记——foreach与forever
    查看>>
    QT程序怎么挪到Linux下,linux+Qt程序如何打包发布
    查看>>
    Qt知识:视图框架QGraphicsWidget详解
    查看>>
    SpringBoot中项目启动及定时任务缓存数据库常用数据至内存变量并转换后高频调用
    查看>>
    Qt知识: 画刷风格
    查看>>
    QT的OpenGL渲染窗QOpenGLWidget Class
    查看>>
    QT的C++程序加载动态链接库DLL(Linux下是so)的方式
    查看>>
    QT界面操作1:如何跟踪鼠标位置?
    查看>>
    Qt环境搭建(Visual Studio)
    查看>>