博客
关于我
HDFS分布式文件系统架构
阅读量:124 次
发布时间:2019-02-26

本文共 1860 字,大约阅读时间需要 6 分钟。

HDFS?????????

HDFS?????????

HDFS????

?????????????????????????????????????????????????????????????????????????????????

  • ??????????????????????
  • ???????????????????????????????
  • ??????????????????????????????????

????????????????????????????????????????????????????????????????????????????????

??????

??????????????

  • FAT???Windows??????????????????
  • NTFS?Windows NT???????????????????
  • exFAT?????????????????????
  • EXT/EXT4?Linux??????????????????

HDFS??????

HDFS?Hadoop Distributed FileSystem????Google GFS???????????????????????????????????????????????????????

HDFS????????????????????????????????WORM?????????????????????????????????

HDFS????

HDFS??????????

  • NameNode????????????????????????????????
  • DataNode?????????????????????????????????
  • Client????????????NameNode?DataNode???????
  • NameNode??

    NameNode?????????????Editlog???????Fsimage?????????????NameNode??????Editlog??64MB??????????????????????????

    DataNode??

    DataNode??????????????128MB???????????Fsimage?????DataNode???????NameNode??????????????

    Client??

    Client????HDFS??????DistributedFileSystem???NameNode?DataNode??????????JDBC?ODBC???????????????

    HDFS????

    ?????HA?

    HDFS??Zookeeper??HA???????NameNode??????JN?JournalNode??????Editlog????????????

    ????

    HDFS??????????????????????0?2?4????????????????????????????

    ??????

    ???????????Fsimage???????????????????????????????????????????????

    ??????

  • Client?NameNode??RPC??????????
  • Client??FSDataOutputStream??????????
  • DataNode????????????????
  • ??????NameNode?????????????
  • ??????

  • Client?NameNode???????????????
  • Client??DFSInputStream?????????DataNode?????????
  • ??????Client??????????
  • HDFS????

    ??????????

    ????????????????????????????????????????????????????????

    ???Federation?

    Federation???????NameSpace?BlockPool????????????????ClientSideMountTable???????????????????

    ??????

    HDFS????????????????????????????????????????????

    ???????HDFS?????????????????????????????????

    转载地址:http://vxoy.baihongyu.com/

    你可能感兴趣的文章
    PythonStudy
    查看>>
    Pythons__IMPORT__未按预期工作
    查看>>
    Pythont通过request以及BeautifulSoup爬取几千条情话
    查看>>
    pythonweb django的学习
    查看>>
    pythonweb网站开发基础django安装
    查看>>
    pythonweb网站开发基础创建django项目
    查看>>
    pythonweb网站开发基础添加应用
    查看>>
    Python_015 多线程
    查看>>
    python_73_pickle序列化(接72)
    查看>>
    python_code_418
    查看>>
    python_day10 协程 GEVENT
    查看>>
    python_day1作业
    查看>>
    Python接口自动化测试必备基础之http协议详解!
    查看>>
    python_IDE开发环境使用_建立Python源文件---python工作笔记011
    查看>>
    Python_web框架解析
    查看>>
    Python__Enter__/__Exit__vs__init__(或__new__)/__del__
    查看>>
    python_对象的基本组成和内存示意图---python工作笔记016
    查看>>
    python_开发环境介绍_交互模式使用_IDE介绍和使用---python工作笔记010
    查看>>
    python_引用的本质_栈内存和堆内存_内存示意图---python工作笔记017
    查看>>
    python_标识符_帮助系统的使用_命名规则---python工作笔记018
    查看>>