博客
关于我
HDFS分布式文件系统架构
阅读量:124 次
发布时间:2019-02-26

本文共 1860 字,大约阅读时间需要 6 分钟。

HDFS?????????

HDFS?????????

HDFS????

?????????????????????????????????????????????????????????????????????????????????

  • ??????????????????????
  • ???????????????????????????????
  • ??????????????????????????????????

????????????????????????????????????????????????????????????????????????????????

??????

??????????????

  • FAT???Windows??????????????????
  • NTFS?Windows NT???????????????????
  • exFAT?????????????????????
  • EXT/EXT4?Linux??????????????????

HDFS??????

HDFS?Hadoop Distributed FileSystem????Google GFS???????????????????????????????????????????????????????

HDFS????????????????????????????????WORM?????????????????????????????????

HDFS????

HDFS??????????

  • NameNode????????????????????????????????
  • DataNode?????????????????????????????????
  • Client????????????NameNode?DataNode???????
  • NameNode??

    NameNode?????????????Editlog???????Fsimage?????????????NameNode??????Editlog??64MB??????????????????????????

    DataNode??

    DataNode??????????????128MB???????????Fsimage?????DataNode???????NameNode??????????????

    Client??

    Client????HDFS??????DistributedFileSystem???NameNode?DataNode??????????JDBC?ODBC???????????????

    HDFS????

    ?????HA?

    HDFS??Zookeeper??HA???????NameNode??????JN?JournalNode??????Editlog????????????

    ????

    HDFS??????????????????????0?2?4????????????????????????????

    ??????

    ???????????Fsimage???????????????????????????????????????????????

    ??????

  • Client?NameNode??RPC??????????
  • Client??FSDataOutputStream??????????
  • DataNode????????????????
  • ??????NameNode?????????????
  • ??????

  • Client?NameNode???????????????
  • Client??DFSInputStream?????????DataNode?????????
  • ??????Client??????????
  • HDFS????

    ??????????

    ????????????????????????????????????????????????????????

    ???Federation?

    Federation???????NameSpace?BlockPool????????????????ClientSideMountTable???????????????????

    ??????

    HDFS????????????????????????????????????????????

    ???????HDFS?????????????????????????????????

    转载地址:http://vxoy.baihongyu.com/

    你可能感兴趣的文章
    PowerShell攻击工具PowerSploit实战
    查看>>
    Powershell管理系列(四)Lync server 2013 批量启用语音及分配分机号
    查看>>
    PowerShell脚本运行完 不要马上关闭用什么命令可以停留窗口窗口
    查看>>
    PowerShell远程连接到Windows
    查看>>
    power(8) identity
    查看>>
    POW的重力之美
    查看>>
    PO、VO、DAO、BO、DTO、POJO能分清吗?
    查看>>
    pytorch介绍-ChatGPT4o作答
    查看>>
    PP-PLL:基于概率传播的部分标签学习
    查看>>
    pytorch介绍
    查看>>
    pprint 排序字典但不是集合?
    查看>>
    pptp拨号上网
    查看>>
    ppt上的倒计时小工具_PPT中有哪些「看似很 LOW,实则惊艳」的小工具
    查看>>
    PPT添加视频的路径问题
    查看>>
    PPT美化插件 islide 安装过程问题“加载com加载项时运行出现错误”
    查看>>
    Prefix Tuning:详细解读Optimizing Continuous Prompts for Generation
    查看>>
    PreparedStatement 与Statement 的区别,以及为什么推荐使用 PreparedStatement ?
    查看>>
    PreparedStatement 查询 In 语句 setArray 等介绍。
    查看>>
    presentModalViewController显示半透明的一个view
    查看>>
    PresentViewController切换界面
    查看>>