博客
关于我
HDFS分布式文件系统架构
阅读量:124 次
发布时间:2019-02-26

本文共 1860 字,大约阅读时间需要 6 分钟。

HDFS?????????

HDFS?????????

HDFS????

?????????????????????????????????????????????????????????????????????????????????

  • ??????????????????????
  • ???????????????????????????????
  • ??????????????????????????????????

????????????????????????????????????????????????????????????????????????????????

??????

??????????????

  • FAT???Windows??????????????????
  • NTFS?Windows NT???????????????????
  • exFAT?????????????????????
  • EXT/EXT4?Linux??????????????????

HDFS??????

HDFS?Hadoop Distributed FileSystem????Google GFS???????????????????????????????????????????????????????

HDFS????????????????????????????????WORM?????????????????????????????????

HDFS????

HDFS??????????

  • NameNode????????????????????????????????
  • DataNode?????????????????????????????????
  • Client????????????NameNode?DataNode???????
  • NameNode??

    NameNode?????????????Editlog???????Fsimage?????????????NameNode??????Editlog??64MB??????????????????????????

    DataNode??

    DataNode??????????????128MB???????????Fsimage?????DataNode???????NameNode??????????????

    Client??

    Client????HDFS??????DistributedFileSystem???NameNode?DataNode??????????JDBC?ODBC???????????????

    HDFS????

    ?????HA?

    HDFS??Zookeeper??HA???????NameNode??????JN?JournalNode??????Editlog????????????

    ????

    HDFS??????????????????????0?2?4????????????????????????????

    ??????

    ???????????Fsimage???????????????????????????????????????????????

    ??????

  • Client?NameNode??RPC??????????
  • Client??FSDataOutputStream??????????
  • DataNode????????????????
  • ??????NameNode?????????????
  • ??????

  • Client?NameNode???????????????
  • Client??DFSInputStream?????????DataNode?????????
  • ??????Client??????????
  • HDFS????

    ??????????

    ????????????????????????????????????????????????????????

    ???Federation?

    Federation???????NameSpace?BlockPool????????????????ClientSideMountTable???????????????????

    ??????

    HDFS????????????????????????????????????????????

    ???????HDFS?????????????????????????????????

    转载地址:http://vxoy.baihongyu.com/

    你可能感兴趣的文章
    Oracle系列:安装Oracle RAC数据库(二)
    查看>>
    oracle系统 介绍,ORACLE数据库管理系统介绍
    查看>>
    oracle获取数据库表、字段、注释、约束等
    查看>>
    Oracle计划将ZGC项目提交给OpenJDK
    查看>>
    Oracle闪回技术(Flashback)
    查看>>
    oracle零碎要点---ip地址问题,服务问题,系统默认密码问题
    查看>>
    oracle零碎要点---oracle em的web访问地址忘了
    查看>>
    Oracle零碎要点---多表联合查询,收集数据库基本资料
    查看>>
    Oracle静默安装
    查看>>
    Oracle面试题:Oracle中truncate和delete的区别
    查看>>
    ThreadLocal线程内部存储类
    查看>>
    thinkphp 常用SQL执行语句总结
    查看>>
    Oracle:ORA-00911: 无效字符
    查看>>
    Text-to-Image with Diffusion models的巅峰之作:深入解读 DALL·E 2
    查看>>
    TCP基本入门-简单认识一下什么是TCP
    查看>>
    tableviewcell 中使用autolayout自适应高度
    查看>>
    Orcale表被锁
    查看>>
    svn访问报错500
    查看>>
    org.apache.ibatis.exceptions.TooManyResultsException: Expected one result (or null) to be returned
    查看>>
    org.apache.ibatis.type.TypeException: Could not resolve type alias 'xxxx'异常
    查看>>