登录社区云，与社区用户共同成长
邀请您加入社区
本文讲解HBase运行机制。HBase架构清晰，Region服务器是关键。Store含内存缓存与磁盘文件，读写操作依赖二者。HLog保障系统容错，故障时借助其与Zookeeper实现数据恢复。
HDFS块大小不是随意设定的，而是在多个因素之间精心权衡的结果：fill:#333;important;important;fill:none;color:#333;color:#333;important;fill:none;fill:#333;height:1em;块大小决策因素寻址开销NameNode内存Map任务并行度网络传输磁盘I/O平衡点128MB核心平衡公式最优块大小 = f(寻址开
简而言之，HDFS 和 YARN 各自担任不同的角色。HDFS 作为存储系统，负责数据的分布式存储和管理，确保数据的高可用性；而 YARN 作为资源管理系统，负责调度和管理集群资源，确保作业能够高效执行。两者合作，共同构成了大数据处理平台的核心。可以说，HDFS 提供了坚实的数据存储基础，而 YARN 则提供了高效的资源调度和任务执行平台。
前面介绍高可用集群部署的几个组件，本小节就以常见的3节点来搭建一个高可用的HDFS集群。基于下面的规划来实现（实际为了简单，这里的ZooKeeper使用的单节点）。由于进程比较多，所以我这里给了每台机器8G内存，实际4G应该也可以。
代码全部准备好，直接抄作业
