HDFS 基于路由方式下的多集群管理

作者/分享人:爱闲逛的猿仔
向 Ta 提问
Apache Hadoop Committer / PMC,其中研究领域为HDFS模块,曾参与HDDS(Ozone)和RBF特性的开发工作。著有《深度剖析Hadoop HDFS》一书,百万级访问量博主(https://blog.csdn.net/Androidlushaengderen)

在当今互联网时代,业务高速发展,对于底层平台服务的要求在不断地提高。传统单一集群式的服务模式将会越来越暴露出它的局限性,包括它的单主节点性能瓶颈,异构环境下的服务模式等等,而多集群协同服务将会是大规模集群服务的一个重要演变趋势。例如一个典型的使用场景,一个公司的业务规模十分庞大,底下有多个 HDFS 集群做数据存储,那么我们如何去做跨集群的数据访问以及多集群间的管理呢。

本次 Chat 将带领大家学习了解 HDFS 多集群的新尝试方案:基于路由方式(RBF)的多集群管理。通过本 Chat 的学习您将学习到:

  1. 传统 HDFS 多集群管理方案:ViewFs+Federation 方案
  2. 传统多集群管理方式的弊端
  3. RBF:基于路由的多集群管理
  4. RBF 功能的独有特性
  5. RBF 的未来工作展望

目前大家对 HDFS 多集群讨论的比较多的还是 ViewFs+Federation 方案,本 Chat 将要阐述的 RBF 方案将给大家带来新的尝试方向和一些新的思路。

已有159人预订
预订达标
文章出炉
交流日期
     
08月22日
09月05日
09月13日 20:30
你可能还喜欢
如何设计一个灵活的 MySQL 数据表,应对灵活多变的需求
李岩
Jenkins 自动化构建部署实战
火币集团研发中心
Java 程序员应掌握的 Nginx 实战应用
JPM
带你玩转 JSON
能量架构师
实战剖析 Java 秒杀系统的实现
虎口脱险
小程序从入门到进阶
loonglong
从零搭建 Hadoop 集群
杨爵爷
你不得不了解的 Flutter 入门教程
火币集团研发中心
实战讲解接口自动化测试思路
金刚
一篇文章读懂 MySQL 中的锁
张宏杰
Java 并发面试题解
Eric Chen
AWD 线下攻防生存之道(Web 方向)
江江河畔砍柴人
从 Word Embedding 到 Bert:一起肢解 Bert!
武博士
电商项目可扩展性数据库设计与实现
丹丹
Linux 脚本攻略一(基础知识点)
无人驾驶
微信扫描登录