HDFS 基于路由方式下的多集群管理

作者/分享人:爱闲逛的猿仔
向 Ta 提问
Apache Hadoop Committer / PMC,其中研究领域为HDFS模块,曾参与HDDS(Ozone)和RBF特性的开发工作。著有《深度剖析Hadoop HDFS》一书,百万级访问量博主(https://blog.csdn.net/Androidlushaengderen)

在当今互联网时代,业务高速发展,对于底层平台服务的要求在不断地提高。传统单一集群式的服务模式将会越来越暴露出它的局限性,包括它的单主节点性能瓶颈,异构环境下的服务模式等等,而多集群协同服务将会是大规模集群服务的一个重要演变趋势。例如一个典型的使用场景,一个公司的业务规模十分庞大,底下有多个 HDFS 集群做数据存储,那么我们如何去做跨集群的数据访问以及多集群间的管理呢。

本次 Chat 将带领大家学习了解 HDFS 多集群的新尝试方案:基于路由方式(RBF)的多集群管理。通过本 Chat 的学习您将学习到:

  1. 传统 HDFS 多集群管理方案:ViewFs+Federation 方案
  2. 传统多集群管理方式的弊端
  3. RBF:基于路由的多集群管理
  4. RBF 功能的独有特性
  5. RBF 的未来工作展望

目前大家对 HDFS 多集群讨论的比较多的还是 ViewFs+Federation 方案,本 Chat 将要阐述的 RBF 方案将给大家带来新的尝试方向和一些新的思路。

已有186人预订
预订达标
文章出炉
交流日期
     
18.08.22
18.09.05
18.09.13 20:30
你可能还喜欢
解读《阿里巴巴 Java 开发手册》背后的思考
Hollis
LeetCode 刷题指南以及常见算法题解题思路总结
kerry
初探 Kafka
阿福
高并发系统缓存实战入门
饿了么物流技术团队
7 天从 Java 工程师转型为 Go 工程师
DIU哥
大数据开发面试指南
王知无
从零开始做你自己的文字识别系统
天马行空
程序员转型之路:做一个不会失业的独立开发者
Jeff
RabbitMQ 实战
寒月
掌握这些方法和技巧,你的自学才会更加有效率!
一个自学的程序员
代码案例讲解程序员的第一性原理
天马行空
Git 扫盲:用命令行剖析 Git 底层实现
叫我闪电
写一个 IoC/DI 容器来理解 Spring 框架的思想
愚凡
Java 并发编程运用之多线程并发解析单个大文件入库
woodwang
Spring AOP 源码详解
林某人
微信扫描登录
关注提示×
扫码关注公众号,获得 Chat 最新进展通知!