HDFS 基于路由方式下的多集群管理

作者/分享人:爱闲逛的猿仔
向 Ta 提问
Apache Hadoop Committer / PMC,其中研究领域为HDFS模块,曾参与HDDS(Ozone)和RBF特性的开发工作。著有《深度剖析Hadoop HDFS》一书,百万级访问量博主(https://blog.csdn.net/Androidlushaengderen)

在当今互联网时代,业务高速发展,对于底层平台服务的要求在不断地提高。传统单一集群式的服务模式将会越来越暴露出它的局限性,包括它的单主节点性能瓶颈,异构环境下的服务模式等等,而多集群协同服务将会是大规模集群服务的一个重要演变趋势。例如一个典型的使用场景,一个公司的业务规模十分庞大,底下有多个 HDFS 集群做数据存储,那么我们如何去做跨集群的数据访问以及多集群间的管理呢。

本次 Chat 将带领大家学习了解 HDFS 多集群的新尝试方案:基于路由方式(RBF)的多集群管理。通过本 Chat 的学习您将学习到:

  1. 传统 HDFS 多集群管理方案:ViewFs+Federation 方案
  2. 传统多集群管理方式的弊端
  3. RBF:基于路由的多集群管理
  4. RBF 功能的独有特性
  5. RBF 的未来工作展望

目前大家对 HDFS 多集群讨论的比较多的还是 ViewFs+Federation 方案,本 Chat 将要阐述的 RBF 方案将给大家带来新的尝试方向和一些新的思路。

已有176人预订
预订达标
文章出炉
交流日期
     
18.08.22
18.09.05
18.09.13 20:30
你可能还喜欢
有关微服务的简介和经验分享
Yang
大型 Java 应用后台重构技术策略详解
驰骋
如何在繁重工作间隙保持良好的自学节奏和效能?
大妈
微服务网关 Spring Cloud Gateway 的应用实战
aoho求索
如何采用一套程序代码,实现系统的“千人千面”
白公
Docker 的基础知识整理
假不理
JVM 常见面试题指南
驰骋
分布式链路追踪的前世今生
ASCE1885
Dubbo 框架内核原理剖析
追梦
RocketMQ 消息类型介绍及实现原理探究
老田
穷人的新年红包系统,单节点 12W TPS
文心紫竹
Vue.js 快速开发小程序实战
芒果
IoT:树莓派实现 Serverless 架构的商场人流分析系统
苏堤嘉木
从源码的角度了解分析面试过程中遇到的 Spring 问题
杨琪
深入理解延迟调度线程池原理与实现
南桥畂翊
微信扫描登录