WOT峰会
学科分类 - 计算机科学技术
时长:MP4
来源 -
51CTO
演讲人介绍:知乎大数据平台负责人,多年大数据基础架构和平台领域工作经验。目前主要负责知乎计算、存储和调度相关的基础设施和平台建设。演讲简介:随着知乎业务的快速发展,技术架构逐渐从单一机房演化为基于多云的架构。我们将在线服务和离线大数据计算分为两个不同机房,由此也产生了数据跨机房传输的问题。为了更好应对业务需求、尤其算法相关场景,我们需要在不同集群之间快速调度模型和特征数据。本次分享主要介绍知乎在多云数据缓存方面的实践和发展历史。主题大纲:1.背景和简介,介绍知乎的多云架构,以及业务的使用场景2.多云跨机房的挑战低延时异构的网络环境和云服务专线带宽管理问题统一访问接口3.数据编排解决方案4.自研 UnionStore5.Alluxio6.总结和展望听众收益:1.了解多云架构下的主要问题和挑战2.了解 Alluxio 架构在企业内部的落地实践
万献初
张帆
张帆
周彬
龚群