直播 | 58离线计算平台建设与实践

大数据平台的定位主要是服务数据开发人员,提高数据开发效率,提供便捷的开发分析流程,有效支持数据仓库及数据应用建设。通常大数据平台通用基础能力包括:数据存储、实时计算、离线计算、数据查询分析,本期沙龙将聚焦大数据平台基础能力,和大家一起系统的探讨58在离线计算平台、实时计算平台、Hbase平台、ElasticSearch平台方面建设实践的思路、方案和问题解决之道。

出品人: 吴培培,58大数据部负责人,技术副总监,技术委员会数据分会主席。负责规划和推动58数据中台的建设与落地,包括大数据平台、数据仓库、数据产品、用户画像等。2012年硕士毕业于华中科技大学。

03

本期摘要

58离线计算平台基于Hadoop生态体系打造,单集群4000+台服务器,数百PB存储,日40万计算任务,面临挑战极大。

本次议题主要介绍:

1.  58 在集 群快速增长的过程中遇到的问题以及解决之 道;

2. 58大数据集群跨机房迁移的相关工作,如何在5个月时间快速完成3000台集群服务的迁移工作。

听众收益:

熟悉了解58大数据平台的架构体系,深入了解大规模集群建设过程中遇到相关问题及挑战。

新技术/实用技术点:

了解学习Hadoop生态相关技术。

04

分享嘉宾

余意

58同城 | 高级架构师

58同城数据平台部负责人,负责公司统一大数据基础服务能力的建设,包括海量数据收集,离线计算,实时计算,OLAP,Hbase平台等,支持58各大业务线高效稳定数据平台服务能力需求。

05

直播报名

识别下方二维码, 免费报名:

一个在看,一段时光! :point_down:

我来评几句
登录后评论

已发表评论数()

相关站点

+订阅
热门文章