大数据计算加速论坛

背景介绍

4月23日09:00-12:45,在DataFunSummit2022:大数据计算架构峰会上,由腾讯云大数据资深高级工程师熊训德出品的大数据计算加速论坛,将邀请来自腾讯、阿里巴巴、矩阵起源、喜马拉雅的5位技术专家,就相关主题进行深度分享,欢迎大家一起探讨交流。

具体日程

详细介绍

出品人:熊训德

腾讯云 大数据资深高级工程师

个人介绍:四川大学硕士毕业后加入腾讯,在腾讯云大数据从事 hadoop 生态相关的云存储和计算等后台开发,专注于研究大数据、虚拟化和人工智能等相关技术。

嘉宾介绍:

1. 王华 腾讯 高级工程师

个人介绍:华中科技大学计算机学院硕士,毕业后加入腾讯云EMR,现主要负责腾讯云EMR 监控&自动化运维模块的开发工作。

演讲主题:云原生混合算力助力计算加速

演讲提纲:

1. 大数据资源使用现状

2. 大数据混合算力部署方案

  • 离在线容器化部署方案
  • AM资源限制
  • 实现YARN或标签调度

3. 混合算力自动弹性能力

  • EMR自动弹性扩缩容介绍
  • 感知触发加速
  • 资源扩容加速

4. 落地实践

听众收益:

  • 大数据计算效率问题和解决方案
  • 云原生混合算力计算加速如何保证作业稳定性
  • 腾讯云EMR如何助力云原生弹性加速计算能力

2. 董国平 阿里云 高级技术专家

个人介绍:2010年加入阿里巴巴,目前服务于阿里云计算平台事业部,长期从事计算平台多租系统和系统安全建设,熟悉安全容器,虚拟网络和 K8s 等。

演讲主题:大数据平台 MaxCompute 公有云多租户设计

演讲提纲:公有云大数据平台在多租户支持的程度和实现方式上有所差异。该主题主要介绍在公有云大数据平台多租实现方案中需要考虑的问题和面临的挑战并介绍了 MaxCompute 在计算和存储多租实现上的特点和优势。

听众受益:

  • 了解大数据平台中多租方案设计中需要关注的问题和挑战
  • 了解强多租方案的可能技术路线
  • 了解 MaxCompute 的产品特色

3. 金海 矩阵起源 研发VP

个人介绍:大数据、高性能计算和分布式系统领域技术专家。前Zilliz研发负责人,从0到1完成向量数据库Milvus的研发。曾任职宝马和爱立信核心技术团队,具备丰富的行业经验和产品开源经验。国内第一个GPU与向量数据库研发负责人,上海交通大学EE专业硕士。

演讲主题:新一代超融合数据库的技术挑战

演讲提纲:当前大数据系统需要处理的业务场景丰富,数据类型众多,数据格式复杂。这就导致,整个大数据体系的组件也非常多。而如此复杂的大数据技术栈,也就给企业应用大数据技术,带来了巨大的成本。而这样的高成本,也必然会阻碍大数据技术在各行各业的推广。

为了解决这样的复杂性,业内已经出现了一些具备融合特征的数据库类型:HTAP,期望采用一套系统来同时处理交易型和分析型负载;而湖仓一体,则是希望统一数据湖和数据仓库的处理能力;流批一体,单一系统具备流处理和批处理的能力。新一代超融合数据库希望能够在现有融合技术的基础上,采用单一系统支撑更多的业务负载,从而进一步简化大数据平台的构建复杂度。

本次分享将从计算,存储等层面,分析超融合数据库面临的主要技术挑战。

听众收益:

  • 当前大数据和数据库的发展现状
  • 超融合数据库在计算和存储层面的主要挑战和解决办法

4. 陈涛 喜马拉雅 技术专家

个人介绍:喜马拉雅大数据集群架构负责人,主要负责大数据集群稳定性提升。曾负责从0到1构建喜马拉雅大数据计算平台团队,包括计算引擎、调度系统、大数据监控系统和可视化系统等。

演讲主题:喜马拉雅大数据弹性云的方案演进

演讲提纲:

  • 集群现状、问题与优化
  • 存储治理
  • 计算弹性
  • 计算缓存加速

听众收益:

  • 集群稳定性的一些优化
  • 如何通过弹性云方案作为IDC资源的重要补充
  • 上云过程中的一些思考

5. 陈曦 腾讯 高级工程师

个人介绍:腾讯高级软件工程师,负责腾讯 Alluxio 产品开发与维护。

演讲主题:腾讯 Alluxio 加速下一代大数据业务落地

演讲提纲:介绍 Alluxio 概念、原理、应用场景,以及新特性介绍。分享腾讯在 Alluxio 上的新特性研发和性能稳定性方面的改进。

听众收益:介绍 Alluxio 新特性,腾讯的落地场景。

直播报名

识别二维码,免费报名

报名成功后,请按照提示,入群收看。