01. 背景介绍 监控与报警系统对于业务生产环境来说是不可或缺的，一旦有故障发生，需要有完善的监控告警链路，保证告警消息可以实时完成推送并进行处理。 腾讯云事件总线（EventBridge）是一款安全、稳定、高效的无服务器事件管理平台。事件中心的事件总线可以接收来自您自己的应用程序、软件即服务（SaaS）和腾讯云服务的实时事件及相关数据流，通过集成消息推送和 SCF 云函数，可以实现邮件、短信、企业微信、钉钉、飞书等多种方式的通知。 流计算 Oceanus 是大数据产品生态体系的实时化分析利器，是基于 A

作者：于乐，腾讯 CSIG 工程师 一、 方案描述 1.1 概述 在线教育是一种利用大数据、人工智能等新型互联网技术与传统教育行业相结合的新型教育方式。发展在线教育可以更好的构建网络化、数字化、个性化、终生化的教育体系，有利于构建“人人皆学、处处能学、实时可学”的学习型社会。 本文针对某知名在线教育平台在腾讯云流计算 Oceanus 的业务案例，介绍了其中可能存在的一些性能问题，并针对这种问题进行了参数调优相关的介绍。 1.2 方案架构 某知名在线教育平台在流计算 Oceanus 上主要有两个业务应用场景

作者：于乐，腾讯 CSIG 工程师 一、 方案描述 1.1 概述 在线教育是一种利用大数据、人工智能等新型互联网技术与传统教育行业相结合的新型教育方式。发展在线教育可以更好的构建网络化、数字化、个性化、终生化的教育体系，有利于构建“人人皆学、处处能学、实时可学”的学习型社会。 本文针对某知名在线教育平台在腾讯云流计算 Oceanus 的业务案例，介绍了其中可能存在的一些性能问题，并针对这种问题进行了参数调优相关的介绍。 1.2 方案架构 某知名在线教育平台在流计算 Oceanus 上主要有两个业务应用场景

01. 背景介绍 监控与报警系统对于业务生产环境来说是不可或缺的，一旦有故障发生，需要有完善的监控告警链路，保证告警消息可以实时完成推送并进行处理。 腾讯云事件总线（EventBridge）是一款安全、稳定、高效的无服务器事件管理平台。事件中心的事件总线可以接收来自您自己的应用程序、软件即服务（SaaS）和腾讯云服务的实时事件及相关数据流，通过集成消息推送和 SCF 云函数，可以实现邮件、短信、企业微信、钉钉、飞书等多种方式的通知。 流计算 Oceanus 是大数据产品生态体系的实时化分析利器，是基于 A

人猿相揖别。只几个石头磨过，小儿时节。铜铁炉中翻火焰，为问何时猜得？不过几千寒热。人世难逢开口笑，上疆场彼此弯弓月。流遍了，郊原血。

作者：腾讯云流计算 Oceanus 团队 流计算 Oceanus 简介   流计算 Oceanus 是大数据产品生态体系的实时化分析利器，是基于 Apache Flink 构建的具备一站开发、无缝连接、亚秒延时、低廉成本、安全稳定等特点的企业级实时大数据分析平台。流计算 Oceanus 以实现企业数据价值最大化为目标，加速企业实时化数字化的建设进程。 本文将您详细介绍如何将数据写入 MongoDB。 前置准备 创建流计算 Oceanus 集群 进入 Oceanus 控制台 [1]，点击左侧【集群管理】，点击

在云计算中，存储扮演着非常重要的作用，采用共享存储的方式可以实现Oracle RAC等应用场景的需要。实际上云计算中的NAS、SAN存储中，有着不同的应用场景，我们来看一看。

作者：腾讯云流计算 Oceanus 团队 流计算 Oceanus 简介   流计算 Oceanus 是大数据产品生态体系的实时化分析利器，是基于 Apache Flink 构建的具备一站开发、无缝连接、亚秒延时、低廉成本、安全稳定等特点的企业级实时大数据分析平台。流计算 Oceanus 以实现企业数据价值最大化为目标，加速企业实时化数字化的建设进程。 本示例使用 Oceanus 平台的 元数据管理 功能，通过库表引用将作业中生成的随机数据存入到 MySQL 中。再通过对变量的管理完成变量的引用

在这个数据爆炸的时代，企业做数据分析也面临着新的挑战, 如何能够更高效地做数据准备，从而缩短整个数据分析的周期，让数据更有时效性，增加数据的价值，就变得尤为重要。 将数据从来源端经过抽取（extract）、转换（transform）、加载（load）至目的端的过程（即 ETL 过程），则需要开发人员则需要掌握 Spark、Flink 等技能，使用的技术语言则是 Java、Scala 或者 Python，一定程度上增加了数据分析的难度。而 ELT 过程逐渐被开发者和数据分析团队所重视，如果读者已经非常熟悉 SQL，采用 ELT 模式完成数据分析会是一个好的选择，比如说逐渐被数据分析师重视的 DBT 工具，便利用了 SQL 来做数据转换。DBT 会负责将 SQL 命令转化为表或者视图，广受企业欢迎。此外使用 ELT 模式进行开发技术栈也相对简单，可以使数据分析师像软件开发人员那样方便获取到加工后的数据。

11月22日晚19：00，腾讯云大数据“数智话”技术沙龙 第三期《流计算 Oceanus 基于Flink的实时大数据分析平台》准时开启线上直播。本次直播由腾讯云大数据 流计算 Oceanus 产品负责人，流计算 Oceanus 专家工程师 围绕腾讯云大数据的流计算产品——流计算Oceanus展开，重点介绍了其优势特性、技术演进和在实际场景中的应用实践。 企业面对实时性要求比较高的场景时，传统批处理无法满足时效性的要求，延迟太高，性能不足，稳定性比较差，对业务造成巨大的影响。如何解决资源利用率低、性能不足等问

子虚期望让云上的虚拟机背起记忆的行囊浪迹天涯，但却发现虚拟机如果采用本地磁盘根本无法自由迁移，而基于FC的共享存储方案又具有极大的局限性。子虚自行思考答案，却发现自己的思考和Ceph殊途同归……

11月22日晚19：00，腾讯云大数据“数智话”技术沙龙 第三期《流计算 Oceanus 基于Flink的实时大数据分析平台》准时开启线上直播。本次直播由腾讯云大数据 流计算 Oceanus 产品负责人，流计算 Oceanus 专家工程师 围绕腾讯云大数据的流计算产品——流计算Oceanus展开，重点介绍了其优势特性、技术演进和在实际场景中的应用实践。 企业面对实时性要求比较高的场景时，传统批处理无法满足时效性的要求，延迟太高，性能不足，稳定性比较差，对业务造成巨大的影响。如何解决资源利用率低、性能不足等问

10月22日晚19：00，腾讯云大数据“数智话”技术沙龙 第三期《流计算 Oceanus 基于Flink的实时大数据分析平台》直播圆满落幕。流计算 Oceanus 产品负责人，流计算 Oceanus 专家工程师 围绕腾讯云大数据的流计算产品——流计算Oceanus展开，重点介绍了其优势特性、技术演进和在实际场景中的应用实践。 让我们一起来回顾下当晚的直播内容吧！ 关注腾讯云大数据公众号 邀您探索数据的无限可能 点击“阅读原文”，了解相关产品最新动态 ↓↓↓

流计算 Oceanus 两周年   腾讯云流计算 Oceanus 是大数据产品生态体系的实时化分析利器，是基于 Apache Flink 构建的企业级实时大数据分析平台，具备一站开发、无缝连接、亚秒延时、低廉成本、安全稳定等特点。腾讯内部的流计算 Oceanus平台每秒接入数据峰值达到数亿条，每天接入数据量高达到十万亿条，实时计算量超万亿次。腾讯云流计算 Oceanus从2020年初公测到现在已经对外稳定服务超过2年，产品一直在飞速发展，快速迭代，帮忙用户便捷对接丰富的云上数据源，实现海量数据的实时处理和分

一、虚拟机如果通过iSCSI方式挂载块存储(云盘)，由于所有的iSCSI操作需要涉及虚拟机的虚拟网卡，以及宿主机上的vSwitch，这种操作方式会对宿主机造成较大的压力；

一、虚拟机如果通过iSCSI方式挂载块存储(云盘)，由于所有的iSCSI操作需要涉及虚拟机的虚拟网卡，以及宿主机上的vSwitch，这种操作方式会对宿主机造成较大的压力；

以 Flink 和 Spark 为代表的分布式流批计算框架的下层资源管理平台逐渐从 Hadoop 生态的 YARN 转向 Kubernetes 生态的 k8s 原生 scheduler 以及周边资源调度器，比如 Volcano 和 Yunikorn 等。这篇文章简单比较一下两种计算框架在 Native Kubernetes 的支持和实现上的异同，以及对于应用到生产环境我们还需要做些什么。

以 Flink 和 Spark 为代表的分布式流批计算框架的下层资源管理平台逐渐从 Hadoop 生态的 YARN 转向 Kubernetes 生态的 k8s 原生 scheduler 以及周边资源调度器，比如 Volcano 和 Yunikorn 等。这篇文章简单比较一下两种计算框架在 Native Kubernetes 的支持和实现上的异同，以及对于应用到生产环境我们还需要做些什么。

---- 作者：吴云涛，腾讯 CSIG 高级工程师 本文描述了如何使用腾讯云大数据组件来完成实时监控系统的设计和实现，通过实时采集并分析云服务器（CVM）及其 App 应用的 CPU和内存等资源消耗数据，以短信、电话、微信消息等方式实时反馈监控告警信息，高效地保障系统稳健运行。运用云化的 Kafka、Flink、ES 等组件，大大减少了开发运维人员的投入。 一、解决方案描述 （一）概述 本方案结合腾讯云 CKafka、流计算 Oceanus (Flink)、 Elasticsearch、Promethe

---- 作者：吴云涛，腾讯 CSIG 高级工程师 本文描述了如何使用腾讯云大数据组件来完成实时监控系统的设计和实现，通过实时采集并分析云服务器（CVM）及其 App 应用的 CPU和内存等资源消耗数据，以短信、电话、微信消息等方式实时反馈监控告警信息，高效地保障系统稳健运行。运用云化的 Kafka、Flink、ES 等组件，大大减少了开发运维人员的投入。 一、解决方案描述 （一）概述 本方案结合腾讯云 CKafka、流计算 Oceanus (Flink)、 Elasticsearch、Promethe