演讲预告|FFA 议程上线!字节跳动7项议题入选

技术

picture.image

Flink Forward Asia 2022 将于 11 月 26-27 日在线上举办,议程内容正式上线!

picture.image

今年,全球 40+ 各行业一线厂商,围绕 Flink 核心技术、行业实践、平台建设、实时风控、实时湖仓、数据集成等多个时下热门方向,分享 80+ 干货议题。

FFA 2022 邀请了 11 位行业领袖及开拓者组成议题评选委员会, 字节跳动流式计算负责人张光辉受邀担任议题评选委员。 本次大会,字节跳动 7 项议题入选, 除了 Flink OLAP 的技术细节更新与落地案例、字节跳动大数据容器化实践,更有抖音、头条等业务背后的推荐平台、实时数仓、业务运维实战分享。

picture.image

FFA

议题推荐

核心技术

Flink OLAP Improvement of Resource Management and Runtime

讲师 :曹帝胄-字节跳动基础架构工程师

演讲时间 :11月26日 16:30-17:10

议题简介

Flink OLAP 作业 QPS 和资源隔离是 Flink OLAP 计算面临的最大难题,也是字节跳动内部业务使用 Flink 执行 OLAP 计算需要解决的最大痛点。字节跳动 Flink 技术团队在 2021 年作业调度和执行优化的基础上,对 Flink 引擎架构和功能实现进行大量深入优化,使 Flink 引擎在小规模数据量下,复杂作业执行的 QPS 从 10 提高到 100 以上,简单作业执行的 QPS 从 30 提高到 1000 以上。本次分享将从 Flink OLAP 难点和瓶颈分析、作业调度、Runtime 执行、作业资源隔离、收益以及未来规划等五个方面进行介绍。

Flink OLAP 在字节跳动的查询优化和落地实践

讲师 :何润康-字节跳动基础架构工程师

演讲时间 :11月27日 10:40-11:20

议题简介

本次分享将主要分为 Flink OLAP 在字节跳动的业务实践以及遇到的问题,OLAP 集群运维和稳定性治理,SQL Query Optimizer 优化,Query Executor 优化,收益和未来规划等五个部分进行介绍。

StateBackend performance improvement with TerarkDB

讲师 :李明-字节跳动基础架构工程师

      王义-字节跳动基础架构工程师

演讲时间 :11月27日 16:30-17:10

议题简介

TerarkDB 是字节跳动内部对 RocksDB 做了较多的优化后衍生出的 LSM 存储引擎,以提高存储引擎的性能,降低资源开销等,目前 TerarkDB 已经开源。本次分享将从背景、业务痛点、Flink & TerarkDB 集成、收益以及未来规划等五个方面进行介绍。

生产实践

字节跳动 Flink 大规模云原生化实践

讲师 :刘畅-字节跳动基础架构工程师

演讲时间 :11月27日 10:40-11:20

议题简介

字节跳动拥有业界领先的 Flink 流式计算任务规模。随着云原生时代的到来,我们开始探索将线上的 Flink 任务从 Yarn 迁移到 Kubernetes,使得作业云原生化运行。

本次分享主要内容:

  1. 介绍字节跳动 Flink 任务的规模及现状;
  2. 介绍字节跳动自研统一的大数据 Operator - Arcee,如何托管 Flink 作业,并且打平之前 on Yarn 的功能;
  3. 介绍字节跳动统一的大数据平台 - Megatron,如何完善 Flink on K8s 的周边生态,提升用户体验;
  4. 介绍从多租户、资源调度、底层隔离等方面对 Flink 引擎和 K8s 的定制优化;
  5. 介绍通过 Arcee 将线上大量作业平滑迁移至 K8s 的实践经验。

抖音实时数仓保障与治理实践

讲师 :李建国-字节跳动实时数据研发工程师

      茅旭辉-字节跳动实时数据研发工程师

演讲时间 :11月26日 17:20-18:00

议题简介

抖音实时数仓建设覆盖短视频、直播、电商、本地生活等核心业务场景,依赖的基础组件多、研发环境复杂,数据量大、链路复杂,对时效性、质量和稳定性要求非常高,在质量和稳定性的保障和治理面临非常大的挑战。

本次分享将从对抖音实时数仓质量和稳定性的保障和治理两个视角,介绍在实时数仓研发和生产环节的质量和稳定性保障工作,以及在成本、质量、稳定性、规范性方面建设和治理的实践。

实时风控

Flink CEP 在抖音电商的业务实践

讲师 :张健 - 字节跳动数据工程师

演讲时间 :11月26日 14:50-15:30

议题简介

Flink CEP 是基于 Flink 实现的实时数据规则引擎,支持跨多个事件的规则匹配。然而,当前 Flink CEP 在多规则处理、规则表达方面还存在易用性问题。本次分享主要介绍 Flink CEP 在抖音电商业务的应用实践以及易用性优化。

AI 特征工程

字节跳动亿级特征计算平台的建设和应用

讲师 :廖嘉逸-字节跳动推荐特征生产方向负责人

      刘首维-字节跳动推荐架构工程师

演讲时间 :11月27日 16:30-17:10

议题简介

字节跳动推荐架构在 2021 年开始着手构建了流批一体的特征生产系统,基于 Flink 和强大的 State 能力功能实现了有状态的窗口统计类特征,并在 ETL 特征场景实现了 Flink Streaming & Batch 的流批一体。随着业务的逐步上量和场景的不断丰富,系统又在易用性、性能、机器学习生态支持上,出现了新的问题和挑战。我们在特征系统推广的过程中遇到了算法工程师调优实时特征的成本过高、生产链路无法和特征回溯打通、长周期的实时特征无法初始化、特征类型支持不足等问题。通过对流批一体架构的多次迭代,我们在计算层面引入了跨作业的流批一体 Planner、状态 Bootstrap 等能力,帮助特征生产系统的生态更上了一个台阶。

FFA

直播预约

PC 端 可前往 FFA 2022 大会官网(https://flink-forward.org.cn/)预约直播,点击议题即可查看议题详情以及讲师介绍。

移动端 可关注「Apache Flink」视频号预约直播。

相关文章推荐

👇点击「 阅读原文 」,直达 FFA 2022 大会官网

13
0
0
0
关于作者
相关产品
评论
未登录
看完啦,登录分享一下感受吧~
暂无评论