flink
-
Flink Table Store 典型应用场景
摘要:本文整理自 Apache Flink PMC 李劲松(之信)在 9 月 24 日 Apache Flink Meetup 的分享。主要内容包括: 介绍 Flink Tab…
-
基于 Flink+Pravega 的游戏服务器监控与调节系统设计
01 背景介绍 浏览完赛题,经团队讨论将应用场景锁定在了游戏服务器优化上,一是因为这方面趣味性较高,另外则是团队中的一员常年用爱发电[1] 开服,对此比较有业务经验。 1.1 团队…
-
网易游戏实时 HTAP 计费风控平台建设
摘要:本文整理自网易互娱资深工程师, Flink Contributor, CDC Contributor 林佳,在 FFA 实时风控专场的分享。本篇内容主要分为五个部分: 实时风…
-
基于 Log 的通用增量 Checkpoint
摘要:本文整理自 Apache Flink Contributor 俞航翔 9 月 24 日在 Apache Flink Meetup 的分享。主要内容包括: Checkpoint…
-
官方 | 使用自定义 RateLimitingStrategy 优化异步接收器的吞吐量!
介绍 在设计 Flink 数据处理作业时,关键关注点之一是最大化作业吞吐量。Sink吞吐量是一个至关重要的因素,因为它可以决定整个作业的吞吐量。我们通常希望在不使目的地超载的情况下…
-
Apache Flink运行时在B站的稳定性优化与实践
本期作者 马阳阳 基础架构部实时平台Flink引擎资深开发工程师 丁国涛 基础架构部实时平台Flink引擎资深开发工程师 01 背景 以Flink为基础的实时计算在B站有着广泛而深…
-
更快更稳更易用: Flink 自适应批处理能力演进
+ 摘要:本文整理自阿里巴巴高级技术专家朱翥、阿里巴巴高级技术专家贺小令在 9 月 24 日 Apache Flink Meetup 的演讲。主要内容包括: Adaptive Ba…
-
官宣|Apache Flink 1.16 发布公告
作者|贺小令 Apache Flink 持续保持高速发展,是 Apache 最活跃的社区之一。Flink 1.16 共有 240 多个 Contributor 热情参与,共完成了 …
-
字节跳动流式数仓和实时分析服务的思考和实践
分享嘉宾:汪建锋 火山引擎 技术专家 编辑整理:张玮 出品平台:DataFunTalk 导读:字节跳动旗下有许多产品,每天有大量的数据需要接收和计算。其中,以抖音、头条等为代表的产…
-
37手游基于云平台的大数据建设实践
摘要:本文整理自 37 手游大数据平台资深开发工程师史飞翔在实时数仓 Workshop · 广州站的演讲。主要内容包括: 云平台大数据建设背景 云平台大数据建设方案 应用实践 未来…
-
FFA 议程上线!实时化浪潮下,Apache Flink 还将在大数据领域掀起怎样的变革?
Flink Forward Asia 2022 将于 11 月 26-27 日在线上举办,议程内容正式上线! 今年是 Flink Forward Asia(下文简称 FFA)落地中…
-
sidecar收集flink pod日志到es
使用flink kubernetes operator创建flink任务,将flink日志通过sidecar方式发送到es相关配置 apiVersion: flink.apache…
-
OPPO实时计算平台基于云原生的作业弹性伸缩设计与实践
文章大纲: 一、背景 二、技术方案 2.1 整体架构 2.2 方案详述: 1.纵向伸缩: 2.横向伸缩 3.云原生独立部署模式 4.资源伸缩协调器 三、方案实践及效果 3.1 弹性…
-
Apache Flink Table Store 0.2.0 发布
作者|Jingsong Lee jingsonglee0@gmail.com Apache Flink 社区很高兴地宣布发布 Apache Flink Table Store 0….
-
基于 Flink x TiDB,智慧芽打造实时分析新方案
摘要:本文整理自智慧芽数据仓库架构师曲明星在 Flink Forward Asia 2021 实时数仓专场的分享。本篇内容主要分为三个部分: 产品架构 技术架构 未来计划 01 产…
-
FlinkSQL字段血缘解决方案及源码
FlinkSQL字段血缘解决方案及源码 序号 作者 版本 时间 备注 1 HamaWhite 1.0.0 2022-08-09 增加文档和源码 作者邮箱: song.bs@dtwa…
-
Flink 自定义SQL实现Hudi MOR表压缩
Hudi在构建流式数据湖方面具有领先地位。Flink作为真正的流处理引擎,与Hudi搭配是理所应当的事情了。但是目前Hudi MOR表压缩功能除了在线压缩以外,并不能通过SQL实现…
-
字节跳动 Flink 状态查询实践与优化
摘要:本文整理自字节跳动基础架构工程师,Apache Flink Contributor 马越在 Flink Forward Asia 2021 平台建设专场的演讲。主要内容包括:…
-
快收藏!优化 Apache Flink 应用程序的 7 个技巧!
在 Shopify 中,我们将Apache Flink作为标准的有状态流媒体引擎,为我们的BFCM Live Map等各种用例提供支持。我们的 Flink 应用程序部署在利用Goo…
-
中原银行实时风控体系建设实践
摘要:本文整理自中原银行数据平台中心开发工程师陈玉强在 Flink Forward Asia 2021 行业实践专场的演讲。主要内容包括: 建设体系 选型 & 架构 应用场…