flink
-
Flink 在讯飞 AI 营销业务的实时数据分析实践
摘要:本文整理自科大讯飞中级大数据工程师汪李之在 Flink Forward Asia 2021 的分享。本篇内容主要分为四个部分: 业务简介 数仓演进 场景实践 未来展望 01 …
-
基于 Flink CDC 实现海量数据的实时同步和转换
摘要:本文整理自 Apache Flink Committer、Flink CDC Maintainer、阿里巴巴高级开发工程师徐榜江(雪尽)在 5 月 21 日 Flink CD…
-
Apache Flink ML 2.1.0 发布公告
来源|Apache Flink 官方博客 Apache Flink 社区很荣幸地宣布 Apache Flink ML 2.1.0 版本正式发布!本次发布的版本重点改进了 Flin…
-
网易游戏 Flink SQL 平台化实践
摘要:本文整理自网易游戏资深开发工程师林小铂在 Flink Forward Asia 2021 平台建设专场的演讲。主要内容包括: 网易游戏 Flink SQL 发展历程 基于模板…
-
趣头条基于 Flink+ClickHouse 构建实时数据分析平台
摘要:本文由趣头条数据平台负责人王金海分享,主要介绍趣头条 Flink-to-Hive 小时级场景和 Flink-to-ClickHouse 秒级场景,内容分为以下四部分: 一、业…
-
FLIP-147:支持包含结束任务的 Checkpoint 操作与作业结束流程修正
第一部分 01 简介 Flink 可以同时支持有限数据集和无限数据集的分布式处理。在最近几个版本中,Flink 逐步实现了流批一体的 DataStream API 与 Table …
-
Flink内存配置指南
配置Flink进程的内存 Apache Flink 基于 JVM 的高效处理能力,依赖于其对各组件内存用量的细致掌控。 考虑到用户在 Flink 上运行的应用的多样性,尽管社区已经…
-
Flink应用部署模式
Flink 是一个多功能框架,以混合搭配的方式支持许多不同的部署场景。 下面,我们简要介绍 Flink 集群的构建块、它们的用途和可用的实现。 如果你只是想在本地启动 Flink,…
-
基于 Flink+Iceberg 构建企业级实时数据湖
Apache Flink 是大数据领域非常流行的流批统一的计算引擎,数据湖是顺应云时代发展潮流的新型技术架构。那么当 Apache Flink 遇见数据湖时,会碰撞出什么样的火花呢…
-
Flink的重启策略
Flink的重启策略 Flink支持不同的重启策略,这些重启策略控制着job失败后如何重启。集群可以通过默认的重启策略来重启,这个默认的重启策略通常在未指定重启策略的情况下使用,而…
-
Flink Table API和SQL(下)
一、函数 在 SQL 中,我们可以把一些数据的转换操作包装起来,嵌入到 SQL 查询中统一调用,这就是“函数”(functions)。 Flink 的Table API 和…
-
Flink Table API和SQL(中)
一、时间属性和窗口 基于时间的操作(比如时间窗口),需要定义相关的时间语义和时间数据来源的信息。在 Table API 和 SQL 中,会给表单独提供一个逻辑上的时间字段,专门…
-
Flink Table API和SQL(上)
概述 Flink 提供了对于“表”处理的支持,这就是更高层级的应用API,在 Flink 中被称为Table API 和 SQL。Table API 顾名思义,就是基于“表”(…
-
流批一体在京东的探索与实践
▼ 关注「Apache Flink」,获取更多技术干货 ▼ 摘要:本文整理自京东高级技术专家韩飞在 Flink Forward Asia 2021 流批一体专场的分享。主要内容包括…
-
Flink CDC 在大健云仓的实践
摘要:本文整理自大健云仓基础架构负责人、Flink CDC Maintainer 龚中强在 5 月 21 日 Flink CDC Meetup 的演讲。主要内容包括: 引入 Fli…
-
Flink CDC MongoDB Connector 的实现原理和使用实践
摘要:本文整理自 XTransfer 资深 Java 开发工程师、Flink CDC Maintainer 孙家宝在 Flink CDC Meetup 的演讲。主要内容包括: Mo…
-
Flink CDC + Hudi 海量数据入湖在顺丰的实践
摘要:本文整理自顺丰大数据研发工程师覃立辉在 5月 21 日 Flink CDC Meetup 的演讲。主要内容包括: 顺丰数据集成背景 Flink CDC 实践问题与优化 未来规…
-
Flink CDC + OceanBase 全增量一体化数据集成方案
摘要:本文整理自 OceanBase 技术专家王赫(川粉)在 5 月 21 日 Flink CDC Meetup 的演讲。主要内容包括: OceanBase 介绍 Flink CD…
-
Flink ML API,为实时机器学习设计的算法接口与迭代引擎
▼ 关注「Apache Flink」,获取更多技术干货 ▼ 摘要:本文整理自阿里巴巴高级技术专家林东、阿里巴巴技术专家高赟(云骞)在 Flink Forward Asia 2021…
-
美团基于 Flink 的实时数仓平台建设新进展
▼ 关注「Apache Flink」,获取更多技术干货 ▼ 摘要:本文整理自美团实时数仓平台负责人姚冬阳在 Flink Forward Asia 2021 实时数仓专场的演讲。主要…