后端

分享嘉宾：姜伟华博士 阿里巴巴 资深技术专家 编辑整理：Rissy 易显智能科技 出品平台：DataFunTalk 导读：大数据计算正从规模化走向实时化，实时大数据建设过程中开始面…

第一部分 01 简介 Flink 可以同时支持有限数据集和无限数据集的分布式处理。在最近几个版本中，Flink 逐步实现了流批一体的 DataStream API 与 Table …

RocketMQ 实现了灵活的多分区和多副本机制，有效的避免了集群内单点故障对于整体服务可用性的影响。存储机制和高可用策略是 RocketMQ 稳定性的核心，社区上关于 Rocke…

01 前言 Aliware 前天回家路上，有辆车强行插到前面的空位，司机大哥暴躁地拍着方向盘吐槽道“加塞最可恶了”，我问“还有更可恶的吗”，司机大哥淡定说道“不让自己加塞的”。似乎…

1. 业务背景介绍 在数仓ETL、实时计算的场景下，我们基于Flink SQL批流一体的框架进行了一定规模的作业迁移。在研发作业管理系统中，我们引入Apache Zeppelin组…

Apache RocketMQ 自 2012 年开源以来，因其架构简单，业务功能丰富，具备极强的可扩展性等特点被广泛采用。RocketMQ 在阿里巴巴集团内部有着数千台的集群规模，…

vivo 互联网运维团队- Yang Lei  本文介绍了一种跳板机实现思路，阐述了基本原理，并讲解了特点和相对优势。 一、 跳板机思路简介 本文所描述的跳板机（下文称为“jmp”…

我们的日常工作场景几乎离不开“云文档”。目前，人们对于文档的需求再不仅仅是简单的记录，而扩展到办公协同、信息组织、知识分享等。在国内众多在线文档中，wolai 因为功能新、迭代快、…

01 背景 Aliware 01 容器网络为何出现 在一个汽车发动机的生产车间中，汽车发动机的各个组件会存在一定的顺序进行组装，这就要求有直接关系的组件必须知道下一个组件的具体位置…

4 月 15 日-16 日，由 InfoQ 主办的 DIVE 全球基础软件创新大会通过云上展厅的形式成功召开。在微服务 & 服务治理专场，Apache Dubbo PMC、…

作者：孙航达，理想汽车智能云部中间件开发工程师，目前主要负责 Apache RocketMQ、ShardingSphere Proxy、全量数据迁移中间件的开发和运维工作。   0…

分享嘉宾：张镎 亚马逊云科技 编辑整理：xiaomei zdph 出品平台：DataFunTalk 导读：本次演讲的主题是无服务技术赋能大数据分析。亚马逊云科技从2006年开始投入…

配置Flink进程的内存 Apache Flink 基于 JVM 的高效处理能力，依赖于其对各组件内存用量的细致掌控。 考虑到用户在 Flink 上运行的应用的多样性，尽管社区已经…

总第520篇 2022年 第037篇 在外卖广告CTR场景下，深度学习模型正在从简单DNN小模型过渡到千亿参数复杂模型。基于该背景，本文将重点针对大规模深度模型在全链路带来的挑战，…

总第521篇 2022年 第038篇 搜索相关性用于衡量Query和Doc的相关程度，是搜索引擎的重要环节，本文主要讲述大众点评搜索团队在相关性计算上的技术探索和实践，通过多相似矩…

Flink 是一个多功能框架，以混合搭配的方式支持许多不同的部署场景。 下面，我们简要介绍 Flink 集群的构建块、它们的用途和可用的实现。 如果你只是想在本地启动 Flink，…

Apache Flink 是大数据领域非常流行的流批统一的计算引擎，数据湖是顺应云时代发展潮流的新型技术架构。那么当 Apache Flink 遇见数据湖时，会碰撞出什么样的火花呢…

Flink的重启策略 Flink支持不同的重启策略，这些重启策略控制着job失败后如何重启。集群可以通过默认的重启策略来重启，这个默认的重启策略通常在未指定重启策略的情况下使用，而…

一、函数   在 SQL 中，我们可以把一些数据的转换操作包装起来，嵌入到 SQL 查询中统一调用，这就是“函数”（functions）。   Flink 的Table API 和…

一、时间属性和窗口   基于时间的操作（比如时间窗口），需要定义相关的时间语义和时间数据来源的信息。在 Table API 和 SQL 中，会给表单独提供一个逻辑上的时间字段，专门…