有时应用会占用大量 CPU 时间，这可能会对环境的整体健康状况造成负面影响。使用 /sys/fs/ 虚拟文件系统，利用 控制组版本 1 (cgroups-v1) 为应用配置 CPU…

应用异常时，基本可以分为服务访问不通和服务响应慢两个大类。其中服务响应慢的问题定位非常棘手，很多无头案。应用团队有日志和追踪，对于自认为的不可能不合理的事情都会甩给基础设施团队，又…

当提到文件系统时，大部分人都很陌生。但实际上我们几乎每天都会使用它。比如，大家打开 Windows、macOS 或者 Linux，不管是用资源管理器还是 Finder，都是在和文件…

01  背景 本次赛题思路源自于真实工作场景的一个线上项目，该项目在经过一系列优化后已稳定上线，在该项目开发的过程中数据平台组和技术负责人提供了许多资源和指导意见，而项目的结果也让…

文章摘要 本文整理自 Pulsar Summit Asia 2022 腾讯云高级研发工程师冉小龙的演讲《Deep Dive into Apache Pulsar Lifecycle…

摘要：本文整理自阿里云高级开发工程师 Apache Flink Committer、Flink 1.16 Release Manager 黄兴勃（断尘），在 FFA 2022 核心…

Apache Hudi 0.13.0引入了一系列新特性，包括Metaserver, Change Data Capture, new Record Merge API, new s…

Service介绍 ● 在kubernetes中，Pod是应用程序的载体，我们可以通过Pod的IP来访问应用程序，但是Pod的IP地址不是固定的，这就意味着不方便直接采用Pod的I…

Dapr[1] 分布式应用运行时 Distributed Application Runtime 的首字母缩写。有关多运行时，可以看下 Bilgin Ibryam 的 Multi-…

深入了解支持服务间通信的 3 个原生 K8s 对象：ClusterIP Service、DNS 和 Kube-Proxy。 概述传统的服务到服务通信 在进入 Kubernetes …

K8s 的 cpuManager 完成节点侧的 CPU 资源分配和隔离（core pinning and isolation，如何做到隔离）。 发现机器上的 CPU 拓扑 上报给 …

– Tips –  ▍1. Kubernetes的垃圾回收由kubelet进行管理，每分钟会查询清理一次容器，每五分钟查询清理一次镜像。在kubelet刚启…

摘要：本文整理自美的集团实时数据负责人、资深数据架构师董奇，在 Flink Forward Asia 2022 主会场的分享。本篇内容主要分为四个部分： 实时生态系统在美的的发展和…

Calibre-web 是一个便捷的电子书管理与浏览软件，它提供了一个干净的界面，可以使用现有的 Calibre 数据库浏览、阅读和下载电子书。 还可以通过应用程序本身集成谷歌驱动…

【中国开源年度报告】由开源社从 2015 年发起，是国内首个结合多个开源社区、高校、媒体、风投、企业与个人，以纯志愿、非营利的理念和开源社区协作的模式，携手共创完成的开源研究报告。…

本章主要简单阐述 Kubernetes 认证相关原理，最后以实验来阐述 Kubernetes 用户系统的思路。主要内容： 了解 Kubernetes 各种认证机制的原理 了解 Ku…

分享嘉宾： 胡梦宇 知乎大数据基础架构开发工程师 贾承昆 知乎大数据基础架构负责人 陈  曦 知乎大数据基础架构开发工程师 内容来源：作者投稿 出品社区：DataFun 1. 前言…

一、背景 随着技术的不断的发展，在大数据领域出现了越来越多的技术框架。而为了降低大数据的学习成本和难度，越来越多的大数据技术和应用开始支持SQL进行数据查询。SQL作为一个学习成本…

本文档在高层次上描述了为 YARN 实现新应用程序的方法。 相关概念和流程 在应用的提交流程中，是应用客户端将应用提交到 YARN ResourceManager。这可以通过设置Y…

基本介绍 Spark是不断壮大的大数据分析解决方案家族中备受关注的新增成员。它不仅为分布式数据集的处理提供一个有效框架，而且以高效的方式处理分布式数据集。它支持实时处理、流处理和批…