Flink Forward 是由 Apache 官方授权的 Apache Flink 社区官方技术大会,作为最受 Apache Flink 社区开发者期盼的年度峰会之一,FFA 2023 将持续集结行业最佳实践以及 Flink 最新技术动态,是中国 Flink 开发者和使用... 字节跳动基础架构工程师 **演讲介绍:** 随着 Flink OLAP 在高 QPS 下的作业调度和作业执行优化逐渐落地,Flink OLAP 在字节内部的业务规模也大幅增长,同时也遇到了更多样化的计算挑战,其中最主要的一项挑战是计...
得物技术一直以"上海最好的技术团队"为目标,打造学习型组织,持续提升技术硬实力,形成技术知识沉淀。我们不仅对外定期分享输出技术沙龙,邀请行业内资深专家以及得物资深工程师等来分享技术干货,还经常受到行业顶尖技术峰会的邀约,输出得物技术最新实践。**2023年上半年,得物技术受邀在4场千人以上规模的技术大会以及一场技术沙龙上进行了分享**,下面一起来看看精彩回顾吧~# ArchSummit2023全球架构师峰会上海站![picture.imag...
在开源方面,我曾对阿里的 Sealer 社区和 OpenYurt 社区做过一些贡献。在实验室方面,我的工作主要集中在“在保证应用 QoS 前提下,提高系统资源利用率”这一多目标优化问题上。此外,在五月份我在一家金融科技公司做一个面向金融软件分布式架构的eBPF可观测技术研究项目,这个项目里主要负责其中聚合组件的实现和RDMA协议的可观测工作,这方面的工作经历让我对云原生可观测技术有了更深入的理解。## 参与开源的过程2023 年 3 月...
**全球架构师峰会****专题:云原生大数据实践**### **出品人:****李亚坤|火山引擎云原生计算技术负责人**### **专题简介:**大数据已成为企业数字化转型中, 支撑企业经营和业绩增长的主要手段之一。通过升级云原生架构,可以为大数据在弹性、多租户、敏捷开发、降本增效、安全合规、容灾和资源调度等方向上带来优势。传统的大数据架构存在以下几方面问题,首先是在线业务和大数据业务使用...
在开源方面,我曾对阿里的 Sealer 社区和 OpenYurt 社区做过一些贡献。在实验室方面,我的工作主要集中在“在保证应用 QoS 前提下,提高系统资源利用率”这一多目标优化问题上。此外,在五月份我在一家金融科技公司做一个面向金融软件分布式架构的eBPF可观测技术研究项目,这个项目里主要负责其中聚合组件的实现和RDMA协议的可观测工作,这方面的工作经历让我对云原生可观测技术有了更深入的理解。## 参与开源的过程2023 年 3 月...
**全球架构师峰会****专题:云原生大数据实践**### **出品人:****李亚坤|火山引擎云原生计算技术负责人**### **专题简介:**大数据已成为企业数字化转型中, 支撑企业经营和业绩增长的主要手段之一。通过升级云原生架构,可以为大数据在弹性、多租户、敏捷开发、降本增效、安全合规、容灾和资源调度等方向上带来优势。传统的大数据架构存在以下几方面问题,首先是在线业务和大数据业务使用...
> 本篇文章为 Databricks 主办的 Data + AI Summit 峰会上的分享回顾,**关注字节跳动数据平台微信公众号,回复【0831】获得 PPT 材料。**![picture.image](https://p6-volc-community-sign.byteimg.com/tos-cn-i-... 让技术驱动业务不断发展。# **1. 业务背景**## 1.1 开源 Spark History Server 架构为了能够更好理解本次重构的背景和意义,首先对原生 Spark History Server 原理做个简单的介绍。![picture.image](https:...
本文整理自字节跳动基础架构研发工程师单既喜在 ArchSummit 全球架构师峰会上的演讲,主要介绍字节跳动离线训练发展的三个阶段和关键节点,以及云原生离线训练中非常重要的两个部分——计算调度和数据编排,最后将结合... 无服务器功能和不可变基础设施等技术是这种架构风格的常见元素。字节跳动在云原生离线训练方向的发展大概分为三个阶段:**单角色云原生训练 1.0,多角色云原生训练 2.0,云原生训练 3.0 三个阶段。****单角...
ArchSummit全球架构师峰会在北京举行。**字节跳动数据平台负责人罗旋、**极客邦双数研究院特聘专家/精益数据方法创始人史凯、第四范式研发副总裁/基础技术负责人郑曌、经纬中国高级投资经理谢岩**围绕“数字化... 零售、互联网在内的多个行业头部企业应用,并获得实效。![picture.image](https://p3-volc-community-sign.byteimg.com/tos-cn-i-tlddhu82om/454d40524db84ea8b89c957549f8c89c~tplv-tlddhu82om-image.image?=&...
抖音技术团队和火山引擎云原生团队通过云原生化的基础架构设计和敏捷开发流程设计,保障了红包互动活动的安全、稳定、顺畅开展。 **本文主要介绍了火山引擎云原生团队在本次活动中的一些贡献。** 来源 | 火... 也获得了春晚互动零卡顿、零宕机的佳绩。 27 天的技术奇迹 官宣成为央视《春节联欢晚会》独家互动合作伙伴,对字节跳动内部的各个团队来说,都意味着业界的信任和新的技术挑战:...
传统的大数据架构在资源利用、高效运维、可观测性等方面存在诸多不足,已经越来越无法适应当下的发展需求。云原生大数据方案,逐渐成为众多企业解决传统大数据平台痛点的不二之选。2023年8月5-6日,09:00-12:30,DataFun 举办 DataFunSummit 云原生大数据峰会。火山引擎云原生计算团队深度参与本次线上峰会,由 **火山引擎云原生计算技术负责人-李亚坤** 任峰会专家团成员参与策划; **批式计算研发负责人-一新** 出品「云原生大数...
KubeWharf 是字节跳动基础架构团队在对 Kubernetes 进行了大规模应用和不断优化增强之后的技术结晶。这是一套以 Kubernetes 为基础构建的分布式操作系统,由一组云原生组件构成,专注于提高系统的可扩展性、功能性、... KubeCon + CloudNativeCon + Open Source Summit(峰会) China 2023 时隔四年也在上海线下召开。其中有两位演讲者分别是来自字节跳动的 He Cao 与 Wei Shao,他们介绍了字节跳动开源的细粒度资源管理与调度系统 **...
[2. 如何 Get 字节跳动同款云原生大数据平台|Data & AI Con Shanghai 2023](https://developer.volcengine.com/articles/7297055858331451431)🔥**技术干货**[1. 火山引擎云原生存储加速实践](https://develo... [亮相数字科技出海峰会,火山引擎边缘云助力数字化出海“加速度”](https://developer.volcengine.com/articles/7282732650131882047)🔥**UGC 精选**1. [为什么你的智能硬件识别准确率低](https://developer.v...