该平台管理的总数据量在几年前就已经超过了 EB 级别,在业务日常晚高峰时承载的埋点流量就已超过 1 亿 TPS,有超十万 core 的单任务需要上千台机器来计算。这样的规模在业界也十分罕见,为了应对大规模的数据量,字... 组织设计等方面有丰富实践积累。以下是采访内容。**Q:作为字节跳动数据平台的负责人,能否请您回顾一下,数据平台是如何建设的?又经历了怎样的演进过程?每次升级改造的背景是怎样?****罗旋**:字节跳动数据...
RTC 等音视频技术最佳实践。小火山采访了本次 Meetup 的讲师,火山引擎点播基础技术负责人马茜,带大家走近字节跳动的程序媛。 **小火山:简单介绍一下自己。****马茜**:我本硕都毕业于清华... 管理方式也非常的扁平化,大家都是面对同一个目标,去自驱地做事情。所以大家的工作都很高效,这也是字节一个很明显的文化特征。**小火山:生活中有什么兴趣爱好?****马茜**:我的兴趣爱好一直在变。主要是...
火山引擎云计算工程师吴晨将为大家分享《支撑抖音春晚红包的高性能 IaaS 虚拟化技术实践》。小火山提前采访了吴晨,和大家聊一聊虚拟化技术及其优势。 **小火山:简单介绍一下自己。****吴晨**:我叫吴晨,平时喜欢摄影、弹吉他、篮球等。我本科是在山大学数学,发现很多实际问题的解决,都需要建立数学模型,然后编写程序通过计算机帮助我们计算。那个时候就对编程充满兴趣,选修了软件工程的双学位,再后来...
[1. 如何排查 PostgreSQL 存储空间占用问题](https://developer.volcengine.com/articles/7299675406790066214) [2. 排查由于aggresive vacuum引起WAL日志增长的问题](https://developer.volcengine.com/articles/... 字节跳动大规模多云CDN管理与产品化实践](https://developer.volcengine.com/articles/7280797890409627685) [3. ELT in ByteHouse 实践与展望](https://developer.volcengine.com/articles/728088126766555141...
也成为博西家电要优先解决的问题。 与火山引擎的合作,让博西家电找到了破局点: 一是拓宽边界,开启正向循环;二是突破增量,寻找新空间。 02拓宽边界,业务变得“轻盈” A/B测试就是一个典型案例。图:博西家电文案推送... ——博西家电 新业务发展事业部总监 李一凡(采访来源:财经无忌) 能力边界的拓展,不止是A/B测试。 在小程序运营位的优化过程中,通过火山引擎「DataFinder+DataTester」的组合使用,提升了博西家电产品的点击率和转化...
我采访了字节跳动数据平台负责人罗旋,请他来讲讲字节跳动数据平台建设的历程和技术细节。罗旋在 2014 年加入字节跳动,从零开始组建大数据平台,带领团队搭建了包括数据采集、建设、治理、应用的全链路平台产品。倡导用数据驱动业务,以数据 BP 模式,敏捷支持了今日头条、抖音、西瓜视频、朝夕光年等各大业务线。在大数据的架构、产品、治理、安全隐私、组织设计等方面有丰富实践积累。以下是罗旋的回复内容。Q&A **InfoQ :作为字...
传输等技术问题无法百分之百地呈现,对平台和收听用户来说都是巨大的损失。 在遇到火山引擎之前,凯叔讲故事APP使用的是基于开源代码二次开发的播放器。伴随用户的快速增长,音频无法播放、卡顿、播放器不稳定等问题开... 凯叔讲故事管理团队曾在公开采访中表示:庞大的创作团队,如果仅仅是靠热情、才华还是不够的,还需要配合科学的方法论及高效率管理工具,才能形成比较好的协同力,持续创作出好作品。 从2021年开始,“善用工具”成为凯...
这是双方为打造具有行业标杆意义的数字化用户增长模式做出的又一重要实践。此前,双方已针对民生信用卡App“全民生活” 进行深入合作。 中国民生银行是中国第一家主要由民营企业发起设立的全国性股份制商业银行,其信用卡中心(以下简称民生信用卡)成立于2003年底,是经中国银保监会批准的国内首批分行级信用卡专营机构之一。2017年,民生信用卡推出自主设计研发的全民生活APP,定位为集客户服务、生活消费、财富管理、移动支付、资讯驿...
> > > 本文出自字节跳动流式计算团队的方勇、胡伟华同学专访。两位同学在 Apache Flink 社区主要贡献了包括 Runtime Coordinator、Streaming Warehouse 等相关 Feature。于 2023 年 7 月正式受邀成为 Apache Fli... 积极回答社区其他开发者的问题;另一方面致力于 Flink 的调度、资源管理领域,逐步将一些字节内部的优化经验分享回馈社区。 **在参与社区的过程中,我主要对社区做出了以下几方面的贡献:**+ 积极回答用户的问题...
管理总数据量超过 **600PB** ,最大的集群规模在 **2400** 余个节点。实际上,字节跳动广泛的业务增长分析很多都建立在 ClickHouse 为基础的查询引擎上。那么,ClickHouse 具体应用于字节跳动哪些业务场景?为什么选择采用 ClickHouse 而不是其他数据分析技术?在使用 ClickHouse 的过程中,字节跳动内部团队又踩过哪些坑?近日,字节跳动数据平台数据应用研发负责人郭东东接受 InfoQ 采访,对上述这些问题做了介绍。 字...
> 本文出自字节跳动流式计算团队的方勇、胡伟华同学专访。两位同学在 Apache Flink 社区主要贡献了包括 Runtime Coordinator、Streaming Warehouse 等相关 Feature。于2023年7月正式受邀成为 Apache Flink Committ... 积极回答社区其他开发者的问题;另一方面致力于 Flink 的调度、资源管理领域,逐步将一些字节内部的优化经验分享回馈社区。 在参与社区的过程中,我主要对社区做出了以下几方面的贡献:1. 积极回答用户的问题...
胡伟华同学专访。两位同学在 Apache Flink 社区主要贡献了包括 Runtime Coordinator、Streaming Warehouse 等相关 Feature。于2023年7月正式受邀成为 Apache Flink Committer。在软件开发的世界中,开源已... 积极回答社区其他开发者的问题;另一方面致力于 Flink 的调度、资源管理领域,逐步将一些字节内部的优化经验分享回馈社区。在参与社区的过程中,我主要对社区做出了以下几方面的贡献:1. 积极回答用户的问题和...
作者 | 蔡芳芳\采访嘉宾 | 陈星、邵祎旸、海书山ClickHouse 开源于 2016 年,在一众大数据计算引擎里算是一个后起之秀。但凭借性能方面的突出优势,这几年 ClickHouse 在分析型数据库领域可谓风生水起。作为 ClickHouse 深度用户,字节跳动拥有国内规模最大的 ClickHouse 集群。根据官方提供的最新数据,截至 2022 年 2 月底,字节跳动内部的 ClickHouse 节点总数已经超过 18000 个,管理总数据量超过 700PB,最大的集群规模在 240...