云服务器技术交流论坛
社区干货
云原生 x AI 时代的微服务架构最佳实践—— CloudWeGo 技术沙龙·北京站报名开启
随着云原生技术和 AI 技术的持续蓬勃发展,我们发现企业用户也面临着越来越多性能、成本和稳定性方面的挑战,系统需要支持弹性伸缩和潮汐流量下的稳定性,因而也越发需要一套高性能、易扩展、功能丰富的微服务架构。... 是一种服务器主动发送数据到客户端的机制,基于 HTTP 提供单向流能力。随着 AIGC/LLM 的流行,字节跳动内部和社区都对 SSE 有强烈诉求。两位同学将会分享 SSE 的原理,Hertz SSE 的设计与实现,以及演示如何利用 SSE 能...
一个小白的云原生学习心得|社区征文
云我们应该都不陌生,公有云、私有云、混合云等各种云,它代表的是应用程序所处的环境并不是传统的物理服务器;原生就是亲生的、土生土长的意思,代表应用开发应用的设计之初就考虑到应用所处的环境是在云环境之上,为云而设计,可以直接在云平台上运行或非常轻松的迁移到云平台。简单来说,云原生就是换了个开发环境,由原来的本地服务器换到了云服务器,应用程序构建、运行为了适应这个云服务器这个环境而行形成的一套完整的技术体系...
Apache Pulsar 在火山引擎 EMR 的集成与场景
> 更多技术交流、求职机会,欢迎关注**字节跳动数据平台微信公众号,回复【1】进入官方交流群** 近年来,基于云原生架构的新一代消息队列和流处理引擎 Apache Pulsar 在大数据领域发挥着愈发重要的作用,其应用场... 由火山引擎提供云服务器、公网 IP、云存储、VPC 等基础设施。在基础设施底座上,建构出数据存储引擎(如 HDFS、CloudFS、表格式等)、数据调度引擎(如 YARN 等)、各种面向不同场景的大数据计算、存储组件以及贯穿整个...
干货 | 提速 10 倍!源自字节跳动的新型云原生 Spark History Server正式发布
> 近期火山引擎正式发布 UIMeta,一款致力于监控、分析和优化的新型云原生 Spark History Server,相比于传统的事件日志文件,**它在缩小了近乎 10 倍体积的基础上,居然还实现了提速 10 倍!**> > 目前,UIMeta Servi... 会给历史服务器带来沉重的负担。接下来,火山引擎 LAS 团队将向大家详细介绍字节跳动内部是怎么基于 UIMeta 实现海量数据业务的平稳和高效运转,让技术驱动业务不断发展。# **1. 业务背景**## 1.1 开源 Spark Hi...
特惠活动
云服务器技术交流论坛-优选内容
云服务器技术交流论坛-相关内容
干货 | 提速 10 倍!源自字节跳动的新型云原生 Spark History Server正式发布
> 近期火山引擎正式发布 UIMeta,一款致力于监控、分析和优化的新型云原生 Spark History Server,相比于传统的事件日志文件,**它在缩小了近乎 10 倍体积的基础上,居然还实现了提速 10 倍!**> > 目前,UIMeta Servi... 会给历史服务器带来沉重的负担。接下来,火山引擎 LAS 团队将向大家详细介绍字节跳动内部是怎么基于 UIMeta 实现海量数据业务的平稳和高效运转,让技术驱动业务不断发展。# **1. 业务背景**## 1.1 开源 Spark Hi...
DataLeap的Catalog系统近实时消息同步能力优化
每台服务器支持的Kafka Consumer数量有限,在每日百万级消息体量下,经常有长延时等问题,影响用户体验。在2020年底,我们针对Atlas的消息消费部分做了重构,将消息的消费和处理从后端服务中剥离出来,并编写了Flink任务承担这部分工作,比较好的解决了扩展性和性能问题。然而,到2021年年中,团队开始重点投入私有化部署和火山公有云支持,对于Flink集群的依赖引入了可维护性的痛点。在仔细的分析了使用场景和需求,并调研了现成的解决...
实验2:使用负载均衡实现高可用
```在开始实验之前,请先阅读以下【用户指南】```## 用户指南#### 加入实验室专属社群:交流答疑、第一时间了解获奖名单 ### Step 1:报名实验1. 前往[ 实验活动 ](https://developer.volcengine.com/activities/7303426793787097100) ,点击 **“立刻报名”**,填写信息,完成报名。### Step 2:查收实验账号3. 完成报名后,工作人员将于**3个工作日内**通过**手机短信**给您发送实验账号,请注意查收。4. 账号使用时限为1...
大象在云端起舞:后 Hadoop 时代的字节跳动云原生计算平台
火山引擎云原生计算团队技术负责人李亚坤接受专访,阐述了字节跳动如何应对大数据技术的不断革新,同时让产品的性能更加出色。采访嘉宾 | 李亚坤-火山引擎云原生计算技术负责人编辑 | Tina-InfoQ 资深... 另外就是服务器的规模达到一定数量后,机器的崩溃几乎是必然会出现的,这时候就需要在运行时去做容错。Flink Exactly Once 的特性决定了任何一个单机故障都会导致整个 Flink 作业的重启。在大规模模型训练场景下,需要...
实验4:基于ECS+RDS搭建WordPress博客
```在开始实验之前,请先阅读以下【用户指南】```## 用户指南#### 加入实验室专属社群:交流答疑、第一时间了解获奖名单 ### Step 1:报名实验1. 前往[ 实验活动 ](https://developer.volcengine.com/activit... 6. 恭喜您已完成实验!# # 基于ECS+RDS搭建WordPress博客 | 实验文档## **背景信息**WordPress是使用PHP语言开发的博客平台,您可以在支持PHP和MySQL数据库的云服务器上架设属于自己的网站,无论是个人兴趣博...
ByConity 首次 TPC-DS 测试结果发布 & 新活动邀请!
5台40核心 256G的 dell 服务器,使用100G的TPC数据 || 传音控股 | 109.05秒 ... 我们在云上主要是场景问题。双方后续可以有更多的技术交流。#### 参加本次测试的感受部署过程中组件太多了,不是内行玩不起来啊。 ### 其他反馈| **测试团队** | **参加本次测试的原因*...
数据和统计
记为一次端到端点对点消息发送成功 业务服务器到端 调用服务端 openAPI 发送点对点消息后,RTS 服务端成功接收且返回成功 ack 消息,记为一次业务服务器到端点对点消息发送成功 端到业务服务器 通过 RTS SDK 进行应用... 服务器到端时延 =(单条广播消息)RTS 服务端接收到成功 ack 消息的时间 - RTS 接收到调用服务端 openAPI 发送点对点消息请求时间 如果你对数据的统计口径有更多展现要求,可以联系技术支持沟通交流。 为子账户应用...
Katalyst 支持 NUMA 级别 Pod 间亲和性与反亲和性调度|社区征文
另一方面也是为了总结项目的一些技术经验。## 我的开源体验首先还是来介绍一下 Katalyst 这个项目吧,在字节跳动,基础设施面临的是一个规模巨大且持续快速变化的业务场景,而云原生技术体系需要同时聚焦资源效率... 会影响同一 NUMA 节点上的参数服务器(PS),因此将这些 pod 分配给不同的 NUMA 节点可以减轻这种干扰。### 2.技术方案设计首先,所有的 Pod 亲和性与反亲和性分析最终都需要在节点侧完成,因此必须考虑如何在节点侧...
实验1:基于火山引擎ECS搭建Web服务
```在开始实验之前,请先阅读以下【用户指南】```## 用户指南#### 加入实验室专属社群:交流答疑、第一时间了解获奖名单 ### Step 1:报名实验1. 前往[ 实验活动 ](https://developer.volcengine.com/activit... 云服务器“进入到云服务器管理界面6. 点击“立即创建”按钮进入创建ECS实例的界面。