运维和openstack
社区干货
字节跳动云原生大数据平台运维管理实践
[picture.image](https://p6-volc-community-sign.byteimg.com/tos-cn-i-tlddhu82om/b079ee9176d54bcfbb907b70c553ce59~tplv-tlddhu82om-image.image?=&rk3s=8031ce6d&x-expires=1716222063&x-signature=V%2BDZ0yN%2BxdVON0KsO%2BgilBQ4yhQ%3D)云原生大数据是大数据平台新一代架构和运行形态。随着字节跳动内部业务的快速增长,传统大数据运维平台的劣势开始逐渐暴露,如组件繁多,安装运维复杂,与底层环境过度耦合;对业务...
字节跳动云原生大数据平台运维管理实践
> 云原生大数据是大数据平台新一代架构和运行形态。随着字节跳动内部业务的快速增长,传统大数据运维平台的劣势开始逐渐暴露,如组件繁多,安装运维复杂,与底层环境过度耦合;对业务方来说缺少开箱即用的日志、监控、告警功能等。在此背景下,我们进行了一系列云原生大数据运维管理实践。通过云原生的方式进行运维管理,最终达到弱化业务方对状态的感知,屏蔽环境的差异,统一不同环境下的使用体验。作者|字节跳动资深研发工程师-罗来锋...
演讲预告|字节跳动云原生大数据的发展、AIGC 新引擎、运维管理实践
容灾和资源调度等方向上带来优势。传统的大数据架构存在以下几方面问题,首先是在线业务和大数据业务使用独立的资源池,导致资源流转困难,进而导致利用率低,成本上升;其次,传统大数据组件繁多,安装运维复杂,在生产中... 及演进与实践。**听众收益:*** 了解云原生如何解决架构痛点 (业务烟囱,技术快速落地);* 了解云原生平台迁移方案;* 学习从存储、调度、接入层到统一管控面完整的建设方案;* 了解云原生如何带来成本优势。...
数据库顶会 VLDB 2023 论文解读:字节跳动如何解决超大规模流式任务运维难题
和资源预申请等优化手段更加快速稳定。 **智能诊断**同时 StreamOps 实现了一套智能诊断(Job Doctor)系统,并提供了可视化平台供用户和运维人员分析使用。其内部主...
特惠活动
运维和openstack-优选内容
运维和openstack-相关内容
演讲预告|字节跳动云原生大数据发展、AIGC 新引擎、运维管理实践
容灾和资源调度等方向上带来优势。传统的大数据架构存在以下几方面问题,首先是在线业务和大数据业务使用独立的资源池,导致资源流转困难,进而导致利用率低,成本上升;其次,传统大数据组件繁多,安装运维复杂,在生产中... 及演进与实践。听众收益:- 了解云原生如何解决架构痛点 (业务烟囱,技术快速落地);- 了解云原生平台迁移方案;- 学习从存储、调度、接入层到统一管控面完整的建设方案;- 了解云原生如何带来成本优势。...
火山引擎 × 中国移动:云原生运维平台的建设之路
微服务治理和边缘计算等技术,打造“智慧家庭 Andlink 云原生运维平台”,实现了智能家庭 Andlink 系统在多地、边缘计算场景的快速部署迭代发布能力、多版本能力、资源节能以及基于监控指标的扩缩容能力。 如何构建智慧家庭云原生运维平台作为基于边缘计算技术的资源管理和运维方案,“智慧家庭云原生运维平台”为分布在多个省份的边缘自治运维平台,承载下沉到该节点的业务系统,并承担研发、IT 产物仓库职责的研发中心的运维和统一管...
火山引擎 × 中国移动:云原生运维平台的建设之路
日前,IT 技术社区 CSDN 公布了“2021 年度 IT 技术影响力之星”:中国移动智慧家庭运营中心凭借和火山引擎共同打造的“智慧家庭 Andlink 云原生运维平台”,荣获“年度数字化驱动企业”奖。的支持下,我们与多家单位合作,共同推出了「2024年(第七届)CCF国际 AIOps 挑战赛」。本次赛事由中国计算机学会主办,中国计算机学... 我们希望推动大模型在运维领域的应用研究,促进技术的创新与发展,同时提高模型在实际运维场景中的性能和可靠性。报名地址:https://aiops-challenge.com### ### **赛题描述**国际AIOps挑战赛,由清华大学...
【运维助手】运维助手邀测上线
由于云计算环境和传统IT环境差异很大,导致传统的自动化运维的方式在云上使用门槛很高。 一方面,云厂商提供的很多云服务都需要部署在云服务器实例中,例如RDS,容器服务和消息队列等。由于云服务众多,迭代频繁,所以必须要通过CI/CD的方式进行快速发布和变更。如果每个服务都有自己的安装/部署的通道,会导致云服务器实例中运行各种Agent,既难以管理,也容易增加潜在故障点。 另一方面,用户想要对云服务器进行自动化运维时,又面临着效率...
通过多网域实现跨网络主机运维
实现多网域运维。解决网络连接的前提下,能最大程度节省使用成本,可谓是多混合云场景中提供的最佳运维方案。 背景信息通常情况下,服务器资产分布在不同地域且可能与云堡垒机的网络不互通。使用公网 IP 直接连接服务... 授权管理 运维 多个云堡垒机入口 单个云堡垒机入口 隔离性 云堡垒机实例可以将多个环境隔离,通过 ACL 控制访问 隔离性差,资源控制依赖云堡垒机授权 前提条件合理规划网络域和代理服务器,并获取代理服务器的公网 I...
本地盘故障事件优化,支持换盘运维白屏化
用户在使用云服务器时,可能会遇到本地盘故障的情况,不同业务对于坏盘可能有不同的期望运维方式:对于上层业务多副本等对单机数据可用性要求不高的用户,通常选择整机冷迁移的方式快速恢复;对于数据可用性要求更高且上层业务具有单盘隔离能力的用户,往往希望仅更换受损的单块盘,最大程度保留实例上未受损盘的数据。 针对本地盘故障场景,火山引擎云服务器系统事件进行了优化,针对不同需求提供了换盘和冷迁移两种运维方式,分别对应“D...
通过 SFTP 客户端运维 Linux 主机
运维人员支持使用本地客户端登录云堡垒机,通过 SFTP 协议连接 Linux 主机进行运维操作,本文以 Windows 系统的 SecureFX 客户端工具为例进行介绍。 背景信息SFTP(SSH File Transfer Protocol,SSH 文件传输协议)是一种安全的文件传输协议,可通过安全 SSH 数据流轻松进行数据传输和数据访问,提供交互式文件访问、传输和管理。 前提条件通过 SFTP 客户端运维主机前,管理员需完成以下准备工作: 已经准备 Linux 主机,并成功创建主机账号...
通过 SSH 客户端运维 Linux 主机
运维人员支持使用本地客户端登录云堡垒机,通过 SSH 协议连接 Linux 主机进行运维操作。本文以 Windows 系统的 Xshell 客户端工具为例进行介绍。 前提条件通过 SSH 客户端运维主机前,管理员需完成以下准备工作: 已经... 运维人员需完成以下准备工作: 已安装支持 SSH 协议的运维工具,例如:Xshell。第三方客户端限制和其他限制参见: 使用限制 。 已经获取登录云堡垒机的公网登录地址和运维人员的用户名、密码/密钥。 操作步骤可参考以下...
