平台操作系统openstack
社区干货
报名开启 | 第三届CID大会线下参会报名启动!
第三届「中国云计算基础架构开发者大会」将在 2022年 11 月 6 日在杭州浙勤开元名都酒店举办,本届大会由来自字节跳动火山引擎、intel、阿里、腾讯、华为等云技术头部厂商及行业内诸多优秀公司和开发者共同贡献议题,内容涵盖网络、存储、虚拟化、云编排器(Kubernetes等)、云操作系统 (Openstack等)、云安全、云固件、DPU/IPU/智能网卡、其他云原生技术(微服务、Serverless、Service mesh)等,目前分论坛议程已敲定,期待与大家杭州相...
2022技术盘点之平台云原生架构演进之道|社区征文
确保系统安全。## 三 DevOpsSmartOps平台从DevOps到SecDevOps的演进之路。### 3.1 DevOps V1.0起初DevOps使用Gitlab CI进行管控。- CI/CD:各业务代码仓库保护.gitlab.yml,利用Gitlab CI进行CI和CD过程- 镜像管理:构建出来的镜像使用镜像仓库Harbor进行管理- 容器编排:在CD过程中,利用kubectl set image进行容器编...
基于国产化环境的金融级业务系统性能优化实践|社区征文
感谢这个平台能让自己有机会把最后一次的技术经验做分享,希望为同道中人提供参考,我分享的主题是基于国产化环境的金融级业务系统性能优化实践。# 一、项目背景项目是一个金融级的业务系统,架构是基于微服务设计理念的分布式架构,环境上支持国产化软硬件、操作系统以及分布式数据库,具有高性能、低成本、弹性扩展、敏捷交付等特点,有效解决传统架构的性能瓶颈。系统从应用架构上构建了完善的业务中台能力,真正做到系统解耦,支...
火山引擎——大数据智能平台的构建策略与步骤|社区征文
首先是数据系统的建设,数据系统是基础。从确定要进行哪些方面的数据收集开始,需要把收集到的数据进行清洗、筛选、格式转换、存入系统中,并且按照技术平台的要求,投入人力、设备等进行大数据系统的搭建。其次是数据... 而在实际使用时需要进行再处理(标准化)以满足建模的需要。所以对于各种形式的数据,需要通过特征工程来进行特征筛选、特征组合、特征变换等,才能为后续的模型所使用。● 对数据确定高效的存取模型。经过特征工程后...
特惠活动
平台操作系统openstack-优选内容
平台操作系统openstack-相关内容
打造新一代云原生"消息、事件、流"统一消息引擎的融合处理平台 | 社区征文
RocketMQ是2011年诞生于淘宝核心电商系统,一开始是定位于服务集团业务,面向单一超大规模互联网企业设计,当时的架构存在一些痛点,无法很好地满足云计算场景的需求。其中包括以下问题:![picture.image](https://p... 通过在云平台上结合新的硬件内核旁路技术,可以减少分离部署所带来的性能和延迟问题。另一方面,选择"存储计算一体化"架构则具备"就近计算"的优势,即计算节点与存储节点在物理上更接近。这种架构能够提供更佳的性能,...
云原生时代的企业级容器云平台架构实践
因此开始逐步拥抱灵活的云原生容器化平台,以降低大规模部署带来的一系列复杂度问题。那么 **搭建企业级容器化平台有哪些痛点?容器平台架构如何设计?如何最大化提升容器平台的资源利用率**?11 月 24 日,火山... 平台架构不断演进,并针对业务的痛点和诉求,持续完善容器化能力矩阵。本次演讲将会介绍 vivo 容器化平台及主要子系统的架构设计,并分享重点建设的容器化核心能力。* vivo 容器生态发展历程及面临的挑战+ 容器生态...
2023 平台云原生探索与实践|社区征文
利用云原生技术为企业应用现代化改造提供工具平台建设、落地实施 &咨询服务,覆盖基础设施现代化、架构现代化、开发运维现代化、数据现代化、安全现代化五个维度,推动企业应用现代化改造,加速企业数字化转型。# 二 应用现代化 & 云原生 应用现代化是指将系统、流程、工具、方法等更新为最新或者最佳实践的做法,就好比对“老房子”进行全新装修升级,在云计算盛行的背景下,实现应用现代化最佳实践就是通过云原生技术对现有应...
干货 | 字节跳动一站式数据治理解决方案及平台架构
字节跳动内部数据治理平台的建设是以方法论来引导建设,希望工具能够提供非常完备的治理能力。**第四,提供增强型的治理能力。**在系统的能力上可以主动发现一些隐患问题,做一些推荐或者建议的策略来提升治理效率... 会有一些不同的使用方式,或者是一些运行方式。在整个的路径里面会有从资产的视图来看我们有哪些东西。在这些资产视图基础之上去定一些目标和规划。比如说有些外部驱动的指标,业务驱动的一些指标或者是一些合规或者...
大象在云端起舞:后 Hadoop 时代的字节跳动云原生计算平台
各种不同体型的企业都喜欢选择开源大数据软件来搭建自己的系统,无论是先前十分繁荣的 Hadoop,还是后来涌现出来的 Kafka、Flink 等,都被广泛地使用着。十多年来,这些系统经历了多轮技术洗礼,我们也随之需要根据新... 同样支持 Kafka 系统的平滑迁移。在云原生发展趋势下,字节跳动于2016年开始启动 TCE(Toutiao Cloud Engine)云引擎,2018年开始将核心业务迁移到了这个容器平台上,随后在离线、在线业务全部容器化的基础上,开始进...
火山引擎大规模机器学习平台架构设计与应用实践
火山引擎机器学习平台公有云上的系统,云原生本身会带来一些虚拟化损耗,比如网络和容器会进行一定的虚拟化,存储的分层池化也会带来负载均衡的问题。繁多的分布式训练框架:火山引擎机器学习平台的用户很多,不同的任... A:这个跟 VM 的开关机是一样的。原来的进程我理解应该是不在了,但是原来的环境,比如在本地存的文件,在操作系统上安装的应用,这些都是现成的。如果使用开发机训练,其实是没有必要关机的,因为训练过程中利用率是保持...
字节跳动云原生大数据平台运维管理实践
统一不同环境下的使用体验。作者|字节跳动资深研发工程师-罗来锋 **01****业务现状与背景介绍**字节跳动过去几年在支撑自身业务的过程中积累了很多大数据领域... 三大平台分别是调度层、引擎层和平台层。在容器之上是资源调度层,负责统一管理调度整个集群的计算、存储和网络等资源。调度层上面的核心引擎层主要是是字节自研的统一大数据存储系统,兼容 HDFS 语义的同时支持对接...
干货|词云指北(下):字节跳动数据平台词云实践
> > > 本文通过调研学术、商业、开源三个领域词云相关的产品,对词云相关算法、产品进行从上至下的总结,帮助读者快速了解词云相关的算法发展,并希望总结出当前字节跳动数据平台词云发展的路线。 全文将分两次推送... 可以方便的将 GIS 系统中的地理和标签数据直接可视化出来。2. **算法效率低。**计算上需要使用 K-means 、PCA(主成分分析),再加上放置单词时在传统词云算法的基础上需要额外考虑地理信息等,运算复杂度高。原论文...
干货|数字平台的治理:以A/B测试平台在字节跳动的实践为例
字节将A/B测试相关的工具进行整合并创立名为Libra的平台,取意“天秤座”,** 用来比喻A、B两种策略在天平两端具有同等分量,充分体现了企业想要传达的“客观”理念。 起初,Libra主要供今日头条使用,支... 分别为平台功能完善、使用信息共享、外部关系打通,控制治理包括两个方面,行为控制和结果控制。**因为Libra与其内部用户同属于一个企业,在企业内统一的规章制度管控下Libra无需避免用户的违规操作、处理所有权界定...
