云计算框架openstack
社区干货
报名开启 | 第三届CID大会线下参会报名启动!
第三届「中国云计算基础架构开发者大会」将在 2022年 11 月 6 日在杭州浙勤开元名都酒店举办,本届大会由来自字节跳动火山引擎、intel、阿里、腾讯、华为等云技术头部厂商及行业内诸多优秀公司和开发者共同贡献议题,内容涵盖网络、存储、虚拟化、云编排器(Kubernetes等)、云操作系统 (Openstack等)、云安全、云固件、DPU/IPU/智能网卡、其他云原生技术(微服务、Serverless、Service mesh)等,目前分论坛议程已敲定,期待与大家杭州相...
边缘智变:深度学习引领下的新一代计算范式|社区征文
# 1.前言多年来,科技的飞速发展导致了数据处理和传输的需求暴涨,因此云计算成为了许多应用领域的核心基础设施。但是物联网(IoT)设备的普及和近年来5G网络的异军突起,数据量更是呈显出爆炸性的增长,对数据处理的速... 将分析结果发送到云计算层进行进一步的处理、存储和分析。可以将结果存储在数据库中,也可以通过Web API等方式提供给医生进行查看和分析。我使用Flask框架编写一个简单的Web API:```from flask import Flask, re...
2023 平台云原生探索与实践|社区征文
# 一 前言2023 平台云原生演进痛点与探索,围绕 SmartOps 平台展开,IDC FutureScape 2022 中国云计算市场预测中,应用现代化位列 Top1,到 2025 年,数字经济将催生出超过 5 亿个新应用/服务,90%的应用程序将是云原生... 技术框架弹性、应用弹性保障应用的极致弹性能力。- 安全可靠:基于云安全能力从基础设施、开发运维等实现安全前移、安全内置, 结合高可用设计、性能监控、灾备、 灾难恢复等自动化实现应用高安全、 高可用、高可...
边缘计算:将未来的计算力带到你的指尖 | 社区征文
# 前言随着数字时代的不断发展,传统的云计算模式逐渐不能满足行业发展的需求,正是在这种背景下,边缘计算应时而生。 
特惠活动
云计算框架openstack-优选内容
云计算框架openstack-相关内容
演讲预告|云原生数据计算基础设施、EB级Iceberg数据湖、Primus分布式训练调度框架
**揭秘云原生时代下的新一代数据计算基础设施** **时间:2023/05/18(周四)19:30-21:00**直播报名:*https://developer.volcengine.com/activities/7221402987090935868*精彩议程:* 《字节跳... **Primus-通用的分布式训练调度框架**### 讲师:徐合邦 - 字节跳动基础架构计算框架研发工程师**时间:5月28日 16:40-17:00**议题简介:近些年来,机器学习科技已经深植各应用领域,并且成功带来...
2022技术盘点之平台云原生架构演进之道|社区征文
云运营各角色的工作复杂度,提升管理效率和资源交付效率,最终帮助企业降低云上成本,提升人员效率,加速企业的数字化转型。## 二 高可用架构云的时代需要新的技术架构,来帮助企业应用能够更好地利用云计算优势,充... 应用层:平台应用采用安全框架,并严格遵守SDLC,将SecDevOps践行在应用全生命周期中;- 运维层:进行MSS持续性运维,对应用无论从外部探测到分布式链路最终,均进行安全可观测行施行;- 云平台层:重复利用云平台提供安...
云原生的前世今生(一)| 社区征文
生态系列框架,是云原生的先驱者和探路者。2013年,Pivotal 公司的技术经理 Matt Stine 首次提出云原生(Cloud Native)的概念。2015年,Matt Stine 在[《Migrating to Cloud Native Application Architectures - ... 其官网给出了云原生最新定义,以及云原生的架构原则:> - 云原生是一种利用云计算交付模型的优势来构建和运行应用程序的方法论。当企业使用云原生架构开发和运维应用程序时,它们能更快速地响应客户需求将新想法推向...
亿级用户背后的字节跳动云原生计算最佳实践
字节跳动的大数据生态和云原生技术从早期的独立发展,到后来的大规模在离线混部, 再到今天的融合调度,大数据已经完全融入到云原生的生态中。 字节跳动云原生计算发展历程 **流式计算引擎**字节跳动的流式计算引擎经历了由 Storm/JStorm 完全替换为 Flink 的演进。在 2017 年以前,字节跳动一直在使用 Storm/JStorm 框架作为流式计算引擎。但随着业务的不断发展,Storm 不支持 Exac...
一位老IT的2023年的技术总结 |社区征文
需要智能算法以及更有效率的计算框架,包括**音视频、** **边缘计算** **、AI、** **大模型**、 **AIGC**等等,同时也包括基本的**信息系统建设方案**和**大数据系统建设方案**,智能系统建设是应用优化的永无止境的追... 分布式技术只不过提供了另外一种算力选择。云计算进一步放大了分布式的技术优势,数据库是依靠在文件系统上,例如MySQL缓冲区的数据页可能是16Kb,而文件系统的页默认是4K,按照这样的话我,MySQL要连续往文件 系统...
乘风破浪的云原生
带你乘风破浪,玩转云原生|火山引擎开发者社区首次 Meetup 来袭! 活动介绍从抖音、今日头条到火山引擎,从日活用户突破 6 亿到承接 2021 年央视春晚 12 亿红包发放,字节跳动一直在尝试利用云计算、AI、大数据等技术能... 火山引擎高级研发工程师 随着云原生技术的快速发展,现阶段很多企业都会考虑将系统部署在 Kubernetes 上,这就使新的云原生平台和微服务能力和传统 Spring Cloud 框架所提供的部分能力存在交叠。本次分享将介绍字节跳...
从混合部署到融合调度:字节跳动容器调度技术演进之路
属于重度算力要求服务。视频处理、机器学习和大数据服务属于偏离线的服务,它们为推广搜离线训练、视频处理、数据报表提供数据处理支持,通常运行在 Hadoop、Mesos 等调度系统上。基于上述业务类型划分,云... **2017 年:启动全面云原生化改造**。在这一阶段,我们完成了今日头条、抖音、西瓜视频等微服务的全量上容器,同时基于自研云平台基础,我们构建并完善了服务框架(Golang 为主)、Mesh 平台、流量平台、监控告警等基础...
如何 Get 字节跳动同款云原生大数据平台
随着业务和数据的快速增长,云计算和大数据技术也得到了迅速发展,云原生化和智能化已成为一种趋势。在此背景下,字节跳动进行了一系列大数据架构 Serverless 化的探索与实践,并在 AI 智能化方向进行了研究,最终形成火山引擎云原生大数据平台方案。 11月18日,在由上海白玉兰开源开放研究院、人工智能开源软件发展联盟联名主办的 **Data & AI Con Shanghai 2023** 大会上,将特别设立**云原生****大规模计算实践专场**。来自火山...
从100w核到450w核:字节跳动超大规模云原生离线训练实践
Primus 作为分布式机器学习调度与数据融合框架,实现了云原生训练框架部署、分布式训练数据读取的全部过程,Primus 框架以云原生的方式运行在 YARN 和 Kubernetes 调度系统中,并通过 HDFS、FeatureStore 等方式获取训练数据交给 TF Worker 进行训练。**02****字节跳动在离线训练方向的发展历程**云原生计算是软件开发中的一种方法,它利用云计算“在现代动态环境(例如公共云、私有云和...
