大数据分析平台云计算
社区干货
如何 Get 字节跳动同款云原生大数据平台
随着业务和数据的快速增长,云计算和大数据技术也得到了迅速发展,云原生化和智能化已成为一种趋势。在此背景下,字节跳动进行了一系列大数据架构 Serverless 化的探索与实践,并在 AI 智能化方向进行了研究,最终形成火山引擎云原生大数据平台方案。 11月18日,在由上海白玉兰开源开放研究院、人工智能开源软件发展联盟联名主办的 **Data & AI Con Shanghai 2023** 大会上,将特别设立**云原生****大规模计算实践专场**。来自火山...
大象在云端起舞:后 Hadoop 时代的字节跳动云原生计算平台
火山引擎云原生计算团队技术负责人李亚坤接受 InfoQ 专访,详细介绍了过去五年字节跳动在高速发展中历炼出的技术体系与团队,以及当下大数据云原生化的趋势。- 采访嘉宾 | 李亚坤- 编辑 | Tina* * *技术... 2018年开始将核心业务迁移到了这个容器平台上,随后在离线、在线业务全部容器化的基础上,开始进行进行在离线混部调度设计和存储的云原生化。全部云原生化后,这套系统,包括底层调度能力、存储、中间件、计算引擎,就能...
浅析基于云-边-端协同AI算力资源智能调度能力
随着AI、云计算、边缘计算、大数据、物联网等技术的不断发展、数据的不断增加,基于云、边、端协同架构的部署需求也越来越多。TSINGSEE青犀视频的智能分析网关/云平台,不仅融合了AI智能识别技术,同时依托云、边、端协同的架构优势,由终端负责数据感知,边缘负责局部的数据分析,而云端则汇集所有边缘的感知数据、业务数据以及互联网数据,最终完成场景下的态势感知、分析结果输出、数据分发等服务。**1、AI智能识别**可支持人脸...
大数据之云平台的使用与总结 主赛道 | 社区征文
实现应用的云上开发、零代码开发、协同开发等功能。## 经验与收获在使用开天云平台的过程中,我主要有以下几个经验和收获:- **开天云平台是一个开放的平台,可以让我接触到更多的行业知识和技术能力。** 通过使用开天云平台,我可以了解到不同行业的应用场景和需求,以及华为云和伙伴提供的行业解决方案和最佳实践。我还可以学习到最新的技术趋势和创新,如流式计算、人工智能、X分析、增强型数据管理、云计算等,提升了我的技...
特惠活动
大数据分析平台云计算-优选内容
大数据分析平台云计算-相关内容
如何 Get 字节跳动同款云原生大数据平台
随着业务和数据的快速增长,云计算和大数据技术也得到了迅速发展,云原生化和智能化已成为一种趋势。在此背景下,字节跳动进行了一系列大数据架构 Serverless 化的探索与实践,并在 AI 智能化方向进行了研究,最终形成火山引擎云原生大数据平台方案。11月18日,在由上海白玉兰开源开放研究院、人工智能开源软件发展联盟联名主办的 **Data & AI Con Shanghai 2023** 大会上,将特别设立 **云原生大规模计算实践专场** 。来自火山引...
演讲预告|云原生大数据系列实践分享
**李亚坤** **火山引擎云原生计算技术负责人**个人介绍:硕士毕业于哈工大计算机专业,10 年大数据和云原生领域从业经验。2017 年加入字节跳动,构建了字节跳动千万级核心的集群资源管理和调度系统,支撑了全公司的数据平台、搜索、广告、推荐算法等中台,以及抖音、今日头条、西瓜视频、懂车帝、飞书等众多业务的大数据分析需求,带领团队完成了在离线资源混部、Hadoop 上云等众多项目。目前整体负责火山引擎云原生计算的技术团队。...
火山引擎云原生计算团队荣获信通院“云原生技术创新”项目奖
近日,中国信通院旗下云原生产业联盟主导的首届云原生产业联盟年会正式举办, **“火山引擎云原生大数据平台”项目荣获“云原生技术创新”项目奖**。火山引擎云原生计算团队资深产品专家**博文、王磊**,因深度参与云原生大数据平台——《云原生能力成熟度模型 第6部分:大数据平台》的标准制定,被评为 **“云原生技术标准专家”** 。# **“云原生技术创新”项目奖**“**火山引擎云原生大数据平台”项目**凭借在字节跳动长期实践...
演讲预告|云原生大数据系列实践分享
**云原生** **计算技术负责人**个人介绍:硕士毕业于哈工大计算机专业,10 年大数据和云原生领域从业经验。2017 年加入字节跳动,构建了字节跳动千万级核心的集群资源管理和调度系统,支撑了全公司的数据平台、搜索、广告、推荐算法等中台,以及抖音、今日头条、西瓜视频、懂车帝、飞书等众多业务的大数据分析需求,带领团队完成了在离线资源混部、Hadoop 上云等众多项目。目前整体负责火山引擎云原生计算的技术团队。 ...
火山引擎云原生计算亮相首届云原生产业联盟年会
> 中国信通院旗下云原生产业联盟主办的首届云原生产业联盟年会上,火山引擎云原生计算团队参与了即将发布的云原生大数据平台标准制定,并将在会上作出对应演讲分享。 历经多年发展,我国云原生技术生态已趋于完善,行业用户接纳度急速提升,资本市场热潮涌动。为进一步促进云原生产业发展,拓宽云原生价值认知,2023年1月9日,中国信息通信研究院(中国信通院)旗下的云原生产业联盟(CNIA)将通过线上形式举办成立以来的首届[年会](ht...
大象在云端起舞:后 Hadoop 时代的字节跳动云原生计算平台
火山引擎云原生计算团队技术负责人李亚坤接受专访,阐述了字节跳动如何应对大数据技术的不断革新,同时让产品的性能更加出色。采访嘉宾 | 李亚坤-火山引擎云原生计算技术负责人编辑 | Tina-InfoQ 资深... 2018年开始将核心业务迁移到了这个容器平台上,随后在离线、在线业务全部容器化的基础上,开始进行进行在离线混部调度设计和存储的云原生化。全部云原生化后,这套系统,包括底层调度能力、存储、中间件、计算引擎,就能...
后 Hadoop 时代,字节跳动如何打造云原生计算平台
计算引擎 MapReduce 基本被 Spark 取代。在数据上云的时代,对象存储也取代了一部分 HDFS 文件系统。近几年,云原生又火了起来,行业里再次开始了对大数据体系的云原生改造,同时 Kubernetes(K8s) 的流行,也让同为资源... 2018 年开始将核心业务迁移到了这个容器平台上,随后在离线、在线业务全部容器化的基础上,开始进行进行在离线混部调度设计和存储的云原生化。全部云原生化后,这套系统,包括底层调度能力、存储、中间件、计算引擎,就...
演讲预告 | 字节跳动云原生大数据的探索与实践
全球数字经济进入高速发展期,已经成为推进经济发展的新增长极。云原生技术作为下一代云计算的技术内核,在加快推进各产业数字化转型中发挥着重要作用,云原生大数据技术产品也逐步迭代升级,开始引领产业变革的浪潮。... 主要介绍如何在 Kubernetes 环境之上基于 Zeppelin 构建作业开发管理平台,并运行和管理 Flink/Spark on Native K8s 上的实践。* Apache Zeppelin 介绍* Apache Zeppelin 的云原生实践* 基于 Zeppelin 的 Flink...
演讲预告 | 字节跳动云原生大数据的探索与实践
全球数字经济进入高速发展期,已经成为推进经济发展的新增长极。云原生技术作为下一代云计算的技术内核,在加快推进各产业数字化转型中发挥着重要作用,云原生大数据技术产品也逐步迭代升级,开始引领产业变革的浪潮。... 主要介绍如何在 Kubernetes 环境之上基于 Zeppelin 构建作业开发管理平台,并运行和管理 Flink/Spark on Native K8s 上的实践。- Apache Zeppelin 介绍 - Apache Zeppelin 的云原生实践 - 基于 Zeppelin 的...
