云存储深度学习
社区干货
图像处理解决方案 veImageX 技术演进之路
> 作者|周强近日,第五届深度学习图像压缩挑战赛(以下将简称“ CLIC 大赛”)比赛结果公布,首次参赛的火山引擎视频云多媒体实验室夺得视频压缩赛道第一名。压缩技术对于图像、视频应用十分重要。在保证同样的质量前... 云平台三大应用场景。## **图像生产**图像生产场景主要将业务产生的图像写入图像存储中,来源包括用户端的图像上传、在镜像站或三方云的存储(按需拉取或全量迁移)、在火山引擎的独立存储桶、业务自主合成的图片...
图像处理解决方案 veImageX 技术演进之路
近日,第五届深度学习图像压缩挑战赛(以下将简称“ CLIC 大赛”)比赛结果公布,首次参赛的火山引擎视频云多媒体实验室夺得视频压缩赛道第一名。压缩技术对于图像、视频应用十分重要。在保证同样的质量前提下,如何将图... 云平台三大应用场景。## **图像生产**图像生产场景主要将业务产生的图像写入图像存储中,来源包括用户端的图像上传、在镜像站或三方云的存储(按需拉取或全量迁移)、在火山引擎的独立存储桶、业务自主合成的图片...
边缘智变:深度学习引领下的新一代计算范式|社区征文
云计算层,下边逐一分析。设备层这一层的关键包括各种物联网设备和传感器,承担数据的收集和传送。设备层是数据的关键运营商,特点是设备品种繁多,数据类型不同。边缘服务器层该层的关键是处理来自设备层的数据,进行初步解决、剖析和过滤,并把处理后的数据发送到云计算层。边缘服务器一般部署在网络边缘,与设备层紧密联系,能够快速反映设备层的需要,降低传送数据的延迟。云计算层该层专门从事全球数据处理、剖析和存储,并承担...
火山引擎云存储选型指南 x 自动驾驶场景最佳实践
**云存储一般分为块、文件、对象三大类型** ,其中文件存储一般又分为通用文件存储 NAS、并行文件存储 PFS、大数据文件存储等。而对象存储经过多年的发展和演进,已经成为存放非结构化数据的首选,并在大数据、数据... 用户可以通过配置生命周期规则实现存储类型的自动转换,达到优化整体存储成本的目的。火山引擎 TOS 作为云上存储非结构化数据的首选,可以广泛用于互联网富媒体数据存储与分发、机器学习统一存储、大数据与数据湖...
特惠活动
云存储深度学习-优选内容
云存储深度学习-相关内容
边缘计算技术:深度学习与人工智能的融合|社区征文
**边缘ML:** 是指机器学习在不处于核心数据中心的,企业级计算机/设备中的应用。边缘设备包括服务器机房,现场服务器,以及位于各个地区以加快响应速度为目的的小型数据中心。云端和边缘端的ML 已经通过3年多的科普,广为大众所接受。今天我们看到的人脸门禁、摄像头行为识别、智能音箱...... 绝大部分场景都属于这两类。 以 TensorFlow & TF lite 等开源深度学习框架为基础的大量应用,推动了智能在云端和边缘端应用。然而,更加具有...
字节跳动 EB 级 Iceberg 数据湖的机器学习应用与优化
> 深度学习的模型规模越来越庞大,其训练数据量级也成倍增长,这对海量训练数据的存储方案也提出了更高的要求:怎样更高性能地读取训练样本、不使数据读取成为模型训练的瓶颈,怎样更高效地支持特征工程、更便捷地增删和回填特征。本文将介绍字节跳动如何通过 Iceberg 数据湖支持 EB 级机器学习样本存储,实现高性能特征读取和高效特征调研、特征工程加速模型迭代。**相关产品**:https://www.volcengine.com/product/flink # 机...
火山引擎云原生存储加速实践
> 在火山引擎相关的业务中绝大部分的机器学习和数据湖的算力都运行在云原生 K8s 平台上。云原生架构下存算分离和弹性伸缩的计算场景,极大的推动了存储加速这个领域的发展,目前业界也衍生出了多种存储加速服务。但是... 另一个诉求是对底座存储的原生协议加速后直接透出给业务,从业务视角可以不需要对代码层面进行修改,仅需要做一些配置上的适配调整就能看到底座存储上原始的目录结构和数据格式。目前无论是云存储还是企业存储,各个存...
veImageX演进之路:我用图像压缩算法为公司省了30%成本
**前言** 日前,第五届深度学习图像压缩挑战赛(以下将简称“ CLIC 大赛”)比赛结果公布,首次参赛的火山引擎视频云多媒体实验室夺得视频压缩赛道第一名。压缩技术对于图像、视频应用十分重要。在保证同样主观质... veImageX可以简化理解为包括三大组件:分发组件(CDN)、存储组件、基础媒体处理组件,组件有效组装到一起形成一整套解决方案。降带宽的本质是通过压缩降低传输的文件大小:图像在未压缩之前体积都很大,因此我们将目标设...
基于深度学习的工业缺陷检测详解——从0到1|社区征文
# beginning2023年可谓是人工智能浪潮翻涌的一年,AI在各个领域遍地开花。以我最熟悉的工业为例,深度学习也在其中起着重要作用。不知道小伙伴们熟不熟悉工业领域的缺陷检测腻?🧐🧐🧐今天就以钢轨表面缺陷为例,和大... 云端、web端、网页端、智能手机端和智能硬件端,实现每秒钟20帧的实时检测。下图是网页端的运行效果,用户可以直接上传手机相册里的图片,也可以现场拍摄图片,就能获得所有目标检测和视觉测量的结果啦。如果感觉挺有...
个人年度总结:深度学习与AIGC技术在智能诗歌生成中的应|社区征文
其中深度学习模型不断完善、开源模式的推动、大模型探索商业化的可能,成为 AIGC 发展的“加速度”。# “智能诗歌生成”的AIGC项目我曾参与了一个名为“智能诗歌生成”的AIGC项目。该项目的主要目标是利用人工智... poems = ["云彩飘过山峰间", "夜色映照着江水清", "晨曦照亮大地新", "春风拂面心自静"] # 文本预处理 tokenizer = Tokenizer(num_words=10000, oov_token=" ") tokenizer.fit_on_texts(poems) sequenc...
我的深度学习项目经验分享|社区征文
AI的爆火在于它确实能促进整个社会中大多人群的学习工作和生活的效率的提升,这是非常实用的。我要和大家分享的项目也是我学习AI过程中做的小项目,是利用视频分析技术结合深度学习构建的一个智能视频监控系统,用来进... 保存当前帧为关键帧 if frame_count % extract_interval == 0: key_frame_name = 'keyframe_{}.jpg'.format(frame_count) cv2.imwrite(key_frame_name, frame) print('Saved key fram...
大模型:深度学习之旅与未来趋势|社区征文
# 前言从去年chatGPT爆火,到国内千模大战,关乎大模型的热度已经沸反盈天。但大模型出现的价值、意义似乎与实际使用效果存在鲜明的对比,特别是日常工作中,最多让大模型帮助生成一些不痛不痒、凑字数的内容,难易触达工作的核心环节。所以趁着国庆假期,我试图用国产大模型来协助完成一篇文章,从“知识生产”这个大模型擅长的角度来验证大模型能否更深度提升个人工作效率。