深度学习在视频中的应用
社区干货
CVPR 2024 | 模块化无参视频质量评估
无参视频质量评估 (Blind Video Quality Assessment,BVQA) 在评估和改善各种视频平台并服务用户的观看体验方面发挥着关键作用。当前基于深度学习的模型主要以下采样/局部块采样的形式分析视频内容,而忽视了实际空域分辨率和时域帧率对视频质量的影响,随着高分辨率和高帧率视频投稿逐渐普及,特别是跨分辨率/帧率视频转码档位画质评估场景中,这种影响变得更加不可忽视。在本文中,**我们提出了一种模块化 BVQA 模型,以及一种** **训...
我的深度学习项目经验分享|社区征文
# 引言AI爆火的2023年,也是我开始学习AI的第一年,从后端领域向AI领域发展也是一个不错的选择。是什么原因让我觉得AI领域更值得钻研和发展呢?其实之前的文章也能体现出来,AI的爆火在于它确实能促进整个社会中大多人群的学习工作和生活的效率的提升,这是非常实用的。我要和大家分享的项目也是我学习AI过程中做的小项目,是利用视频分析技术结合深度学习构建的一个智能视频监控系统,用来进行实时监测和分析人员活动,提供监测识别和...
字节跳动智能音频信号处理的应用实践
## 音频信号处理发展趋势从我这些年的工作过程中,我把音频信号处理分为了三个大的部分:- 最基础的部分是算法,包括自适应滤波器、阵列信号处理以及心理声学和深度学习等算法技术。- 算法基础可以保证上层关键技术组件的技术演进。比如自适应滤波器理论的发展大大加速了回声消除在各业务场景中的应用;阵列信号处理技术则确保了声源定位以及波束形成在消费电子以及音视频创作中的效果。深度学习和心理声学技术的发展也大大...
边缘计算技术:深度学习与人工智能的融合|社区征文
例如管理电网或电话网络的那些运营控制中心。**边缘ML:** 是指机器学习在不处于核心数据中心的,企业级计算机/设备中的应用。边缘设备包括服务器机房,现场服务器,以及位于各个地区以加快响应速度为目的的小型数据中心。云端和边缘端的ML 已经通过3年多的科普,广为大众所接受。今天我们看到的人脸门禁、摄像头行为识别、智能音箱...... 绝大部分场景都属于这两类。 以 TensorFlow & TF lite 等开源深度学习框架为基础的大量应用...
特惠活动
深度学习在视频中的应用-优选内容
深度学习在视频中的应用-相关内容
边缘计算技术:深度学习与人工智能的融合|社区征文
例如管理电网或电话网络的那些运营控制中心。**边缘ML:** 是指机器学习在不处于核心数据中心的,企业级计算机/设备中的应用。边缘设备包括服务器机房,现场服务器,以及位于各个地区以加快响应速度为目的的小型数据中心。云端和边缘端的ML 已经通过3年多的科普,广为大众所接受。今天我们看到的人脸门禁、摄像头行为识别、智能音箱...... 绝大部分场景都属于这两类。 以 TensorFlow & TF lite 等开源深度学习框架为基础的大量应用...
应用场景
GPU云服务器适用于需要进行大规模并行计算的场景,例如AI深度学习、图像/视频渲染、科学计算等场景。 AI深度学习模型训练场景V100、A100、A30等类型的GPU显卡适用于AI模型训练场景,提供了大显存和高速访问能力,并叠加NVLink多卡互连,为多卡并行提供了超强计算能力。 应用推理场景T4、A10等类型的GPU显卡为AI推理提供了高效能比的加速能力,广泛应用于图像识别、语言翻译场景。 图像/视频渲染异构GPU渲染型实例提供高性能的3D图形虚...
字节跳动智能音频信号处理的应用实践
从我这些年的工作过程中,我把音频信号处理分为了三个大的部分:* 最基础的部分是算法,包括 **自适应滤波器** 、 **阵列信号处理** 以及 **心理声学** 和 **深度学习** 等算法技术。* 算法基础可以保证上层 **关键技术组件** 的技术演进。比如自适应滤波器理论的发展大大加速了回声消除在各业务场景中的应用;阵列信号处理技术则确保了声源定位以及波束形成在消费电子以及音视频创作中的效果。深度学习和心理声学技术的发展...
抖音大规模实践,火山引擎向量数据库是这样炼成的
AI时代,如何用好大模型是当前各行各业瞩目的焦点。向量数据库作为大模型“记忆体”,不仅能够为其提供数据存储,而且能通过数据检索、分析让大模型进行知识增强,成为生成式AI应用开发新范式的重要组成部分。用图片搜索图片或者文本搜索文本时,在数据库中存储和对比的并不是图片和视频片段,而是通过深度学习等算法将其提取出来的“特征”,“特征”提取的过程称为 Embedding,提取出的“特征”用数学中的向量来表示。向量化的目的是...
个人年度总结:深度学习与AIGC技术在智能诗歌生成中的应|社区征文
比如常用的手机导航中的声音。更深层次的应用将会是虚拟人领域,AIGC 不仅可以生成虚拟人的声音,并可以创造出说的内容。**游戏开发**AIGC 在游戏当中的应用可分为两方面,一方面用于场景和故事的搭建,另一方面玩家可以通过 AIGC 的平台工具来创建自己的虚拟人,可以用于游戏中的打金等活动。**代码生成**资料显示,2022 年 AIGC 发展速度惊人,迭代速度更是呈现指数级爆发,其中深度学习模型不断完善、开源模式的推动、大模型探索...
编码技术新突破:字节跳动 AVG 让视频缩小 13%
视频是由一张张图片连接起来的动态图像序列,[视频编解码](https://www.infoq.cn/article/4MRA9FIsrpTRECBq3KeW "xxx")则是视频应用的底层核心技术,作用是对图像进行压缩和数字编码,以尽可能小的带宽传送高质量的视频数据。 H.266/VVC 能够在不影响画质的情况下,把视频码率降低到前一代标准 H.265/HEVC 的一半。本来只够放标清视频的网速,也能流畅播放高清视频。 此次字节跳动 AVG 提出的新算法,旨在通过深度学习技术构建减...
AI与深度学习的一年 | 社区征文
是根据放置在脑部的颅内电极或头皮表面电极采集获得的,表示大脑中神经元放电活动,这些活动包含了大脑的实时信息。深度学习方法能以更方便的方式对特征进行提取,在图像分类、人工智能等领域取得了良好的效果。近些年来,一些研究人员开始将深度学习方法应用于癫痫发作检测领域。# 方法## 1融合GCN和transformer的癫痫自动检测模型基于GCN和transformer的癫痫自动检测模型,该网络模型处理过程中可以分成三个步骤:特征提取、重...
大模型和深度学习的工作总结|社区征文
时代也在飞速的发展和进步,越来越多的技术:深度学习、AI、大模型、虚拟现实VR等慢慢进入我们的生活。**基于大模型的图像去雾**在今年这个阶段,我的主要工作是研究基于深度学习的图像去雾工作。随着现代工业文明... 视觉元素在规模上可能存在很大差异,这一问题在对象检测等任务中受到关注。在现有的基于 Transformer 的模型中,图像都是固定规模的,这种属性不适合这些视觉应用。另一个区别是图像中像素的分辨率要高得多。存在许多...
音视频技术如何为元宇宙提供全真稳的全新体验之漫话腾讯云音视频 | 社区征文
腾讯云音视频提供将3min以内带噪语音去除噪声的服务,具有速度快、效果好的优点,广泛应用于语音采集过程、语音后期应用预处理等领域。**除了更低码率更高画质,视频增强也是音视频领域的重要技术点**。腾讯云音视频实现了超分、片源修复,以提升视频画质。腾讯明眸研究团队的画质增强研究工作主要是应用到编码优化前的前置处理阶段,提供了画质修复和增强的能力。通过传统算法和深度学习模型消除片源中的噪点和压缩效应,增强细节去...
