声学语音技术研究
社区干货
ICASSP 2023 | 解密实时通话中基于 AI 的一些语音增强技术
语音增强技术正从传统的基于统计学习的方案向基于深度学习的方案融合演进,利用 AI 技术,可以在语音降噪、回声消除、干扰人声消除等方面实现更好的语音增强效果,为用户提供更舒适的通话体验。作为语音信号处理研究领域的旗舰国际会议,ICASSP (International Conference on Acoustics, Speech and Signal Processing) 一直代表着声学领域技术最前沿的研究方向。ICASSP 2023 收录了多篇和音频信号语音增强算法相关的文章,其中,**火...
智能语音技术在字节跳动内容平台的演进和应用实践
介绍了智能语音技术上在字节跳动的研发进展以及应用实践,并分享了智能语音赋能内容生产的思考。以下为采访实录**。 字节跳动的智能语音技术布局 **InfoQ :首先请您做一下自我介绍,您自何时加入字节跳动,以及目前主要负责的工作是?****殷翔**:我是 2018 年加入字节跳动人工智能实验室,负责音频生成算法团队,研究方向包括语音合成、声音转换、歌唱合成、虚拟形象。团队研发技术落地于番...
智能语音技术在字节跳动内容平台的演进和应用实践
**InfoQ :首先请您做一下自我介绍,您自何时加入字节跳动,以及目前主要负责的工作是?****殷翔**:我是 2018 年加入字节跳动人工智能实验室,负责音频生成算法团队,研究方向包括语音合成、声音转换、歌唱合成、虚拟形象。团队研发技术落地于番茄小说、大力教育、剪映、客服机器人、听头条、游戏 V、行业 ToB 等。**InfoQ:字节跳动从什么时候开始布局智能语音技术的?公司内部对智能语音技术的需求主要来自哪些场景?****殷翔**:字...
技术人的 2023 漫谈 AI 语音体验之路|社区征文
和音视频技术的深度融合成为一场科技变革的焦点。通过对AI与音视频的使用体验,我深刻感受到了这场变革所带来的深远影响。在过去的几年中,AI技术的进步为音视频领域注入了前所未有的活力。随着深度学习等技术的崛起,我们目睹了语音识别、人脸识别、自然语言处理等领域的惊人进展。这些技术不再停留在研究实验室,而是渗透到了我们生活的方方面面。AI语音助手的崛起成为了数字时代的代表之一。小爱同学作为智能语音助手,不仅为我们的...
特惠活动
声学语音技术研究-优选内容
声学语音技术研究-相关内容
技术人的 2023 漫谈 AI 语音体验之路|社区征文
和音视频技术的深度融合成为一场科技变革的焦点。通过对AI与音视频的使用体验,我深刻感受到了这场变革所带来的深远影响。在过去的几年中,AI技术的进步为音视频领域注入了前所未有的活力。随着深度学习等技术的崛起,我们目睹了语音识别、人脸识别、自然语言处理等领域的惊人进展。这些技术不再停留在研究实验室,而是渗透到了我们生活的方方面面。AI语音助手的崛起成为了数字时代的代表之一。小爱同学作为智能语音助手,不仅为我们的...
“柯南领结”变成现实,火山引擎发布新一代实时AI变声方案
该技术已被广泛地应用于音视频创作场景中。相比语音合成,声音转换创造了新的语音交互形式:其不再需要输入文字,而是根据用户输入的说话音频,将音频中的音色转换到目标发音人上,并保持说话内容、韵律情感等一致。相较于输入文本,输入音频包含了更丰富的副语言信息,例如各个段落的情感、抑扬顿挫、停顿等。声音转换能够做到改变音色的同时,将这些副语言信息很好地还原。 同基于深度学习的语音合成一样,声音转换的模型也由声学模型(a...
全新自研语音合成模型PortaSpeech 2,正式发布!
VTTS2.0 版本采用火山引擎全自研语音合成模型 PortaSpeech 2 (下文简称:PS2),由当下流行的基础模型架构 PortaSpeech原班人马打造。PS2 在第一代模型的基础上,着重对音质韵律、多情感、端云能力以及克隆等进行了大规... VR眼镜等 点读笔等携带式设备 首包 100ms/100ms 100ms/100ms 300ms 整体链路 rtf 0.12/0.10 0.38/0.25 0.25 与真人相似度高达99.8%除了多重技术方向的创新升级之外,新晋的PS2模型在云端应用中也展现出了高品质的语...
产品简介
方案介绍 声音复刻是基于全自研最新语音大模型算法MegaTTS打造的超轻量级音色定制方案。用户在开放环境中录制秒级别录音即可极速拥有专属AI定制音色。 应用场景 语音助手: 复刻独具特色的品牌人机交互音色,例如家人朋友等,可作为手机助手、导航语音、游戏趣味语音等,为用户提供独特的交互体验; 视频配音: 快速复刻个性化声音,如IP、搞怪等特色声音,满足不同创作者对音色的使用需求,为视频创作提供更多落地玩法和可能性; 车载助...
当你的童年男神学会了多种语言无缝切换
字节跳动 AI Lab 语音与音频团队已能提供超过「17种语言」、「13种方言」、「100+不同风格」媲美真人的音色,其音频生成能力也通过火山引擎逐步面向市场开放。 无论是丰富的多语言配音,还是跨语言合成,这些令人惊艳的声音效果都来自于语音合成技术。近期,为上述能力提供技术支持的字节跳动 AI Lab Speech & Audio Team 智能语音与音频团队(后文简称 SA 团队 )已经将最新升级的多语言、跨语言合成技术落地,用户可以在视频创作工具剪...
回声消除介绍
简介 AEC(Acoustic Echo Canceller)即声学回声消除,也叫 回声消除 。介绍算法之前,让我们先了解回声是什么,它是怎么产生的。千言万语不如一个实际的例子,我在 YouTube 上找到了一个演示 AEC 算法的视频上面的视频中... 针对语音场景,支持1s以内的延时差 支持格式 注意 v3版本SDK内部集成重采样,支持格式与v2版本不一致 V2版本 支持格式 采样率 44100/16000 (不同采样率使用不同模型和初始化参数) 通道数 1ch/2ch 数据格式 Planar-...
“国检”结果来啦!火山引擎语音合成如何做到眼前一亮?
也是唯一的国家级语音及图像产品质量检验检测机构,AI 国检中心一直致力于推动智能语音产业的健康发展。本次获得AI国检中心的权威认证,也充分表明了火山引擎语音合成技术能力已达到行业领先水平。 火山引擎语音能力源自字节跳动 AI Lab Speech & Audio 智能语音与音频团队。团队将长期服务字节跳动各业务线的前沿语音技术通过火山引擎开放,提供行业领先的AI语音技术能力以及卓越的全栈语音产品解决方案。目前火山引擎的语音识别和...
迁移回归问题新突破,火山语音团队论文被人工智能顶级期刊 IEEE TPAMI 接收
再次接收了火山语音团队有关机器学习的技术研究成果,即“ **基于自适应迁移核函数的迁移高斯回归模型”( ADATPITVE TRANSFER KERNEL LEARNING FOR TRANSFER GAUSSIAN PROCESS REGRESSION)** https://ieeexplore.ieee.org/abstract/document/9937157每年由国际计算语言学协会举办,是... **研究背景:**众所周知,语音到语音翻译(S2ST)对于打破语言壁垒与沟通障碍非常有益。近年来业内利用自监督模型获得的离散单元,构建无文本且端到端的 S2ST 系统逐渐成为主流,但当前的S2ST模型在带噪的环境中仍然存...
