深度学习方法面向自然语言
社区干货
AI 大模型探索 | 社区征文
# 前言> 2023年马上就要结束了,这一年对于整个互联网来说意义非凡。随着深度学习技术的不断进步,大规模预训练语言模型(以下简称大模型)在自然语言处理领域取得了显著进展,从年初的OpenAI发布的最新版本的语言大模... 都能够在百度智能云千帆上通过最简单的方式用上大模型,用好大模型。小编就基于千帆大模型的特点,设计了一款小游戏,部署并调用AI大模型服务,为游戏提供智能NPC服务。## **操作步骤**首先我们可以在体验中心进行...
人工智能之自然语言处理技术总结与展望| 社区征文
对机器学习和深度学习拥有自己独到的见解。今天给大家分享的是人工智能之自然语言处理技术总结与展望,欢迎大家在评论区留言,和大家一起成长进步。# 1. 背景 2021年5月20日,第五届世界智能大会在天津开幕。中国科协主席万钢在开幕式上表示,新一代人工智能正逐步从感知智能向认知智能发展。感知智能是机器具备了视觉、听觉、触觉等感知能力,将多元数据结构化,并用人类熟悉的方式去沟通和互动。而认知智能则是从类脑的研究和...
大模型技术的发展与实践|社区征文
## 一、大模型的概念**大型语言模型,也称大语言模型、大模型(Large Language Model,LLM;Large Language Models,LLMs)** 。大语言模型是一种深度学习模型,特别是属于自然语言处理(NLP)的领域,一般是指包含数干亿... 更多的参数意味着模型可能具有更强的学习能力。### 1、语言模型的发展史语言是人类表达和交流的一种突出能力,我们在幼儿开始就学会了沟通表达,并且伴随我们一生。在很长一段时间机器无法掌握以人类的方式进行交...
大模型和深度学习的工作总结|社区征文
越来越多的技术:深度学习、AI、大模型、虚拟现实VR等慢慢进入我们的生活。**基于大模型的图像去雾**在今年这个阶段,我的主要工作是研究基于深度学习的图像去雾工作。随着现代工业文明的发展进步,大气污染现象愈... 大模型和深度学习技术的最新进展彻底改变了计算机视觉领域,许多领域都取得了重大进展,包括图像分类和对象检测。图像去雾也不例外,针对图像去雾开发了大量方法,并狠狠地推动了技术发展水平。比如基于大模型下的最新...
特惠活动
深度学习方法面向自然语言-优选内容
深度学习方法面向自然语言-相关内容
字节跳动火山翻译斩获ACL 2021最佳论文
该研究提出了一种新的词表学习方案 VOLT,在多种翻译任务上取得了优秀的结果。 论文地址: https://arxiv.org/pdf/2012.15671.pdf 代码地址: https://github.com/Jingjing-NLP/VOLT 对于从业者来说,大家无时无刻不在使用词表对语言进行向量化表示。在深度学习时代,词表构建基本上是所有自然语言处理任务的第一步工作。尽管现今也有了一些比较通用的词表处理方法,但是仍然没有办法回答最基础的问题:什么是最优词表,如何生成最优词表...
大模型的应用前景:从自然语言处理到图像识别 | 社区征文
学习一般特征表示,随后在一些任务上进行微调。这类迁移学习方法促进大型模型具有更强的泛化能力和适应性。- 自然语言理解的提升:大模型技术在自然语言理解行业拥有显著的提高。GPT(Generative Pre-trainedTransformer)为了代表大型语言模型,依据预训练和优化的方式,在文本生成、机器翻译、问答系统等任务中获得了显著的效果。- 图像识别和机器视觉进展:大模型技术也用于图像识别和机器视觉领域。依据深度卷积神经网络结构和...
AI与深度学习的一年 | 社区征文
方式对特征进行提取,在图像分类、人工智能等领域取得了良好的效果。近些年来,一些研究人员开始将深度学习方法应用于癫痫发作检测领域。# 方法## 1融合GCN和transformer的癫痫自动检测模型基于GCN和transform... Google在顶级机器学习会议上发表了论文“Attention is all you need”提出了 Transformer,一种自注意力机制来学习文本的表示。Transformer 是一个标准的编码--解码结构,包括一系列编码与解码器的堆叠,在自然语言处...
AI 助力后端开发的新趋势|社区征文
# 前言在过去几年,人工智能主要应用于自然语言处理、计算机视觉等前端开发领域。它能帮助开发者更好地理解用户需求,并提供个性化的体验。但是,随着时间的推进,我们开始注意到AI也开始渗透进入后端开发这个区域。... 随着人工智能核心技术如深度学习的成熟,后端开发也正从传统向智能化转变。它带来的不仅是自动化,更重要的是提升研发效率,降低运维成本。我相信在不久的将来,我们会看到越来越多AI技术被深入应用在后端各个环节中。...
项目分享:AIGC 技术在智能教学生成中的应用 | 社区征文
# 前言伴随着科技的飞速发展,教育领域也正经历着一场前所未有的变革。特别是深度学习和AIGC技术的出现,为智能教学领域带来了新的机遇和挑战,通过与AI领域深度学习技术的结合,完成了一个智能教学助手项目。本文我... **智能评估与反馈**:使用深度学习模型对学生的作业进行自动批改和评估,减轻教师的负担,并为学生提供及时、准确的反馈。同时,这种评估方式还能挖掘学生的学习问题,帮助他们改进学习方法,以下是部分核心代码。```...
字节跳动 EB 级 Iceberg 数据湖的机器学习应用与优化
> 深度学习的模型规模越来越庞大,其训练数据量级也成倍增长,这对海量训练数据的存储方案也提出了更高的要求:怎样更高性能地读取训练样本、不使数据读取成为模型训练的瓶颈,怎样更高效地支持特征工程、更便捷地增删... 并且使得 GPT-3 在自然语言处理任务中取得了令人瞩目的成就。 然而随着模型参数的增长,模型的大小也成为一个问题。为了解决这个问题,人们开始尝试模型小型化的方法。Chinchilla 就是一种模型小型化的尝试,相...
万字长文带你弄透Transformer原理|社区征文
> 🍊作者简介:[秃头小苏](https://juejin.cn/user/1359414174686455),致力于用最通俗的语言描述问题>> 🍊专栏推荐:[深度学习网络原理与实战](https://juejin.cn/column/7138749154150809637)>> 🍊近期目标:写好... 没有接触过NLP(自然语言处理)的内容,这给理解VIT带来了一定的难度,但是为了紧跟时代潮流,我们还是得硬着头皮往transformer的浪潮里冲一冲。那么这里我准备做一个VIT的入门系列,打算一共分为三篇来讲述,计划如下:...
AI技术进展和总结|社区征文
随着机器学习和深度学习的发展,AI技术也在不断地推陈出新,也融入到了在我的工作和生活中,今年以来我的主要研究方向便是人工智能的方向。 # AI技术 近年来,基于AI的预训练技术在文档理解任务方面取得了显着... 各种工作通过将卷积神经网络与自注意力网络相结合来联合图像表示学习。这些工作要么提取卷积神经网络网格特征,要么依赖对象检测器提取区域特征 ,这会造成大量计算瓶颈或需要区域监督。在自然图像视觉和语言预训练(...
2021 年我的NLP技术应用“巡径”之旅|社区征文
关于建筑运维这个传统行业如何应用自然语言NLP技术,实现机器能真正理解人类语言的技术途径,我认为作为产业界由2条技术途径可以考虑,一是,基于开源平台进行深度的开发和定制形成一个符合自己要求的AI应用平台。二是... 有监督的深度学习,Bert神经网络,图神经网络在NLP方向应用研究相信将是未来研究的前沿,我相信未来围绕NLP技术的AI应用将更能提升技术赋能业务的目标的实现。
