机器学习深度学习应用场景
社区干货
字节跳动 EB 级 Iceberg 数据湖的机器学习应用与优化
在传统的机器学习中,特征工程是非常重要的一环,通常需要大量的人工、时间和精力来处理数据和特征。而随着深度学习的发展,我们可以利用深度学习的特征提取能力,通过简单的数据处理步骤自动学习特征,甚至可以将过程简... 这种方案更多适用于处理少量样本的场景,当海量数据达到 PB、EB 级时会遇到困难。此外由于训练代码无法直接读取数据库底层文件,读取吞吐量可能受限制,即使在实时拼接特征、标签的应用场景也会导致训练吞吐速度的下降...
字节跳动基于 Hudi 的机器学习应用场景
> 本文为 Apache Hudi 技术社区分享会第十期嘉宾分享文章,主要介绍火山引擎 LAS 团队自研的多场景样本离线存储技术,用于处理机器学习系统的离线数据流。同时,还会为大家揭秘流批一体样本生成的过程,分享对 Hudi 内核所做出的优化和改造,探索其在数据处理领域的实际应用和效果。**文末更有专属彩蛋,新人优惠购福利,等着你来解锁!** 本篇文章提纲如下:- 业务场景- 离线样本存储与迭代- 流批一体的样本生成- 功能与优...
AI 和机器学习:探索智能科技的未来 | 社区征文
人工智能开始大规模应用在工业设备和生产线的自动控制与监测中,实现自动生产、质量检测和在线分析,提高生产效率。机器视觉和深度学习技术能执行复杂的检测任务,在工业原料和成品自动化有缺陷检测。同时人工智能也被用来预测设备维护,预知设备性能下降以便及时保养。在能源领域,人工智能为智能电网与智能设备应用提供了技术支撑。例如通过预测负荷和发电能力,实现电网资源优化配置与调度。电池状态监测和故障预测也有了智能化。在...
边缘计算技术:深度学习与人工智能的融合|社区征文
**边缘ML:** 是指机器学习在不处于核心数据中心的,企业级计算机/设备中的应用。边缘设备包括服务器机房,现场服务器,以及位于各个地区以加快响应速度为目的的小型数据中心。云端和边缘端的ML 已经通过3年多的科普,广为大众所接受。今天我们看到的人脸门禁、摄像头行为识别、智能音箱...... 绝大部分场景都属于这两类。 以 TensorFlow & TF lite 等开源深度学习框架为基础的大量应用,推动了智能在云端和边缘端应用。然而,更加具有...
特惠活动
机器学习深度学习应用场景-优选内容
机器学习深度学习应用场景-相关内容
项目分享:AIGC 技术在智能教学生成中的应用 | 社区征文
# 前言伴随着科技的飞速发展,教育领域也正经历着一场前所未有的变革。特别是深度学习和AIGC技术的出现,为智能教学领域带来了新的机遇和挑战,通过与AI领域深度学习技术的结合,完成了一个智能教学助手项目。本文我将深入探讨如何应用深度学习与AIGC技术来促进智能教学生成项目,期待能为在学习本领域的伙伴提供帮助,也能为未来的教育事业发展提供参考。# 一、深度学习在智能教学中的应用深度学习作为机器学习的一个分支,能够模...
字节跳动 EB 级 Iceberg 数据湖的机器学习应用与优化
在传统的机器学习中,特征工程是非常重要的一环,通常需要大量的人工、时间和精力来处理数据和特征。而随着深度学习的发展,我们可以利用深度学习的特征提取能力,通过简单的数据处理步骤自动学习特征,甚至可以将过程简... 这种方案更多适用于处理少量样本的场景,当海量数据达到 PB、EB 级时会遇到困难。此外由于训练代码无法直接读取数据库底层文件,读取吞吐量可能受限制,即使在实时拼接特征、标签的应用场景也会导致训练吞吐速度的下降...
应用场景
GPU云服务器适用于需要进行大规模并行计算的场景,例如AI深度学习、图像/视频渲染、科学计算等场景。 AI深度学习模型训练场景V100、A100、A30等类型的GPU显卡适用于AI模型训练场景,提供了大显存和高速访问能力,并叠加NVLink多卡互连,为多卡并行提供了超强计算能力。 应用推理场景T4、A10等类型的GPU显卡为AI推理提供了高效能比的加速能力,广泛应用于图像识别、语言翻译场景。 图像/视频渲染异构GPU渲染型实例提供高性能的3D图形虚...
应用场景
场景,火山引擎 CloudFS 通过计算与存储分离方式,可以极大地发挥计算资源的灵活性,提供海量的存储空间,且零成本迁移。 海量存储空间。满足海量大数据存储与分析,同时可以进行存储容量的动态扩容。 零成本迁移。火山引擎 CloudFS 服务与 HDFS 协议兼容,无需修改代码,一键迁移上云。 场景二:数据湖分析针对数据湖分析场景,火山引擎 CloudFS 基于 TOS 存储,可实现存储数据永久保存,低成本,高可靠。 场景三:机器学习训练针对机器学习...
浅谈AI机器学习及实践总结 | 社区征文
其与监督学习的差异在于监督学习是从数据中进行学习,而强化学习是从环境给他的奖惩中学习。Q-learning,SARSA,深度强化网络、蒙特卡洛学习...## 如何理解深度学习常说的深度学习是一种使用深层神经网络的模型,可以应用于上述四类机器学习中,深度学习擅长处理非结构化输入,在视觉处理和自然语...
字节跳动杨震原:抖音如何用好机器学习
今天我会分享下公司内部业务的一些实践经验:火山引擎是怎样支持抖音用好机器学习的。 首先说说为什么要聊机器学习,什么场景、什么情况下要用机器学习系统?用机器学习会有什么样的挑战?我们是怎么解决这些挑战的? 用... 就是机器学习的这套基础设施是不是足够易用。开个玩笑:很多做数学的人,不喜欢你搞计算机科学,尤其做深度学习,说你们这帮人就在这里“炼丹”,经常不能解释你这个东西为什么好,你为什么需要不断做实验?但是我们从实用...
火山引擎大规模机器学习平台架构设计与应用实践
>作者:火山引擎AML团队## 模型训练痛点关于模型训练的痛点,首先是技术上的。现在机器学习应用非常广泛,下表给出了几种典型的应用,包括自动驾驶、蛋白质结构预测、推荐广告系统、NLP 等。可以看到不同应用场景下的参数和数据集、模型训练过程中的网络通信带宽、训练资源数和时长都不尽相同...
AI与深度学习的一年 | 社区征文
约70%的癫痫患者可以通过使用抗癫痫药物来抑制癫痫发作。为了启动抗癫痫药物治疗,及时和准确的癫痫诊断对患者而言是至关重要的。脑电(electroencephalogram,EEG)是根据放置在脑部的颅内电极或头皮表面电极采集获得的,表示大脑中神经元放电活动,这些活动包含了大脑的实时信息。深度学习方法能以更方便的方式对特征进行提取,在图像分类、人工智能等领域取得了良好的效果。近些年来,一些研究人员开始将深度学习方法应用于癫痫发作检...
从字节跳动机器学习平台,到火山引擎智能中台
从字节跳动机器学习平台,到火山引擎智能中台 自2017年诞生以来,字节跳动机器学习平台从一开始的几十台物理GPU开发机,到现在支持着万级GPU调度,持续降低机器学习的算力和开发门槛,帮助我们内部平台和外部客户深入发... 如在大规模场景下资源的管控,异构资源的管理等。 在资源管控、弹性应对大流量、安全自主可控等上层应用场景中,研发中台都具有着核心优势,例如改变人力运维为主的传统运维方式,通过大流量的自动化管理、高业务连续性...
