机器学习深度学习培训
社区干货
字节跳动 EB 级 Iceberg 数据湖的机器学习应用与优化
> 深度学习的模型规模越来越庞大,其训练数据量级也成倍增长,这对海量训练数据的存储方案也提出了更高的要求:怎样更高性能地读取训练样本、不使数据读取成为模型训练的瓶颈,怎样更高效地支持特征工程、更便捷地增删和回填特征。本文将介绍字节跳动如何通过 Iceberg 数据湖支持 EB 级机器学习样本存储,实现高性能特征读取和高效特征调研、特征工程加速模型迭代。**相关产品**:https://www.volcengine.com/product/flink # 机...
字节跳动 EB 级 Iceberg 数据湖的机器学习应用与优化
深度学习的模型规模越来越庞大,其训练数据量级也成倍增长,这对海量训练数据的存储方案也提出了更高的要求:怎样更高性能地读取训练样本、不使数据读取成为模型训练的瓶颈,怎样更高效地支持特征工程、更便捷地增删和回填特征。本文将介绍字节跳动如何通过 Iceberg 数据湖支持 EB 级机器学习样本存储,实现高性能特征读取和高效特征调研、特征工程加速模型迭代。作者|字节跳动基础架构研发工程师-谢凯 **01...
边缘计算技术:深度学习与人工智能的融合|社区征文
**边缘ML:** 是指机器学习在不处于核心数据中心的,企业级计算机/设备中的应用。边缘设备包括服务器机房,现场服务器,以及位于各个地区以加快响应速度为目的的小型数据中心。云端和边缘端的ML 已经通过3年多的科普,广为大众所接受。今天我们看到的人脸门禁、摄像头行为识别、智能音箱...... 绝大部分场景都属于这两类。 以 TensorFlow & TF lite 等开源深度学习框架为基础的大量应用,推动了智能在云端和边缘端应用。然而,更加具有...
技术大讲堂精彩回顾& PPT 领取|字节跳动基于 HPC 的大规模机器学习技术
火山引擎开发者社区技术大讲堂第一期为大家带来了主题为「揭秘字节跳动基于 HPC 的大规模机器学习技术」的分享。字节跳动经过业务实践打磨的机器学习技术首次亮相开发者社区,由技术负责人项亮公开深度分享;同时,承载机器学习平台的超大规模 HPC 基础设施也首度在社区分享。 **《火山引擎大规模机器学习平台架构设计与应用实践》**项亮|火山引擎机器学习系统负责人本次分享围绕数据加速、模型分布式训练框架建...
特惠活动
机器学习深度学习培训-优选内容
机器学习深度学习培训-相关内容
揭秘字节跳动基于 HPC 的大规模机器学习技术
随着智慧科研、自动驾驶、基因测序、量化投资等大量新兴产业的发展,现代产业对模型训练有了大量的需求,模型体积也呈现爆发式地增长。而大模型训练给底层基础设施,尤其是计算能力带来了不小的挑战。4 月 14 日,火山引擎开发者社区技术大讲堂第一期将为大家揭秘字节跳动基于 HPC 的大规模机器学习技术。字节跳动经过业务实践打磨的机器学习技术将首次亮相开发者社区,并由技术负责人项亮公开深度分享,与广大开发者互动。同时,承载...
浅谈AI机器学习及实践总结 | 社区征文
这时候强化学习就上场了,它针对是智能体(可以理解成一种机器学习模型)如何基于环境而做出行动反应,以获得最大化的累积奖励。其与监督学习的差异在于监督学习是从数据中进行学习,而强化学习是从环境给他的奖惩中学习。Q-learning,SARSA,深度强化网络、蒙特卡洛学习...## 如何理解深度学习常...
机器学习
1. 概述 机器学习,是指可视化建模支持机器学习算子,对数据进行加工处理,以便用户基于数据进行模型训练、深度分析、预测分析等。本文将为您介绍机器学习算子的功能。 2. 功能介绍 2.1 预测将机器学习算子训练生成的模型应用于预测数据的数据上,一般链接在机器学习算子后面。字段设置特征列映射:设置模型中的特征列和数据中的特征列的映射关系。标签列:标签列,分类训练的依据。参数设置预测的列名:预测的列的名字。 2.2 one-hot 模...
机器学习
1.功能概述 机器学习,是指可视化建模支持机器学习算子,对数据进行加工处理,以便用户基于数据进行模型训练、深度分析、预测分析等。本文将为您介绍机器学习算子的功能。 2.算子介绍 2.1 预测将机器学习算子训练生成的模型应用于预测数据的数据上,一般链接在机器学习算子后面。 说明 字段设置 特征列映射:设置模型中的特征列和数据中的特征列的映射关系。 标签列: 标签列,分类训练的依据。 参数设置 预测的列名:预测的列的名字。 ...
项目分享:AIGC 技术在智能教学生成中的应用 | 社区征文
# 前言伴随着科技的飞速发展,教育领域也正经历着一场前所未有的变革。特别是深度学习和AIGC技术的出现,为智能教学领域带来了新的机遇和挑战,通过与AI领域深度学习技术的结合,完成了一个智能教学助手项目。本文我将深入探讨如何应用深度学习与AIGC技术来促进智能教学生成项目,期待能为在学习本领域的伙伴提供帮助,也能为未来的教育事业发展提供参考。# 一、深度学习在智能教学中的应用深度学习作为机器学习的一个分支,能够模...
揭秘字节跳动基于 HPC 的大规模机器学习技术
字节跳动基于 HPC 的大规模机器学习技术。字节跳动经过业务实践打磨的**机器学习技术将****首次亮相**开发者社区,并由 **技术负责人项亮**公开深度分享,与广大开发者互动。同时,承载机器学习平台的 **超大规模 HPC 基础设施****也将** **首度**在社区分享。**活动时间**:2022/04/14(周四)19:30-21:00 **活动形式**:线上直播