机器学习使用手册
社区干货
浅谈AI机器学习及实践总结 | 社区征文
# 机器学习基础## 什么是机器学习机器学习是一种从数据生成规则、发现模型,来帮助我们预测、判断、分组和解决问题的技术。(机器学习是一种从数据中生产函数,而不是程序员直接编写函数的技术)说起函数就涉及到自变量和因变量,在机器学习中,把自变量叫做特征(feature)多个自变量分别可以定义为X1,X2..Xn,因变量叫做标签(label),可定义为Y,而一批特征和标签的集合,就是机器学习的数据集。机器学习的学习过程就是在已知的数据...
我的技术年终总结——机器学习 |社区征文
## 一、机器学习是什么?- 从广义上来说,机器学习是一种能够赋予机器学习的能力以此让它完成直接编程无法完成的功能的方法。但从实践的意义上来说,机器学习是一种通过利用数据,训练出模型,然后使用模型预测的一种方法。 - 直观上理解,机器学习(Machine Learning,ML)是研究计算机模拟人类的学习活动,获取知识和技能的理论和方法,改善系统性能的学科。因为计算机系统中“经验‘通常以数据的形式存在,所以机器要利用经验,就必...
项目经验分享:机器学习在智能风控中的应用|社区征文
# 引言一直以来,人工智能(AI)在各个领域都表现出了强悍的水准。在学习中,我觉得机器学习具备巨大的潜力。近期接触了一个风险控制项目,务必涉及机器学习行业。因而,我就依据学习了解了机器学习领域的知识。本文将... 机器学习就是让计算机通过学习数据中的规律,然后对未知的数据进行预测或决策,这就是机器学习~下面我们进入项目。## 项目细节### 数据收集与预处理如同上面所说,机器学习需要提供一些数据才能进行后续操作。那...
火山引擎大规模机器学习平台架构设计与应用实践
>作者:火山引擎AML团队## 模型训练痛点关于模型训练的痛点,首先是技术上的。现在机器学习应用非常广泛,下表给出了几种典型的应用,包括自动驾驶、蛋白质结构预测、推荐广告系统、NLP 等。
特惠活动
机器学习使用手册-优选内容
机器学习使用手册-相关内容
项目经验分享:机器学习在智能风控中的应用|社区征文
# 引言一直以来,人工智能(AI)在各个领域都表现出了强悍的水准。在学习中,我觉得机器学习具备巨大的潜力。近期接触了一个风险控制项目,务必涉及机器学习行业。因而,我就依据学习了解了机器学习领域的知识。本文将... 机器学习就是让计算机通过学习数据中的规律,然后对未知的数据进行预测或决策,这就是机器学习~下面我们进入项目。## 项目细节### 数据收集与预处理如同上面所说,机器学习需要提供一些数据才能进行后续操作。那...
火山引擎大规模机器学习平台架构设计与应用实践
>作者:火山引擎AML团队## 模型训练痛点关于模型训练的痛点,首先是技术上的。现在机器学习应用非常广泛,下表给出了几种典型的应用,包括自动驾驶、蛋白质结构预测、推荐广告系统、NLP 等。是面向机器学习应用开发者,提供 WebIDE 和自定义训练等丰富建模工具、多框架高性能模型推理服务的企业级机器学习平台
字节跳动杨震原:抖音如何用好机器学习
“数字化时代,问题可以定量评估,机器学习可以围绕目标做更智能、高效的优化。” 4月18日,火山引擎发布自研DPU等系列云产品,并推出新版机器学习平台,支持企业客户更好地训练AI大模型。字节跳动副总裁杨震原以《抖音... 机器学习做智能化,会有什么样的问题呢?主要说两个问题,第一个是复杂,第二个是贵。 为什么说复杂?因为机器学习软件栈很深,它需要有平台,有PyTorch平台,有TensorFlow,还有很多的平台。也涉及到框架、操作系统,还有底...
火山引擎大规模机器学习平台架构设计与应用实践
本文主要介绍了火山引擎云原生机器学习平台在高性能计算和存储的规模化调度上的架构设计,如何对模型分布式训练进行加速,以及平台如何满足开发过程的标准化和团队协作的需求。 模型训练痛点... 在于充分利用每一台 GPU/CPU 机器的网络带宽。为了实现这一点,BytePS 设计了一套精确的梯度分配方案,将要通信的梯度恰到好处地分配给所有 GPU 和 CPU 机器执行规约操作。从通信流量上看,相当于同时结合了 PS 和 Al...
字节跳动 EB 级 Iceberg 数据湖的机器学习应用与优化
在传统的机器学习中,特征工程是非常重要的一环,通常需要大量的人工、时间和精力来处理数据和特征。而随着深度学习的发展,我们可以利用深度学习的特征提取能力,通过简单的数据处理步骤自动学习特征,甚至可以将过程简化为在待调研的原始特征中往一张样本表格里加列的操作后利用深度学习框架自动学习和提取信息。 总体来说字节跳动的机器学习和训练样本在其业务中发挥着重要作用。通过建立强大的训练平台、积累海量的训练样本...
字节跳动 EB 级 Iceberg 数据湖的机器学习应用与优化
在传统的机器学习中,特征工程是非常重要的一环,通常需要大量的人工、时间和精力来处理数据和特征。而随着深度学习的发展,我们可以利用深度学习的特征提取能力,通过简单的数据处理步骤自动学习特征,甚至可以将过程简化为在待调研的原始特征中往一张样本表格里加列的操作后利用深度学习框架自动学习和提取信息。总体来说字节跳动的机器学习和训练样本在其业务中发挥着重要作用。通过建立强大的训练平台、积累海量的训练样本,字...
AI 和机器学习:探索智能科技的未来 | 社区征文
# AI和机器学习的定义人工智能(Artificial Intelligence)是使计算机和机器模拟人类智能的科学与工程实践。它旨在构建智能代理——系统能够正确理解外部环境,并在那里采取行动,以最大程度地完成目标。AI技术的目标之一是通过创建具有人类智能特征的系统来解决复杂问题。而机器学习(Machine Learning)是AI的一个分支。它通过分析数据来教会计算机学习而不通过明确编程。通过例如聚类、分类和回归等算法从示例数据中学习模式和规则...
(Preview)使用 RAY计算引擎提交分布式任务
Ray 是火山引擎机器学习平台上全新推出的分布式计算引擎选项。利用这一强大的引擎,算法工程师可以轻松通过Python和Ray AI Runtime进行大规模数据处理以及分布式模型训练。火山引擎机器学习平台专注于为客户提供端到端的机器学习服务,以帮助客户构建可靠高效的机器学习流程。现在我们更进一步,将Ray 框架(ray.io) 与 自定义任务模块完美整合,帮助您轻松创建和运行Ray作业,实现作业的灵活调度,按需执行。 在使用 Ray 时,您无需进行...
