You need to enable JavaScript to run this app.
最新活动
产品
解决方案
定价
生态与合作
支持与服务
开发者
了解我们

国产深度学习框架dragon

国产深度学习框架Dragon是由华三通信研究院主导开发,旨在为开发者提供高效、易用的深度学习框架。本文将对Dragon框架进行技术向解析,包括框架结构、常用模块及其实现方式等方面,并附上代码示例。

一、框架结构

Dragon框架的整体结构如下图所示:

+------------------+
|     Io Module    |
+------------------+
|    Utils Module  |
+------------------+
|    Core Module   |
+------------------+
|  Operator Module |
+------------------+

其中,Io Module主要负责数据读取和存储,Utils Module提供一些工具函数,Core Module实现了深度学习的核心算法,Operator Module则是具体的算子实现。

二、常用模块及其实现方式

  1. Io Module

深度学习任务中,数据的读取和存储是基础和关键,Io Module通过提供统一的数据解析接口,支持多种数据格式,方便用户进行数据预处理和增强。

代码示例:

from dragon.io import DataLoader

# 加载MNIST数据集
data_loader = DataLoader('train.csv', batch_size=64)
for i, data in enumerate(data_loader):
  input_data, label = data
  # 训练模型
  1. Utils Module

Utils Module提供了一些基本的工具函数,如数据类型转换、随机数生成等,方便用户进行各种数据的处理。

代码示例:

from dragon.utils import to_gpu, to_numpy

# 数据类型转换
x_gpu = to_gpu(x_numpy)

# 生成随机数
import dragon.random as rand
z = rand.uniform(shape=(3,4), low=0, high=1)
  1. Core Module

Core Module实现了深度学习的核心算法,如前向传播、反向传播、优化器等,在实现时使用了TensorFlow的静态计算图,支持多维张量计算,同时通过桥接NVIDIA CUDA,支持GPU运算加速。

代码示例:

import dragon.core.workspace as ws
import dragon.metrics as metrics

# 创建计算图
ws.reset_default_graph()
X = ws.placeholder((None, 784))
Y
本文内容通过AI工具匹配关键字智能整合而成,仅供参考,火山引擎不对内容的真实、准确或完整作任何形式的承诺。如有任何问题或意见,您可以通过联系service@volcengine.com进行反馈,火山引擎收到您的反馈后将及时答复和处理。
展开更多
面向机器学习应用开发者,提供 WebIDE 和自定义训练等丰富建模工具、多框架高性能模型推理服务的企业级机器学习平台

社区干货

边缘计算技术:深度学习与人工智能的融合|社区征文

**边缘ML:** 是指机器学习在不处于核心数据中心的,企业级计算机/设备中的应用。边缘设备包括服务器机房,现场服务器,以及位于各个地区以加快响应速度为目的的小型数据中心。云端和边缘端的ML 已经通过3年多的科普,广为大众所接受。今天我们看到的人脸门禁、摄像头行为识别、智能音箱...... 绝大部分场景都属于这两类。 以 TensorFlow & TF lite 等开源深度学习框架为基础的大量应用,推动了智能在云端和边缘端应用。然而,更加具有...

基于深度学习的工业缺陷检测详解——从0到1|社区征文

# beginning2023年可谓是人工智能浪潮翻涌的一年,AI在各个领域遍地开花。以我最熟悉的工业为例,深度学习也在其中起着重要作用。不知道小伙伴们熟不熟悉工业领域的缺陷检测腻?🧐🧐🧐今天就以钢轨表面缺陷为例,和大... 底层是腾讯的优图实验室针对手机移动端的高性能神经网络前向计算框架,叫做NCNN。在pytorch上训练了yolov5的基准模型,即获得了一个.pt格式的文件,通过NCNN呢把它转成NCNN的格式,然后在java native inteface中使用c+...

2021 年我的NLP技术应用“巡径”之旅|社区征文

基于开源平台进行深度的开发和定制形成一个符合自己要求的AI应用平台。二是,基于成熟商业化AI平台上端侧应用开发实现企业AI应用的落地。在考察国外的Pytorch、tesorflow和国内PaddlePaddle、Volcengine等AI框架后,... 有监督的深度学习,Bert神经网络,图神经网络在NLP方向应用研究相信将是未来研究的前沿,我相信未来围绕NLP技术的AI应用将更能提升技术赋能业务的目标的实现。

边缘智变:深度学习引领下的新一代计算范式|社区征文

我使用Flask框架编写一个简单的Web API:```from flask import Flask, request, jsonify app = Flask(__name__) @app.route('/predict', methods=['POST']) def predict(): data = request.json['da... infoq原文链接:[边缘智变:深度学习引领下的新一代计算范式 (infoq.cn)](https://xie.infoq.cn/article/39f62d756a0249615ba07102e)

特惠活动

2核4G共享型云服务器

Intel CPU 性能可靠,不限流量,学习测试、小型网站、小程序开发推荐,性价比首选
86.00/1908.00/年
立即购买

2核4G计算型c1ie云服务器

Intel CPU 性能独享,不限流量,密集计算、官网建站、数据分析等、企业级应用推荐
541.11/2705.57/年
立即购买

域名注册服务

cn/top/com等热门域名,首年低至1元,邮箱建站必选
1.00/首年起32.00/首年起
立即购买

国产深度学习框架dragon-优选内容

边缘计算技术:深度学习与人工智能的融合|社区征文
**边缘ML:** 是指机器学习在不处于核心数据中心的,企业级计算机/设备中的应用。边缘设备包括服务器机房,现场服务器,以及位于各个地区以加快响应速度为目的的小型数据中心。云端和边缘端的ML 已经通过3年多的科普,广为大众所接受。今天我们看到的人脸门禁、摄像头行为识别、智能音箱...... 绝大部分场景都属于这两类。 以 TensorFlow & TF lite 等开源深度学习框架为基础的大量应用,推动了智能在云端和边缘端应用。然而,更加具有...
分割抠图-火山引擎
基于深度学习框架,结合检测识别技术,实现高精视觉分割能力。实现对多类主体、复杂背景等场景的抠图能力,同时支持人、货、场等多种类型需求,可广泛应用于电子商务、零售、泛文娱、个人应用等各种场景
基于深度学习的工业缺陷检测详解——从0到1|社区征文
# beginning2023年可谓是人工智能浪潮翻涌的一年,AI在各个领域遍地开花。以我最熟悉的工业为例,深度学习也在其中起着重要作用。不知道小伙伴们熟不熟悉工业领域的缺陷检测腻?🧐🧐🧐今天就以钢轨表面缺陷为例,和大... 底层是腾讯的优图实验室针对手机移动端的高性能神经网络前向计算框架,叫做NCNN。在pytorch上训练了yolov5的基准模型,即获得了一个.pt格式的文件,通过NCNN呢把它转成NCNN的格式,然后在java native inteface中使用c+...
2021 年我的NLP技术应用“巡径”之旅|社区征文
基于开源平台进行深度的开发和定制形成一个符合自己要求的AI应用平台。二是,基于成熟商业化AI平台上端侧应用开发实现企业AI应用的落地。在考察国外的Pytorch、tesorflow和国内PaddlePaddle、Volcengine等AI框架后,... 有监督的深度学习,Bert神经网络,图神经网络在NLP方向应用研究相信将是未来研究的前沿,我相信未来围绕NLP技术的AI应用将更能提升技术赋能业务的目标的实现。

国产深度学习框架dragon-相关内容

AI元年:一名前端程序员的技术之旅|社区征文

出现了许多JS的机器学习深度学习框架,如`Tenforflow.js`、`synaptic`、`Brain.js`、`WebDNN`等等。由于浏览器的计算能力受限,像`keras.js`和`WebDNN`这样的框架只支持加载模型进行推理,而不能在浏览器中进行训练。此外,有些框架并不适用于通用的深度学习任务,它们支持的网络类型各不相同。例如,`TensorFlow.js`。而`ConvNetJS`主要支持`CNN`任务,不支持`RNN`。`Brain.js`和`synaptic`主要支持`RNN`任务,不支持`CNN`网络中的...

功能增强

大数据及 AI 一体化 自研通用深度学习框架。 大数据 BI 与 AI 融合计算。

技术人的 2023 总结之无处不在的 AI|社区征文

就是以深度学习和机器视觉技术为核心,提取图片内容特征、建立图像搜索引擎,是一款用于图片间相似性检索的平台型产品,深度学习正是 AI 的特点。再比如说 智能语音交互(Intelligent Speech Interaction),就是你所理... 包括对主流 AI 框架的全面支持,使得 AI 开发更加便捷高效。并且在 Anolis OS 23 中通过引入龙蜥生态软件仓库(EPAO),实现一键安装部署 AI 开发环境,解决了 AI 组件之间繁琐的依赖关系,加速 AI 应用的开发、部署流程...

2核4G共享型云服务器

Intel CPU 性能可靠,不限流量,学习测试、小型网站、小程序开发推荐,性价比首选
86.00/1908.00/年
立即购买

2核4G计算型c1ie云服务器

Intel CPU 性能独享,不限流量,密集计算、官网建站、数据分析等、企业级应用推荐
541.11/2705.57/年
立即购买

域名注册服务

cn/top/com等热门域名,首年低至1元,邮箱建站必选
1.00/首年起32.00/首年起
立即购买

字节跳动 EB 级 Iceberg 数据湖的机器学习应用与优化

在传统的机器学习中,特征工程是非常重要的一环,通常需要大量的人工、时间和精力来处理数据和特征。而随着深度学习的发展,我们可以利用深度学习的特征提取能力,通过简单的数据处理步骤自动学习特征,甚至可以将过程简化为在待调研的原始特征中往一张样本表格里加列的操作后利用深度学习框架自动学习和提取信息。 总体来说字节跳动的机器学习和训练样本在其业务中发挥着重要作用。通过建立强大的训练平台、积累海量的训练样本...

2023 年总结与技术心得 | 社区征文

### 技术深度与广度的平衡在处理海量用户数据的过程中,我们团队发现在数据清洗和预处理阶段存在明显的性能瓶颈。传统的处理方法变得越来越慢,影响了整个数据流程的效率。为了解决这个问题,我深入研究了现有的数据处理工具,发现了一款新的分布式计算框架在处理复杂清洗逻辑时有着显著的优势。具体而言,我们引入了 Apache Flink,这是一个流式处理引擎,与传统的批处理方式相比,它具有更好的性能和实时性。通过将 Flink 引入我们...

边缘推理概述

边缘智能提供云边一体的边缘推理模块,允许您在云端进行模型的统一管理,并将模型部署到边缘一体机进行实时数据推理。 功能介绍功能 说明 相关文档 模型管理 模型管理让您使用版本化方法来统一管理各种主流深度学习框架的模型。边缘智能提供了一系列官方模型方便直接使用,您也能够创建和编辑自定义模型,并能够创建、编辑、删除和发布模型版本。 官方模型概览 模型服务 将模型部署到边缘一体机即可快捷搭建模型服务,实现在边...

2023 年度总结—总结我今年的AI之路-多项目实战经验谈AI发展前景|社区征文

学习AI的过程中,我深入了解了机器学习、深度学习、自然语言处理等关键技术,并对其在各个领域的应用有了更深刻的认识。## 🐬1.1 AIGC大模型学习体验有感说到总结,我觉得第一条就应该说一下现在爆火的Chatgpt了... 全新的工程框架、感知算法、规划控制等方面的升级和优化展示了百度在自动驾驶技术上的不懈努力。特别是感知算法的重大升级,采用了新的激光雷达检测模型CenterPoint,以及在LiDAR、Camera、Radar感知模型上的全面升级...

风起云涌的2023年,异彩纷呈的AI世界 | 社区征文

大模型突破了过去深度学习框架,构建了一套从思维链到思维算法的推理技术和强大的自然语言理解能力,可以让智能体拥有更强大的学习和迁移能力,从而可以创建更具智能性、更实用的智能体,开创了人机交互的新范式。在大模型的风潮下,今年也产生了很多新兴的优秀智能体。例如游戏领域小助手英伟达 Voyager 智能体、协助人们完成日常任务的 AI 助理 HyperWrite,以及专注于提供个人情感陪伴的 Pi 助手等。大模型是如何影响智能体的...

2022年终总结-两年Androider的技术成长之路|社区征文

转而投身到另外一个学习渠道上:>之前的年中和年终总结写的大体是参加了多少次活动,白嫖了多少礼品。但是这次我不想写平台的东西了(后半年的时间几乎很少花费在参与活动上面了,因为时间给了更重要的事情)>>我想... 通过不断的学习,拓宽技术广度,培养系统设计思维,对前沿性的课题保持好奇心,敢于接触和使用新技术。**具体的就是要有**高于标准的技术深度、开发能力和解决技术难题的能力,在工作过程中对自己负责的模块重点深挖,...

特惠活动

2核4G共享型云服务器

Intel CPU 性能可靠,不限流量,学习测试、小型网站、小程序开发推荐,性价比首选
86.00/1908.00/年
立即购买

2核4G计算型c1ie云服务器

Intel CPU 性能独享,不限流量,密集计算、官网建站、数据分析等、企业级应用推荐
541.11/2705.57/年
立即购买

域名注册服务

cn/top/com等热门域名,首年低至1元,邮箱建站必选
1.00/首年起32.00/首年起
立即购买

产品体验

体验中心

云服务器特惠

云服务器
云服务器ECS新人特惠
立即抢购

白皮书

一图详解大模型
浓缩大模型架构,厘清生产和应用链路关系
立即获取

最新活动

爆款1核2G共享型服务器

首年60元,每月仅需5元,限量秒杀
立即抢购

火山引擎增长体验专区

丰富能力激励企业快速增长
查看详情

数据智能VeDI

易用的高性能大数据产品家族
了解详情

一键开启云上增长新空间

立即咨询