深度学习算法框架
社区干货
AI安全技术总结与展望| 社区征文
人工智能内生安全主要包括:框架安全,如TensorFlow、Caffe、PyTorch等深度学习框架存在若干漏洞;数据安全,如数据丢失或者变形、噪声数据干扰人工智能研判结果;算法安全,如难以保证算法的正确性,对抗样本、自动驾驶中的安全事故等;模型安全,如模型窃取或者模型污染,从而植入后门。人工智能衍生安全主要指由于AI本身的缺陷或者脆弱性给其他领域带来安全问题,比如人工智能应用于黑产。# 2. AI安全应用 目前,人工智能与网络安全...
从100w核到450w核:字节跳动超大规模云原生离线训练实践
抖音搜索等业务的超大规模深度学习训练——以上场景的机器学习训练均是基于 **Primus** **训练框架**完成。整个机器学习生态**从上到下分为“平台层”“框架层”“资源层”** 3个部分。字节跳动算法工程师使用 Reckon 训练平台完成了模型编写、训练、上线的全部过程。Reckon 训练平台中包含基于 TF 深度优化定制的 4 大深度学习框架——Lagrange 框架、Lagrange-Lite、蒲公英、美洲豹,**这4个框架均通过** **Primus** **框架进...
基于深度学习的工业缺陷检测详解——从0到1|社区征文
和大家唠唠基于深度学习的钢轨表面伤损细粒度图像识别与目标检测,***总结一下工业缺陷检测流程***,包括从最开始的数据标注,中间的算法原理,再到最后的落地应用。无论你是搞实际项目or发论文or开阔视野,相信都会有所... 减少了计算量。Neck颈部网络用于整合各尺度的特征,生成特征金字塔FPN,主要由FPN和PAN组成。它把不同尺度的特征汇总整合,增强了模型对不同尺度目标的识别能力。这里再细说一下,FPN通过融合高底层特征,提升了不同尺...
边缘智变:深度学习引领下的新一代计算范式|社区征文
# 1.前言多年来,科技的飞速发展导致了数据处理和传输的需求暴涨,因此云计算成为了许多应用领域的核心基础设施。但是物联网(IoT)设备的普及和近年来5G网络的异军突起,数据量更是呈显出爆炸性的增长,对数据处理的速... 使用数据处理算法对采集的数据进行预处理和清洗,去除噪声和异常值。```import pandas as pd # 读取数据 data = pd.read_csv('patient_data.csv') # 去除异常值 data = data.replace([np.inf, -np.inf],...
特惠活动
深度学习算法框架-优选内容
深度学习算法框架-相关内容
边缘智变:深度学习引领下的新一代计算范式|社区征文
# 1.前言多年来,科技的飞速发展导致了数据处理和传输的需求暴涨,因此云计算成为了许多应用领域的核心基础设施。但是物联网(IoT)设备的普及和近年来5G网络的异军突起,数据量更是呈显出爆炸性的增长,对数据处理的速... 使用数据处理算法对采集的数据进行预处理和清洗,去除噪声和异常值。```import pandas as pd # 读取数据 data = pd.read_csv('patient_data.csv') # 去除异常值 data = data.replace([np.inf, -np.inf],...
边缘计算技术:深度学习与人工智能的融合|社区征文
**边缘ML:** 是指机器学习在不处于核心数据中心的,企业级计算机/设备中的应用。边缘设备包括服务器机房,现场服务器,以及位于各个地区以加快响应速度为目的的小型数据中心。云端和边缘端的ML 已经通过3年多的科普,广为大众所接受。今天我们看到的人脸门禁、摄像头行为识别、智能音箱...... 绝大部分场景都属于这两类。 以 TensorFlow & TF lite 等开源深度学习框架为基础的大量应用,推动了智能在云端和边缘端应用。然而,更加具有...
字节跳动 EB 级 Iceberg 数据湖的机器学习应用与优化
这些数据还支持算法团队的特征调研、特征工程,并为模型的迭代和优化提供基础。目前字节跳动以及整个业界在机器学习和训练样本领域的一些趋势如下: 首先,**模型** **/样本** **越来越大**。随着模型参数的增多... 而随着深度学习的发展,我们可以利用深度学习的特征提取能力,通过简单的数据处理步骤自动学习特征,甚至可以将过程简化为在待调研的原始特征中往一张样本表格里加列的操作后利用深度学习框架自动学习和提取信息。 ...
GPU-部署NGC环境
是NVIDIA开发的一套深度学习容器库,具有强大的性能和良好的灵活性,可以帮助科学家和研究人员快速构建、训练和部署神经网络模型。NGC官网提供了当前主流深度学习框架的镜像,例如Caffe、TensorFlow、Theano、Torch等。 软件版本操作系统:本文以Ubuntu 18.04为例。 NVIDIA驱动:GPU驱动:用来驱动NVIDIA GPU卡的程序。本文以470.57.02为例。 CUDA:使GPU能够解决复杂计算问题的计算平台。本文以CUDA 11.4为例。 CUDNN:深度神经网络库,用...
风起云涌的2023年,异彩纷呈的AI世界 | 社区征文
大模型突破了过去深度学习的框架,构建了一套从思维链到思维算法的推理技术和强大的自然语言理解能力,可以让智能体拥有更强大的学习和迁移能力,从而可以创建更具智能性、更实用的智能体,开创了人机交互的新范式。在大模型的风潮下,今年也产生了很多新兴的优秀智能体。例如游戏领域小助手英伟达 Voyager 智能体、协助人们完成日常任务的 AI 助理 HyperWrite,以及专注于提供个人情感陪伴的 Pi 助手等。大模型是如何影响智能体的...
基于深度学习的探地雷达图像去杂波|社区征文
严重影响了目标检测算法的性能。随着深度学习以及大模型的普及,人们开始尝试将其应用到探地雷达图像去杂波任务中。 **基于深度学习的探地雷达图像去杂波**凭借强大的特征表示和学习能力,基于深度学习的方法... 准确性以及计算效率。弹性残差模块引入多项式函数,根据任务所需的通道比例来调节参数,使得模块可以自适应的调节残差块内卷积核大小,从而更好地拟合非线性变化以达到有效去除 GPR 图像中杂波的目的。同时弹性残差...
GLM-4 All Tools 研发团队招聘|大模型算法工程师
**职位名称:大模型算法工程师**招聘人数:5 人工作地点:北京,清华科技园,搜狐网络大厦***工作内容**** 参与 GLM-4 All Tools 系统的迭代升级及工程落地+ 网页浏览/代码解释/图片生成单工具调用性能提升+ 复杂场景下的多工具联合调用能力提升+ 定制化场景下模型的能力提升(GLMs)+ 工程化系统框架的落地及上线***职位要求**** 计算机、深度学习、机器学习等相关专业,硕士及以上学历* 扎实的技术基础,较强...
我的深度学习项目经验分享|社区征文
为大家详细介绍我是如何使用深度学习与视频分析技术构建项目的。# 项目细节## 需求分析这可能是一个与本文主题关联不大的模块,为了能让读者清楚了解项目背景,就简单总结几点项目需求。首先在功能方面,系统大致需要能解码视频并提取关键帧用于人脸检测和行为识别,并且要能展示分析结果,包括标注人脸和行为,还能够实时报警。系统性能方面,要在实时场景下对大量视频数据进行处理和分析,所以需要有高效的算法和硬件支持,简而言...
从100w核到450w核:字节跳动超大规模云原生离线训练实践
抖音搜索等业务的超大规模深度学习训练——以上场景的机器学习训练均是基于 **Primus** **训练框架**完成。 整个机器学习生态 **从上到下分为“平台层”“框架层”“资源层”** 3个部分。字节跳动算法工程师使用 Reckon 训练平台完成了模型编写、训练、上线的全部过程。Reckon 训练平台中包含基于 TF 深度优化定制的 4 大深度学习框架——Lagrange 框架、Lagrange-Lite、蒲公英、美洲豹, **这4个框架均通过 Primus 框...
