深度学习的框架和实例
社区干货
基于深度学习的工业缺陷检测详解——从0到1|社区征文
# beginning2023年可谓是人工智能浪潮翻涌的一年,AI在各个领域遍地开花。以我最熟悉的工业为例,深度学习也在其中起着重要作用。不知道小伙伴们熟不熟悉工业领域的缺陷检测腻?🧐🧐🧐今天就以钢轨表面缺陷为例,和大... 比如实例尺度的微观伤损形位的数据结构、图像尺度的终端视觉测量的数据结构等,由不同尺度的数据结构可以生成一条轨道交通线路的密集量化地图。最后,把这个目标检测算法模型部署应用在桌面端、云端、web端、网页端、...
边缘计算技术:深度学习与人工智能的融合|社区征文
**边缘ML:** 是指机器学习在不处于核心数据中心的,企业级计算机/设备中的应用。边缘设备包括服务器机房,现场服务器,以及位于各个地区以加快响应速度为目的的小型数据中心。云端和边缘端的ML 已经通过3年多的科普,广为大众所接受。今天我们看到的人脸门禁、摄像头行为识别、智能音箱...... 绝大部分场景都属于这两类。 以 TensorFlow & TF lite 等开源深度学习框架为基础的大量应用,推动了智能在云端和边缘端应用。然而,更加具有...
从100w核到450w核:字节跳动超大规模云原生离线训练实践
和数据编排,最后将结合前两部分分享字节跳动在实践中沉淀的4个案例。**作者|单既喜-字节跳动基础架构研发工程师**# **业务背景**云原生离线训练框架支撑了字节跳动内部“推荐”“广告”“搜索”等场景,如头条推荐、抖音视频推荐、穿山甲广告、千川图文广告、抖音搜索等业务的超大规模深度学习训练...
边缘智变:深度学习引领下的新一代计算范式|社区征文
提高工作效能和产品质量。同时,边缘计算可用于进行灵便制造,快速调整加工过程,以满足市场需求。上述只是常见的一些应用场景,边缘计算的强大之处让它被用于各个行业。# 5.实例项目分析下面给出一个博主做过的... 医生可以通过查看和分析结果并结合自己的专业知识和经验,做出准确的诊断。将结果与其他医疗数据进行比较,或者使用其他高级分析技术来提高诊断的准确性和可靠性。infoq原文链接:[边缘智变:深度学习引领下的新一代...
特惠活动
深度学习的框架和实例-优选内容
深度学习的框架和实例-相关内容
GPU实例部署paddlepaddle-gpu环境
本文介绍 GPU 实例部署深度学习Paddle环境。 前言 在ECS GPU实例上部署深度学习Paddle环境。 关于实验 预计实验时间:20分钟级别:初级相关产品:ECS受众: 通用 环境说明 本文测试规格如下:实例规格:ecs.pni2.3xlargeGPU 类型:Tesla A100 80G显存容量:81920MiB实例镜像:velinux - 1.0 with GPU DriverNVIDIA-SMI:470.57.02NVIDIA Driver version:470.57.02CUDA version:11.4CUDA Toolkit version:11.2Python version:Python 3.7.3pa...
边缘智变:深度学习引领下的新一代计算范式|社区征文
提高工作效能和产品质量。同时,边缘计算可用于进行灵便制造,快速调整加工过程,以满足市场需求。上述只是常见的一些应用场景,边缘计算的强大之处让它被用于各个行业。# 5.实例项目分析下面给出一个博主做过的... 医生可以通过查看和分析结果并结合自己的专业知识和经验,做出准确的诊断。将结果与其他医疗数据进行比较,或者使用其他高级分析技术来提高诊断的准确性和可靠性。infoq原文链接:[边缘智变:深度学习引领下的新一代...
官方模型概览
用于在图像或视频中准确地检测和定位人脸的位置,实现实时的人脸检测和跟踪。 人脸检测-02-BlazeFace-ONNX ONNX 物体检测 一种使用 PaddlePaddle 深度学习框架和 Blazeface 算法进行训练的人脸检测模型,用于在图像或视频中快速、准确地检测和定位人脸的位置。 YOLOX-Tiny-Python-后处理 Python 其他 模型组合(即自定义的 Ensemble 模型)中后处理部分的示例。 COCO物体检测-02-YOLOX-Tiny-ONNX ONNX 物体检测 一种使用...
AI安全技术总结与展望| 社区征文
PyTorch等深度学习框架存在若干漏洞;数据安全,如数据丢失或者变形、噪声数据干扰人工智能研判结果;算法安全,如难以保证算法的正确性,对抗样本、自动驾驶中的安全事故等;模型安全,如模型窃取或者模型污染,从而植入后门。人工智能衍生安全主要指由于AI本身的缺陷或者脆弱性给其他领域带来安全问题,比如人工智能应用于黑产。# 2. AI安全应用 目前,人工智能与网络安全结合的案例逐渐增多。 在恶意软件防御场景中,可提取恶...
字节跳动 EB 级 Iceberg 数据湖的机器学习应用与优化
在传统的机器学习中,特征工程是非常重要的一环,通常需要大量的人工、时间和精力来处理数据和特征。而随着深度学习的发展,我们可以利用深度学习的特征提取能力,通过简单的数据处理步骤自动学习特征,甚至可以将过程简化为在待调研的原始特征中往一张样本表格里加列的操作后利用深度学习框架自动学习和提取信息。 总体来说字节跳动的机器学习和训练样本在其业务中发挥着重要作用。通过建立强大的训练平台、积累海量的训练样本...
GPU-部署Baichuan大语言模型
CUDNN:深度神经网络库,用于实现高性能GPU加速。本文以8.5.0.96为例。 运行环境:Transformers:一种神经网络架构,用于语言建模、文本生成和机器翻译等任务。深度学习框架。本文以4.30.2为例。 Pytorch:开源的Python机器学习库,实现强大的GPU加速的同时还支持动态神经网络。本文以2.0.1为例。 Anaconda:获取包且对包能够进行管理的工具,包含了Conda、Python在内的超过180个科学包及其依赖项,用于创建Python虚拟环境。本文以Anacon...
GPU-使用Llama.cpp量化Llama2模型
文本生成和机器翻译等任务。深度学习框架。本文以4.30.2为例。 Pytorch:开源的Python机器学习库,实现强大的GPU加速的同时还支持动态神经网络。本文以2.0.1为例。 Python:执行Llama.cpp的某些脚本所需的版本。本文以Python 3.8为例。 使用说明下载本文所需软件需要访问国外网站,建议您增加网络代理(例如FlexGW)以提高访问速度。您也可以将所需软件下载到本地,再上传到GPU实例中,具体请参考本地数据上传。 操作步骤步骤一:准备...
搭建Llama-2-7b-hf模型进行推理
在CPU X86平台上的部署提供了一种深度优化的解决方案。支持多CPU节点之间的分布式部署方案,使得超大模型在CPU上的部署成为可能。此外,xFasterTransformer提供了C++和Python两种API接口,涵盖了从上层到底层的接口调用,易于用户使用并将xFasterTransformer集成到自有业务框架中。更多信息,可查看xFasterTransformer。 oneCCLoneCCL(One Collective Communication Library)是Intel®推出的一种集体通信库,旨在为分布式深度学习训练提...
风起云涌的2023年,异彩纷呈的AI世界 | 社区征文
大模型突破了过去深度学习的框架,构建了一套从思维链到思维算法的推理技术和强大的自然语言理解能力,可以让智能体拥有更强大的学习和迁移能力,从而可以创建更具智能性、更实用的智能体,开创了人机交互的新范式。在大模型的风潮下,今年也产生了很多新兴的优秀智能体。例如游戏领域小助手英伟达 Voyager 智能体、协助人们完成日常任务的 AI 助理 HyperWrite,以及专注于提供个人情感陪伴的 Pi 助手等。大模型是如何影响智能体的...
