什么是推理系统?推理有哪些应用?【推理系统】系列01篇

1.0万
2
2023-01-08 12:08:52
253
178
295
48
【推理系统】系列01篇:什么是推理系统?推理有哪些应用? 推理系统包括服务平台内容、推理引擎、模型小型化、量化压缩、推理优化等众多内容。推理系统的第一篇将会给大家全面介绍未来要汇报的内容,还有从推理应用入手,快速全面地从业务了解整个推理系统。
昇腾招人,已经毕业的快联系鸭

一款好用到爆的AI搜索工具!

4.0万播放 icon 简介
《推理系统》推理系统是本分享的重点概述,推理就是在训练好的模型结构和参数基础上,执行前向传播得到模型输出的过程。相对于训练而言,推理不涉及梯度和损失优化。推理的最终目标是将训练好的模型部署生产环境中,真正让 AI 能够运用起来。推理引擎可以将深度学习模型部署到云(Cloud)端或者边缘(Edge)端,并服务用户的请求。模型训练过程好比是传统软件工程中的代码开发的过程,而开发完的代码势必要打包,部署给用户使用,那么推理系统就负责应对模型部署的生命周期中遇到的挑战和问题。
01 推理系统内容介绍
08:23
02 什么是推理系统
17:03
03 推理流程全景
12:55
04 推理系统架构
14:25
05(上) 推理引擎架构
12:47
05(下) 推理引擎架构
14:15
客服
顶部
赛事库 课堂 2021拜年纪