专栏名称: 吃果冻不吐果冻皮
专注于AI工程化(LLM、MLOps、LLMOps、RAG、Agent)落地。
目录
相关文章推荐
北京大学中国古代史研究中心  ·  中古史荐读|荣新江:悼念项楚先生——中国敦煌 ... ·  昨天  
历史地理研究资讯  ·  秦磊:清代云南科举宾兴与边疆文教治理 ·  5 天前  
51好读  ›  专栏  ›  吃果冻不吐果冻皮

英伟达市值全球第一,基于TensorRT的大模型推理加速功不可没

吃果冻不吐果冻皮  · 公众号  ·  · 2024-06-19 22:32

正文

6月19日凌晨1点01分,人工智能芯片巨头英伟达市值周二盘中达到3.33万亿美元,超越微软成为全球市值最高的公司。随着人工智能术的快速发展,市场对高性能人工智能芯片的需求激增,加之英伟达的GPU在人工智能训练和推理任务中表现出色,迅速占据了市场主导地位。

以Transformer为基础架构的ChatGPT等大模型的出现,再一次推起人工智能的浪潮。 企业在招聘AI算法工程师时,开始要求应聘者需要掌握当下深度学习加速必备的 CUDA编程 ,并且需要熟练掌握当下主流的加速工具 TensorRT模型 的使用技巧。

然而学习 TensorRT推理 并不容易,尽管NVIDIA推出了 TensorRT 相关文档,但是这些文档对新入门的小伙伴并不友好,很多人反映自己想学习 TensorRT ,但是苦于学习起来效率太低,只好遗憾放弃。

基于此,深蓝学院与前腾讯高级研究员一起研发了 深度神经网络加速:cuDNN 与 TensorRT 课程,细致讲解cuDNN、TensorRT这两个当下最热门的深度神经网络加速的工具。

扫码添加
了解具体详情

以下附上部分课程 预览:

(编译TRT git源码sampleMNIST)




0 1
师资力量
杨伟光 ,前腾讯高级研究员,大连理工大学硕士
毕业后一直在腾讯从事语音领域深度学习加速上线工作。近10年 CUDA 开发经验, 近5年 TensorRT 开发经验;
Github TensorRT_Tutorial 作者。

0 2
课程大纲


0 3
课程优势

1. 内容精简: 主讲 TensorRT 核心的并行运算操作

2 . 知识前沿: 本期课程涵盖当下主流的深度学习模型加速工具

3. 氛围活跃: 与数百位同学共同交流学习

04
适合人群






请到「今天看啥」查看全文