专栏名称: 环球老虎财经app
让你成为战胜市场的人
目录
相关文章推荐
河南省发改委  ·  服务供给开新篇②|千年窑烟今又起,“国潮”绞 ... ·  15 小时前  
河南省发改委  ·  服务供给开新篇②|千年窑烟今又起,“国潮”绞 ... ·  15 小时前  
江西检察  ·  好戏再唱 ·  23 小时前  
新声Pro  ·  我们与鬼神的距离 ·  昨天  
新声Pro  ·  我们与鬼神的距离 ·  昨天  
51好读  ›  专栏  ›  环球老虎财经app

DeepSeek获英伟达认可,R1模型上线NIM平台

环球老虎财经app  · 公众号  ·  · 2025-02-01 14:39

正文

文章转载至中国基金报,作者含章
DeepSeek R1正式上线英伟达NIM平台。

1月31日, 英伟达官宣,DeepSeek-R1模型已作为NVIDIA NIM微服务预览版,在英伟达面向开发者的网站上发布。

据介绍,DeepSeek-R1 NIM微服务在单个英伟达HGX H200系统上,每秒最多可处理3872个Token。 英伟达方面介绍称,DeepSeek-R1模型是最先进、高效的大型语言模型,在推理、数学和编码方面表现出色。

图片来自英伟达官网

英伟达平台

上线DeepSeek

1月31日,英伟达官网发布消息显示,DeepSeek-R1是一款具有先进推理能力的开源模型。与直接提供答案不同,像DeepSeek-R1这样的推理模型会对一个问题进行多次推理,通过思维链、共识和搜索方法来生成最佳答案。

英伟达称,执行这一系列推理过程(使用推理得出最佳答案)称为测试时间扩展。DeepSeek-R1是此扩展定律的完美示例,证明了加速计算对于代理AI推理的需求至关重要。

由于模型可以反复“思考”问题,因此它们会创建更多输出Token和更长的生成周期,模型质量会不断提高。大量的测试时计算对于实现实时推理和来自DeepSeek-R1等推理模型的更高质量响应至关重要,这需要更大规模的推理部署。R1在需要逻辑推理、推理、数学、编码和语言理解的任务中提供了领先的准确性,同时还提供了高推理效率。

英伟达表示,为了帮助开发者安全地实验这些功能并构建自己的专业代理,拥有6710亿参数的DeepSeek-R1模型现已作为NVIDIA NIM微服务预览版在build.nvidia.com上线。 DeepSeek-R1 NIM微服务可以在单个NVIDIA HGX H200系统上实现每秒3872个Token的处理能力。

英伟达称,开发人员可以使用应用程序编程接口(API)进行测试和试验,该接口预计很快将作为可下载的NIM微服务提供,作为NVIDIA AI Enterprise软件平台的一部分。

DeepSeek-R1 NIM微服务通过支持行业标准API来简化部署。企业可以在其首选的加速计算基础设施上运行NIM微服务,以最大化安全性和数据隐私。借助NVIDIA AI Foundry和NVIDIA NeMo 软件,企业还将能够创建定制化的DeepSeek-R1 NIM微服务,用于专业AI代理。

DeepSeek颠覆

全球人工智能市场格局

DeepSeek的爆火,颠覆了全球人工智能市场的格局。北京一位公募人士表示,DeepSeek脱颖而出的原因有两个:一是资金优势。DeepSeek的母公司幻方量化是中国头部量化对冲基金,曾管理资金规模超1000亿元。他们早在2021年便储备了超过1万块英伟达A100/H100 GPU集群,这为其提供了训练大模型所需的硬件基础。这种资源积累使DeepSeek能够绕过传统公司依赖外部融资的瓶颈,专注于长期研发。二是技术理想主义。梁文锋毕业于浙江大学信息工程专业,早期通过量化交易积累资金。他坚信AI将改变世界,坚持将技术成果开源,以推动生态发展。这种非功利性的理念吸引了众多优秀年轻人才加入。







请到「今天看啥」查看全文