专栏名称: NVIDIA企业开发者社区
NVIDIA 英伟达开发者社区是NVIDIA GPU开发者交流平台,通过此平台可第一时间获取NVIDIA GPU 开发相关的新产品、新工具、线上/线下活动的资讯。
目录
相关文章推荐
会计雅苑  ·  《DeepSeek赋能财务:智能决策与效率提 ... ·  2 天前  
会计雅苑  ·  新兴际华集团更换会计师事务所 ·  4 天前  
心禅道  ·  投资#804 ... ·  3 天前  
心禅道  ·  投资#804 ... ·  3 天前  
51好读  ›  专栏  ›  NVIDIA企业开发者社区

开发者新闻 | 使用新的小型语言模型在 NVIDIA RTX AI PC 上部署代理、助手和化身

NVIDIA企业开发者社区  · 公众号  ·  · 2024-12-31 16:47

正文

使用新的小型语言模型在

NVIDIA RTX AI PC 上部署代理、助手和化身


NVIDIA 刚刚宣布了一系列小型语言模型 (SLM),这些模型增加了数字人类可以用于增强其响应的信息的数量和类型。这包括提供更多相关答案的新大型上下文模型和允许图像作为输入的新多模态模型。这些模型现已作为 NVIDIA ACE 的一部分提供,ACE 是一套数字人类技术,为代理、助手和化身带来生命。


NVIDIA ACE 推出首个多模态 SLM


为了提高数字人类的反应能力,他们必须能够像人类一样吸收更多的世界背景。NVIDIA Nemovision-4B-Instruct 模型是一个小型多模态模型,使数字人类能够理解现实世界中的视觉图像,并在 Windows 桌面上输出相关响应。


该模型使用最新的 NVIDIA VILA 和 NVIDIA NeMo 框架和配方进行提取,修剪和量化,使其足够小,可以在广泛的 NVIDIA RTX GPU 上运行,同时保持开发人员所需的准确性。多模态是代理工作流程的基础,使数字人类能够在几乎没有用户帮助的情况下进行推理和采取行动。




全文链接:

https://developer.nvidia.com/blog/deploy-agents-assistants-and-avatars-on-nvidia-rtx-ai-pcs-with-new-small-language-models/

RAPIDS 24.12 在 PyPI 上引入了 cuDF、

用于 Polar 的 CUDA 统一内存和更快的 GNN



RAPIDS 24.12 将 cuDF 包引入 PyPI,加快了分组聚合和从 AWS S3 读取文件的速度,在 Polars GPU 引擎中实现了大于 GPU 的内存查询,以及在真实图形上更快的训练图形神经网络 (GNN)。

cuDF 和 RMM CUDA 12 软件包现在在 PyPI 上可用

从 RAPIDS 的 24.12 版本开始,rmm、cudf、dask-cudf 的 CUDA 12 版本以及它们的所有依赖项现在都可以在 PyPI 上使用。因此,安装这些库不再需要使用 –extra-index-url 和其他 pip 配置。试试吧:

pip install \
'cudf-cu12==24.12.*' \
'dask-cudf-cu12==24.12.*'\






请到「今天看啥」查看全文