跳到正文
原文
NVIDIA Developer Blog· Elizabeth Goodman·· 27 天前AI 评分30

NVIDIA Jetson 上如何部署与优化前沿推理模型

Frontier Reasoning Reaches the Edge: How to Deploy and Optimize Models on NVIDIA Jetson

AI 导读

NVIDIA 发布指南,介绍如何在 Jetson 边缘设备上部署和优化具备多步推理能力的模型。此前这类模型因体积过大只能把推理请求回传数据中心,带来网络依赖、成本上升和本地数据外泄风险,这一限制正在被打破。

来源:NVIDIA Developer Blog · developer.nvidia.com