NVIDIA выпустила руководство по созданию локального изолированного AI-ассистента на базе NemoClaw

robot
Генерация тезисов в процессе
ME News Новости, 18 апреля (UTC+8), NVIDIA недавно выпустила техническое руководство, в котором объясняется, как разработчикам создать безопасного, долговечно работающего и полностью локального автономного AI-ассистента. Это руководство основано на открытом исходном коде NVIDIA NemoClaw, который включает безопасный среда выполнения OpenShell и самоуправляемый шлюз OpenClaw, предназначенные для решения проблем конфиденциальности данных и контроля при развертывании AI-агентов на сторонних облаках. Руководство подробно демонстрирует шаги развертывания на системе NVIDIA DGX Spark (GB10), включая настройку окружения, локальную модель сервиса, установку стека и подключение к Telegram. Развертывание требует выполнения определённых условий по аппаратному обеспечению (DGX Spark с Ubuntu 24.04 LTS), программному обеспечению (Docker 28.x+ и Ollama), а также созданию токена для Telegram-бота. Предполагаемое время активных действий — 20-30 минут, плюс 15-30 минут на первоначальную загрузку модели (около 87 ГБ). Основные компоненты включают NemoClaw, OpenShell, OpenClaw, Nemotron 3 Super 120B LLM и развертывание для inference с помощью NIM или Ollama. В статье также отмечается, что несмотря на мощные изоляционные возможности OpenShell, ни один песочница не обеспечивает полной защиты от продвинутых методов внедрения подсказок, и рекомендуется запускать новые инструменты в изолированных системах во время тестирования. (Источник: InFoQ)
Посмотреть Оригинал
На этой странице может содержаться сторонний контент, который предоставляется исключительно в информационных целях (не в качестве заявлений/гарантий) и не должен рассматриваться как поддержка взглядов компании Gate или как финансовый или профессиональный совет. Подробности смотрите в разделе «Отказ от ответственности» .
  • Награда
  • 7
  • 1
  • Поделиться
комментарий
Добавить комментарий
Добавить комментарий
GateUser-26f91b48
· 9ч назад
Долгосрочная безопасная развертка этого преимущества зацепила меня, всегда боюсь утечки данных при использовании облачных API
Посмотреть ОригиналОтветить0
FomoLibrarian
· 11ч назад
OpenShell + OpenClaw Эта комбинация звучит как киберпанковский арсенал
Посмотреть ОригиналОтветить0
0xLateDiner
· 11ч назад
Требования к окружению Ubuntu 24.04 + Docker 28.x подробно описаны, что удобно для новичков
Посмотреть ОригиналОтветить0
PixelUniverseCat
· 12ч назад
Тестирование изоляционной системы — это минимум, раньше я видел слишком много случаев сбоя локальных ИИ
Посмотреть ОригиналОтветить0
GasFeeAnxiety
· 12ч назад
Nemotron 3 Super 120B локально запускается, это, наверное, самая большая модель, с которой можно поиграть в потребительском сегменте, да?
Посмотреть ОригиналОтветить0
MempoolDaydream
· 12ч назад
87GB модель для скачивания отговаривает, но локальный запуск 120B действительно приятен
Посмотреть ОригиналОтветить0
SushiSlippage
· 12ч назад
Без песочницы полностью защититься от продвинутых инъекций подсказок — это очень важное напоминание, опытные участники сферы безопасности понимают это.
Посмотреть ОригиналОтветить0
  • Закреплено