NVIDIA випустила посібник з побудови локального ізольованого AI-помічника на основі NemoClaw

robot
Генерація анотацій у процесі
ME News Новини, 18 квітня (UTC+8), NVIDIA нещодавно опублікувала технічний посібник, який навчає розробників, як створити безпечного, довгострокового та повністю локального автономного AI-асистента. Цей посібник базується на відкритому стеку NVIDIA NemoClaw, який інтегрує безпечний час виконання OpenShell та самостійний шлюз OpenClaw, з метою вирішення проблем конфіденційності даних та контролю при розгортанні AI-агентів у сторонніх хмарах. Посібник детально демонструє кроки розгортання на системі NVIDIA DGX Spark (GB10), включаючи налаштування середовища, локальну модель сервісу, встановлення стеку та підключення до Telegram. Розгортання вимагає виконання певних апаратних (DGX Spark з Ubuntu 24.04 LTS), програмних (Docker 28.x+, Ollama) та створення токена Telegram-бота передумов. Очікуваний час активної роботи становить 20-30 хвилин, додатково 15-30 хвилин — початкове завантаження моделі (приблизно 87 ГБ). Основні компоненти включають NemoClaw, OpenShell, OpenClaw, Nemotron 3 Super 120B LLM та розгортання для NIM або Ollama для inference. У статті також зазначено, що хоча OpenShell забезпечує потужну ізоляцію, жоден пісочниця не може надати повного захисту від складних інжекцій підказок, тому рекомендується розгортати нові інструменти у ізольованих системах під час тестування. (Джерело: InFoQ)
Переглянути оригінал
Ця сторінка може містити контент третіх осіб, який надається виключно в інформаційних цілях (не в якості запевнень/гарантій) і не повинен розглядатися як схвалення його поглядів компанією Gate, а також як фінансова або професійна консультація. Див. Застереження для отримання детальної інформації.
  • Нагородити
  • 12
  • 3
  • Поділіться
Прокоментувати
Додати коментар
Додати коментар
AutumnTranquility
· 2год тому
Локальне розгортання 87 ГБ моделі, відеокарта горить.
Переглянути оригіналвідповісти на0
QuietAirdropper
· 13год тому
OpenShell+OpenClaw ця комбінація звучить досить круто
Переглянути оригіналвідповісти на0
GateUser-94818fd0
· 13год тому
87GB завантаження відлякує, чи є легкий варіант рішення?
Переглянути оригіналвідповісти на0
Salt-BakedBabyPotatoes
· 13год тому
NemoClaw відкритий код отримав хороші відгуки, повернуся до вивчення коду
Переглянути оригіналвідповісти на0
TheSkyInsideTheMirroredSphere
· 13год тому
Чи є у вас фактичні дані щодо стабільності довгострокового розгортання?
Переглянути оригіналвідповісти на0
AuroraSnowyWildernessSolitary
· 13год тому
Чи можете ви детальніше пояснити ту частину про токен Telegram-бота?
Переглянути оригіналвідповісти на0
ProofOfSnack
· 13год тому
Без пісочниці повністю захищає від складних ін'єкцій підказок — цю фразу варто запам'ятати.
Переглянути оригіналвідповісти на0
GateUser-953e1a14
· 13год тому
Попередження про ін'єкцію підказки дуже важливе, безпека — перш за все
Переглянути оригіналвідповісти на0
Don'tCallMeABagHolder.
· 13год тому
Ubuntu 24.04 щойно вийшов — і вже в тренді
Переглянути оригіналвідповісти на0
SeaSaltMarketMakingNotes
· 13год тому
Docker 28.x вимагає досить нове, старе середовище потрібно оновити
Переглянути оригіналвідповісти на0
Дізнатися більше
  • Закріплено