NVIDIA publie un tutoriel pour construire un assistant IA local en sandbox basé sur NemoClaw

robot
Création du résumé en cours
ME News Actualités, le 18 avril (UTC+8), NVIDIA a récemment publié un tutoriel technique guidant les développeurs sur la façon de construire un assistant IA autonome sécurisé, fonctionnant en continu et entièrement local. Ce tutoriel est basé sur la pile de référence open source de NVIDIA, NemoClaw, qui intègre OpenShell Runtime sécurisé et OpenClaw Gateway auto-hébergé, visant à résoudre les risques de confidentialité des données et de contrôle lors du déploiement d'agents IA sur des clouds tiers. Le tutoriel détaille les étapes de déploiement sur le système NVIDIA DGX Spark (GB10), y compris la configuration de l'environnement, le modèle de service local, l'installation de la pile et la connexion à Telegram. Le déploiement nécessite de satisfaire à des prérequis matériels spécifiques (DGX Spark fonctionnant sous Ubuntu 24.04 LTS), logiciels (Docker 28.x+ , Ollama) ainsi que la création d’un jeton de bot Telegram. La durée d'intervention active est estimée à 20-30 minutes, plus 15-30 minutes pour le téléchargement initial du modèle (environ 87 Go). Les composants clés incluent NemoClaw, OpenShell, OpenClaw, Nemotron 3 Super 120B LLM ainsi que le déploiement d'inférence NIM ou Ollama. L’article indique également que, bien qu’OpenShell offre de puissantes fonctionnalités d’isolation, aucun sandbox ne peut offrir une protection complète contre les injections de prompts avancés, et il est conseillé de déployer ces outils dans un système isolé lors des tests. (Source : InFoQ)
Voir l'original
Cette page peut inclure du contenu de tiers fourni à des fins d'information uniquement. Gate ne garantit ni l'exactitude ni la validité de ces contenus, n’endosse pas les opinions exprimées, et ne fournit aucun conseil financier ou professionnel à travers ces informations. Voir la section Avertissement pour plus de détails.
  • Récompense
  • 6
  • 1
  • Partager
Commentaire
Ajouter un commentaire
Ajouter un commentaire
TreatEarningsAsSnacks
· Il y a 1h
OpenShell+OpenClaw, ce nom de combinaison est un peu adolescent, mais la pile technologique semble solide
Voir l'originalRépondre0
ChaintraceAuntie
· Il y a 3h
Nemotron 3 Super 120B local, enfin plus besoin de regarder le quota API à la tête.
Voir l'originalRépondre0
PixelPnl
· Il y a 3h
Plan de déploiement à long terme + conception de forte isolation, cette configuration convient aux équipes ayant des exigences élevées en matière de confidentialité
Voir l'originalRépondre0
GateUser-4bd1cc87
· Il y a 3h
L'étape du jeton du bot Telegram peut facilement poser problème, n'oubliez pas de ne pas uploader le fichier .env sur GitHub
Voir l'originalRépondre0
LeverageWithdrawalInProgress
· Il y a 3h
L'avertissement d'injection de prompt est très bien rédigé, l'absence de sandbox est parfaite, la conscience de la sécurité est bien en place
Voir l'originalRépondre0
ForkInTheRoadmap
· Il y a 3h
NVIDIA DGX Spark exécute 120 milliards, cette configuration est un peu trop élevée, les joueurs ordinaires ne peuvent que regarder.
Voir l'originalRépondre0
  • Épinglé