NVIDIA publie un tutoriel pour construire un assistant IA local en sandbox basé sur NemoClaw

robot
Création du résumé en cours
ME News Actualités, le 18 avril (UTC+8), NVIDIA a récemment publié un tutoriel technique guidant les développeurs sur la façon de construire un assistant IA autonome sécurisé, fonctionnant en continu et entièrement local. Ce tutoriel est basé sur la pile de référence open source de NVIDIA, NemoClaw, qui intègre OpenShell Runtime sécurisé et OpenClaw Gateway auto-hébergé, visant à résoudre les risques de confidentialité des données et de contrôle lors du déploiement d'agents IA sur des clouds tiers. Le tutoriel détaille les étapes de déploiement sur le système NVIDIA DGX Spark (GB10), y compris la configuration de l'environnement, le modèle de service local, l'installation de la pile et la connexion à Telegram. Le déploiement nécessite de satisfaire à des prérequis matériels spécifiques (DGX Spark fonctionnant sous Ubuntu 24.04 LTS), logiciels (Docker 28.x+ , Ollama) ainsi que la création d’un jeton de bot Telegram. La durée d’intervention active est estimée à 20-30 minutes, plus 15-30 minutes pour le téléchargement initial du modèle (environ 87 Go). Les composants clés incluent NemoClaw, OpenShell, OpenClaw, Nemotron 3 Super 120B LLM ainsi que le déploiement d’inférence NIM ou Ollama. L’article indique également que, bien qu’OpenShell offre de puissantes fonctionnalités d’isolation, aucun sandbox ne peut offrir une protection complète contre les injections de prompts avancés, recommandant de déployer ces outils dans un système isolé lors des tests. (Source : InFoQ)
Voir l'original
Cette page peut inclure du contenu de tiers fourni à des fins d'information uniquement. Gate ne garantit ni l'exactitude ni la validité de ces contenus, n’endosse pas les opinions exprimées, et ne fournit aucun conseil financier ou professionnel à travers ces informations. Voir la section Avertissement pour plus de détails.
  • Récompense
  • 5
  • 2
  • Partager
Commentaire
Ajouter un commentaire
Ajouter un commentaire
GateUser-26f91b48
· Il y a 2h
Le combo du token du bot Telegram est assez intéressant, interaction à distance + puissance de calcul locale
Voir l'originalRépondre0
PerpNightRunner
· Il y a 2h
Le test du système d'isolation est une recommandation très importante, après tout personne ne souhaite que son environnement principal soit compromis par des injections ou des erreurs.
Voir l'originalRépondre0
GasFeesForNightRuns
· Il y a 2h
Nemotron 3 Super 120B en local, la facture d'électricité pourrait être plus impressionnante que l'API cloud
Voir l'originalRépondre0
WhaleInAGlassBottle
· Il y a 2h
Ubuntu 24.04 + Docker 28.x, les versions requises sont assez récentes, ne vous précipitez pas à tester sur une vieille machine
Voir l'originalRépondre0
ResilientGoldfish
· Il y a 2h
Modèle de 87 Go, le disque dur tremble.
Voir l'originalRépondre0
  • Épinglé