NVIDIA publie un tutoriel pour construire un assistant IA local sandbox basé sur NemoClaw

robot
Création du résumé en cours
ME News Actualités, le 18 avril (UTC+8), NVIDIA a récemment publié un tutoriel technique guidant les développeurs sur la façon de construire un assistant IA autonome sécurisé, fonctionnant en permanence et entièrement local. Ce tutoriel est basé sur la pile de référence open source de NVIDIA, NemoClaw, qui intègre OpenShell Runtime sécurisé et OpenClaw Gateway auto-hébergé, visant à résoudre les risques de confidentialité des données et de contrôle lors du déploiement d'agents IA sur des clouds tiers. Le tutoriel détaille les étapes de déploiement sur le système NVIDIA DGX Spark (GB10), y compris la configuration de l'environnement, le modèle de service local, l'installation de la pile et la connexion à Telegram. Le déploiement nécessite de satisfaire à des prérequis matériels spécifiques (DGX Spark fonctionnant sous Ubuntu 24.04 LTS), logiciels (Docker 28.x+ , Ollama) ainsi que la création d'un jeton de bot Telegram. La durée d'intervention active est estimée à 20-30 minutes, plus 15-30 minutes pour le téléchargement initial du modèle (environ 87 Go). Les composants clés incluent NemoClaw, OpenShell, OpenClaw, Nemotron 3 Super 120B LLM ainsi que le déploiement d'inférence NIM ou Ollama. L'article indique également que, bien qu'OpenShell offre de puissantes fonctionnalités d'isolation, aucun sandbox ne peut offrir une protection complète contre les injections de prompts avancés, et il est conseillé de déployer ces outils dans un système isolé lors des tests. (Source : InFoQ)
NVDA-1,54%
Voir l'original
Cette page peut inclure du contenu de tiers fourni à des fins d'information uniquement. Gate ne garantit ni l'exactitude ni la validité de ces contenus, n’endosse pas les opinions exprimées, et ne fournit aucun conseil financier ou professionnel à travers ces informations. Voir la section Avertissement pour plus de détails.
  • Récompense
  • 7
  • Reposter
  • Partager
Commentaire
Ajouter un commentaire
Ajouter un commentaire
0XsundayCook
· Il y a 2h
Le design du jeton de bot Telegram est bon, il permet de régler son IA à tout moment et en tout lieu.
Voir l'originalRépondre0
TheFeelingOfEthInTheSeaBreeze
· Il y a 2h
Le test du système d'isolation est une recommandation très importante, ne pas faire n'importe quoi sur la machine principale
Voir l'originalRépondre0
LiquidityTeaMaster
· Il y a 2h
NemoClaw ce nom est assez intéressant, la combinaison d'OpenShell + OpenClaw sonne très hardcore
Voir l'originalRépondre0
Yield慢炖锅
· Il y a 3h
Pile open source + tutoriel détaillé, un trésor pour les utilisateurs souhaitant se détacher des services cloud
Voir l'originalRépondre0
NFTeaTime
· Il y a 3h
Nemotron 3 Super 120B local, la confidentialité est vraiment bien meilleure que celle du cloud
Voir l'originalRépondre0
BluePeonyDarkroom
· Il y a 3h
Déployer en 20-30 minutes est assez rapide, mais le temps de téléchargement du modèle est à part, il faut planifier à l'avance
Voir l'originalRépondre0
ForkliftTrader
· Il y a 3h
Ubuntu 24.04 + Docker 28.x,les exigences de l'environnement sont assez récentes, les anciennes machines devront peut-être être mises à jour d'abord
Voir l'originalRépondre0
  • Épinglé