Un ancien chercheur d'OpenAI publie un prototype Flipbook : sautez le HTML, utilisez un modèle vidéo IA pour générer directement chaque pixel.

robot
Création du résumé en cours
ME News Message, 23 avril (UTC+8), selon le monitoring de Beating, l'ancien chercheur d'OpenAI Zain Shah et son équipe ont dévoilé Flipbook, un prototype expérimental qui génère directement les pixels de l'écran à l'aide d'un modèle d'IA, remplaçant les technologies web traditionnelles comme HTML, CSS. Chaque « page » vue par l'utilisateur est une image générée par l'IA ; cliquer sur n'importe quelle zone de l'image génère une nouvelle image pour approfondir. L'ensemble de l'interface est sans code HTML, sans liens fixes, sans boutons prédéfinis, et même le texte est composé de pixels dans l'image. Le mode vidéo est basé sur le modèle de génération vidéo DiT (Diffusion Transformer) open source LTX Studio de la société israélienne Lightricks, optimisé pour diffuser en continu en temps réel à 1080p 24fps via WebSocket vers l'écran de l'utilisateur, avec le backend utilisant les GPU sans serveur de Modal Labs. Shah a déclaré que les fonctionnalités actuelles de Flipbook sont limitées, l'équipe concevant autour de l'explication visuelle, mais cela montre une direction plus large : à mesure que les modèles deviennent plus précis et plus étatiques, ils pourront à l'avenir s'étendre à des UI structurées, y compris des scénarios de programmation. Shah a travaillé chez OpenAI sur l'IA et la robotique, puis a été expert en technologies créatives chez Samsung, et est également un ancien élève de YC S13. L'équipe comprend également Eddie Jiao, ancien ingénieur chez Humane et Slack, et Drew O'Carr, ancien ingénieur chez Apple. (Source : BlockBeats)
Voir l'original
Cette page peut inclure du contenu de tiers fourni à des fins d'information uniquement. Gate ne garantit ni l'exactitude ni la validité de ces contenus, n’endosse pas les opinions exprimées, et ne fournit aucun conseil financier ou professionnel à travers ces informations. Voir la section Avertissement pour plus de détails.
  • Récompense
  • Commentaire
  • Reposter
  • Partager
Commentaire
Ajouter un commentaire
Ajouter un commentaire
Aucun commentaire