Ex-pesquisador da OpenAI lança protótipo Flipbook: ignorar HTML, usar modelo de vídeo de IA para gerar diretamente cada pixel

robot
Geração de resumo em curso
ME News, 23 de abril (UTC+8), segundo a monitorização da Beating, o ex-investigador da OpenAI Zain Shah e a sua equipa lançaram o Flipbook, um protótipo experimental que gera diretamente píxeis de ecrã com modelos de IA, substituindo tecnologias web tradicionais como HTML, CSS, etc. Cada «página» que o utilizador vê é uma imagem gerada por IA. Clicar em qualquer área da imagem gera uma nova imagem para continuar a explorar. Toda a interface não tem código HTML, nem ligações fixas, nem botões predefinidos, e até o texto é composto por píxeis na imagem. O modo de vídeo baseia-se no modelo de vídeo de difusão (DiT) de código aberto LTX Studio da empresa israelita Lightricks, otimizado para transmissão em tempo real via WebSocket para o ecrã do utilizador a 1080p 24fps, com o backend a utilizar servidores GPU sem servidor da Modal Labs. Shah afirma que atualmente o Flipbook tem funcionalidades limitadas, e a equipa desenhou-o em torno da explicação visual, mas mostra uma direção maior: à medida que os modelos se tornam mais precisos e com mais estado, no futuro poderá expandir-se para UIs estruturadas, incluindo cenários de programação. Shah trabalhou anteriormente na OpenAI em investigação sobre IA e robótica, depois foi especialista em tecnologia criativa na Samsung, e é também alumni do YC S13. A equipa inclui ainda o ex-engenheiro da Humane e Slack Eddie Jiao, e o ex-engenheiro da Apple Drew O'Carr. (Fonte: BlockBeats)
Ver original
Esta página pode conter conteúdos de terceiros, que são fornecidos apenas para fins informativos (sem representações/garantias) e não devem ser considerados como uma aprovação dos seus pontos de vista pela Gate, nem como aconselhamento financeiro ou profissional. Consulte a Declaração de exoneração de responsabilidade para obter mais informações.
  • Recompensa
  • Comentar
  • Republicar
  • Partilhar
Comentar
Adicionar um comentário
Adicionar um comentário
Nenhum comentário
  • Fixado