Ex-Investigador da OpenAI Lança Protótipo de Flipbook: Geração Direta de Pixels Usando Modelos de Vídeo com IA

De acordo com a monitorização da Beating, o ex-investigador da OpenAI Zain Shah e a sua equipa lançaram o Flipbook, um protótipo experimental que gera diretamente pixels de ecrã usando modelos de IA, substituindo tecnologias web tradicionais como HTML e CSS. Cada ‘página’ visualizada pelos utilizadores é uma imagem gerada por IA, e clicar em qualquer área da imagem gera uma nova imagem para exploração adicional. Toda a interface está livre de código HTML, links fixos e botões predefinidos, com até o texto representado como pixels na imagem. O modo de vídeo baseia-se no modelo de geração de vídeo open-source DiT (Diffusion Transformer) LTX Studio da empresa israelense Lightricks, otimizado para transmitir em 1080p a 24fps para os ecrãs dos utilizadores via WebSocket, com um backend alimentado pelo GPU sem servidor da Modal Labs. Shah mencionou que a funcionalidade atual do Flipbook é limitada, e a equipa está a desenhar em torno de explicações visuais, mas demonstra uma direção mais ampla: à medida que os modelos se tornam mais precisos e com estado, poderá expandir-se para interfaces estruturadas, incluindo cenários de programação. Shah trabalhou anteriormente em investigação de IA e robótica na OpenAI, posteriormente atuou como especialista em tecnologia criativa na Samsung, e também é um ex-aluno do YC S13. Os membros da equipa incluem antigos engenheiros da Humane e Slack, Eddie Jiao, e o antigo engenheiro da Apple, Drew O’Carr.