A equipe do ByteDance realmente tem algo com o GUI Agent, essa jogada de abrir o código do OpenGUI é bastante inteligente, primeiro estabelecer a infraestrutura.

Notícia do CoinWorld, a plataforma de execução de agentes de interface gráfica de usuário (GUI Agent) do ByteDance, Core-Mate, recentemente completou uma rodada de financiamento de dezenas de milhões de RMB, liderada exclusivamente pela Dunhong Asset, com o sócio da Dunhong Asset, Yu Wenchao, à frente.
O capital será principalmente utilizado para atualização de tecnologia de base, iteração na capacidade de percepção visual única da interface móvel e expansão de usuários.
Core-Mate adota uma abordagem de compreensão de interface de múltiplas fontes, combinando dinamicamente visão, árvore de nós DOM, níveis de controle, segmentação de áreas e mudanças de estado da página, para construir uma capacidade de reconhecimento de semântica de tela mais estável.
O framework de percepção de tela de baixo nível OpenGUI foi open source para desenvolvedores, oferecendo infraestrutura básica para execução de tarefas, gravação de processos e automação de QA.
A equipe fundadora é principalmente originária do ByteDance, e acredita que o diferencial na aplicação comercial de IA está em entrar em ambientes de negócios reais, executando operações complexas de longo prazo de forma estável para os usuários.