L'équipe ByteDance fait vraiment quelque chose avec l'Agent GUI, ouvrir OpenGUI en open source est une étape assez intelligente, d'abord poser les bases.

Le site Web de Coinjie annonce que la plateforme d'exécution d'agents d'interface utilisateur graphique (GUI Agent) du système Byte, Core-Mate, a récemment terminé un financement de plusieurs dizaines de millions de RMB, cette levée de fonds étant exclusivement investie par Dunhong Asset, dont le partenaire Yu Wenchao a dirigé. Les fonds seront principalement utilisés pour la mise à niveau des technologies de base, l'itération des capacités de perception visuelle UI spécifiques aux appareils mobiles, ainsi que pour l'expansion de la base d'utilisateurs. Core-Mate adopte une méthode de compréhension d'interface multi-source fusionnée, combinant la perception visuelle, l'arbre DOM, la hiérarchie des contrôles, la segmentation régionale et la dynamique des changements d'état de la page, afin de construire une capacité de reconnaissance sémantique d'écran plus stable. Le cadre de perception d'écran de base OpenGUI, qui est open source pour les développeurs, fournit des infrastructures fondamentales telles que l'exécution de tâches, l'enregistrement de processus et l'automatisation QA. L'équipe fondatrice provient principalement de ByteDance, et l'équipe pense que la clé des applications commerciales de l'IA réside dans l'entrée dans des environnements d'affaires réels, permettant aux utilisateurs d'exécuter de manière stable des opérations longues et complexes.