Alibaba annonce des brevets relatifs aux modèles de langage génératifs

L’application Qichacha indique qu’au cours de la récente période, Alibaba (China) Co., Ltd. a déposé une demande de publication pour un brevet intitulé « Modèle de langage génératif, méthode d’entraînement, dispositif, appareil électronique et support de stockage ». Le résumé du brevet montre que la demande concerne un modèle de langage génératif comprenant : N nœuds sémantiques prédéfinis ainsi qu’un module de génération de texte, chaque nœud sémantique étant associé à un rôle spécifique. Parmi eux : le nœud sémantique initial situé à la position de départ reçoit un mot-clé cible fourni par l’utilisateur et génère un contenu sémantique lié au rôle qui lui est assigné ; le nœud sémantique intermédiaire situé au milieu, en fonction du rôle qui lui est attribué, reçoit la sortie sémantique des nœuds sémantiques précédents pertinents et génère un contenu sémantique lié à son rôle ; le nœud sémantique final situé à la fin reçoit la sortie sémantique des nœuds précédents pertinents et génère une information de guidage sous forme sémantique ; le module de génération de texte produit une réponse sémantique cible en se basant sur le mot-clé cible et en suivant les instructions de l’information de guidage. Cette demande résout dans une large mesure le problème d’explicabilité des modèles de langage génératif, ce qui est d’une grande importance pour leur application dans des contextes nécessitant une haute précision de l’information. (People’s Financial News)