Підтримує 3500 мовних пар! Alibaba випустила першу візуально покращену велику модель синхронного перекладу Qwen3.5-LiveTranslate

robot
Генерація анотацій у процесі
AIMPACT повідомляє, 20 травня (UTC+8), за даними моніторингу Dongcha Beating, системи синхронного перекладу еволюціонують від монотонного голосового перекладу до повномодальних цифрових перекладачів, які можуть розуміти відео та клонувати голоси.
19 травня лабораторія Alibaba Tongyi офіційно оголосила про запуск нової великої моделі реального часу для аудіо та відео синхронного перекладу Qwen3.5-LiveTranslate, яка значно розширює можливості синхронного перекладу до понад 3500 мовних пар, а також вперше підтримує клонування голосу в реальному часі, налаштування гарячих слів та візуальне розуміння.
Нова модель базується на архітектурі Qwen3.5-Omni і вже підтримує розуміння та написання 60 мовами, а також голосовий вивід 29 мовами.
На відміну від традиційного програмного забезпечення для синхронного перекладу, яке лише слухає голос, нова модель впроваджує візуальний контекст у реальному часі для усунення семантичної неоднозначності.
Наприклад, коли у відео з'являється певна маска, система може, поєднуючи візуальні особливості, точно розрізнити в англійській мові медичну маску та маску для маскараду, тим самим компенсуючи відсутність аудіоінформації.
Для усунення спотворень транскрипції, спричинених шумом та акцентами, нова модель також впроваджує механізм динамічного впровадження гарячих слів.
Причина дуже проста: користувач може безпосередньо вказувати конкретні імена, бренди або галузеві терміни в потоці перекладу, примусово фіксуючи правильний переклад, щоб уникнути зміщення власних назв під час синхронного перекладу.
Під час міжмовного синхронного перекладу модель також підтримує клонування голосу в реальному часі, здатне відтворювати тембр та інтонацію оригінального голосу мовця в потоці синхронного перекладу.
Наразі нова модель вже доступна на платформі досвіду Qwen Omni, а в майбутньому API з'явиться на платформі Alibaba Cloud Bailian.
(Джерело: BlockBeats)
Переглянути оригінал
Ця сторінка може містити контент третіх осіб, який надається виключно в інформаційних цілях (не в якості запевнень/гарантій) і не повинен розглядатися як схвалення його поглядів компанією Gate, а також як фінансова або професійна консультація. Див. Застереження для отримання детальної інформації.
  • Нагородити
  • Прокоментувати
  • Репост
  • Поділіться
Прокоментувати
Додати коментар
Додати коментар
Немає коментарів
  • Закріплено