Поддерживает 3500 языковых пар! Alibaba выпускает первую визуально усиленную модель синхронного перевода Qwen3.5-LiveTranslate.

robot
Генерация тезисов в процессе
AIMPACT сообщение, 20 мая (UTC+8), по данным мониторинга Beating, система синхронного перевода эволюционирует от монотонного голосового перевода к полномодальному цифровому переводчику, способному понимать изображения и клонировать человеческий голос. 19 мая лаборатория Alibaba Tongyi официально объявила о запуске новой модели синхронного аудио-видео перевода нового поколения Qwen3.5-LiveTranslate, которая значительно расширяет возможности синхронного перевода до более чем 3500 языковых пар, а также впервые поддерживает клонирование голоса в реальном времени, настройку пользовательских ключевых слов и визуальное понимание. Новая модель основана на архитектуре Qwen3.5-Omni и теперь поддерживает понимание и письмо на 60 языках, а также голосовой вывод на 29 языках. В отличие от традиционного программного обеспечения для синхронного перевода, которое воспринимает только звук, новая модель использует контекст реального времени для устранения семантической неоднозначности. Например, когда на видео появляется определённая маска, система может, используя визуальные признаки, точно различать на английском языке медицинскую маску и маскарадную маску, тем самым компенсируя недостаток звуковой информации. Для устранения ошибок транскрипции, вызванных шумом и акцентом, новая модель также вводит механизм динамической вставки ключевых слов. Причина проста: пользователь может напрямую указать конкретные имена людей, бренды или отраслевые термины в потоке перевода, принудительно фиксируя правильный перевод, чтобы избежать дрейфа имён собственных при синхронном переводе. При межъязыковом синхронном переводе модель также поддерживает клонирование голоса в реальном времени, позволяя воспроизводить тембр и интонацию говорящего в реальном времени в потоке синхронного перевода. В настоящее время новая модель доступна на платформе для экспериментов Qwen Omni, а в будущем API будет доступен на платформе Alibaba Cloud Bailian. (Источник: BlockBeats)
Посмотреть Оригинал
На этой странице может содержаться сторонний контент, который предоставляется исключительно в информационных целях (не в качестве заявлений/гарантий) и не должен рассматриваться как поддержка взглядов компании Gate или как финансовый или профессиональный совет. Подробности смотрите в разделе «Отказ от ответственности» .
  • Награда
  • комментарий
  • Репост
  • Поделиться
комментарий
Добавить комментарий
Добавить комментарий
Нет комментариев
  • Закреплено