Двусторонний голосовой перевод в Teams, Zoom и других приложениях для встреч
Обзор
Это руководство настраивает настольное приложение Sokuji для видеозвонка с человеком, который говорит на другом языке. Собеседник слышит ваши слова на своём языке. Вы слышите его речь, переведённую на ваш язык и зачитанную вслух, а речь обеих сторон можно читать в виде субтитров. Используется KizunaAI (на базе Soniox); это работает с любым приложением для встреч, в котором можно выбрать микрофон, включая настольные приложения Microsoft Teams и Zoom. Снимки экрана сделаны в Sokuji 0.44.0 на Windows с Microsoft Teams.
1Настройте Sokuji с KizunaAI
Если вы ещё этого не сделали, следуйте руководству «Быстрый старт с KizunaAI», чтобы установить Sokuji и войти в учётную запись.
2Выберите двусторонний сценарий
В мастере настройки выберите Двусторонний онлайн-разговор. Sokuji переходит в режим Оба, произносит ваш перевод во встрече и зачитывает вам перевод собеседника. Если вы уже завершили настройку, вместо этого нажмите Оба в переключателе режимов в левом нижнем углу главного окна. В первый раз появится панель с вопросом, где собеседник: оставьте На встрече. Нажатие «Оба» не включает Перевод, который слышу я; это вы сделаете в шаге 5.
3Задайте два языка
В настройках, в разделе Языки перевода, укажите в поле я говорю на свой язык, а в поле собеседник слышит — язык собеседника. Строка под полями показывает обратное направление: в ней написано «Собеседник говорит на Английский → я читаю Китайский», пока Sokuji не начнёт слушать одно приложение, например Teams (шаг 5), а затем «→ я слышу Китайский», потому что перевод собеседника зачитывается вам вслух. Например, для звонка клиенту из Великобритании: я говорю на китайском, собеседник слышит английский.
Tip
Не оставляйте в поле «я говорю на» значение «Автоопределение». В режиме «Оба» Sokuji должен знать ваш язык, чтобы переводить на него собеседника, и кнопка «Старт» остаётся недоступной, пока вы его не выберете.
4Установите виртуальный аудиокабель
Ваш переведённый голос попадает во встречу через виртуальный микрофон. На Windows это VB-CABLE, бесплатный драйвер. Пока он не установлен, Sokuji при каждом запуске предлагает его установить: нажмите Install Now и перезапустите Windows, если система попросит. После этого Sokuji сам отправляет переведённый голос в VB-CABLE.
Tip
На macOS установщик Sokuji добавляет виртуальный аудиодрайвер, а на Linux Sokuji создаёт собственный виртуальный микрофон. Остальная часть руководства та же.
5Выберите микрофон, приложение для встреч и то, что вы слышите
Там же, в настройках: в разделе Микрофон выберите свой настоящий микрофон. В разделе Аудио собеседника выберите приложение для встреч, здесь Microsoft Teams. Тогда Sokuji слушает только это приложение, и звук других программ не переводится, а собственный голос собеседника вы по-прежнему слышите через Teams, как обычно. В блоке Речь параметр Перевод, который слышит собеседник выводится в виртуальный микрофон, а Перевод, который слышу я зачитывает вам перевод собеседника на устройстве, выбранном рядом с ним. Выключите «Перевод, который слышу я», если хотите только читать перевод.
Tip
Если вашего приложения для встреч нет в списке, сначала подключитесь к звонку (приложение часто появляется в списке только после того, как начнёт воспроизводить звук) и нажмите значок обновления. System Audio (All Applications) тоже подходит, но тогда «Перевод, который слышу я» становится неактивным, чтобы Sokuji не переводил повторно собственный голос: речь собеседника вы только читаете.
6Выберите VB-CABLE как микрофон в приложении для встреч
В Microsoft Teams откройте Настройки → Устройства (Settings → Devices) и выберите в качестве микрофона CABLE Output (VB-Audio Virtual Cable). В Zoom та же настройка находится в разделе Настройки → Звук → Микрофон (Settings → Audio → Microphone). Динамик оставьте на обычной гарнитуре или колонках.
Tip
Настоящий микрофон выбирается в Sokuji, а не в приложении для встреч: Sokuji слушает вас, а приложение для встреч получает только переведённый голос.
7Начните перевод
Нажмите Старт в Sokuji. Когда вы говорите, собеседник слышит ваши слова на своём языке через приложение для встреч, а Sokuji показывает речь обеих сторон в виде субтитров. Когда говорит собеседник, вы слышите его собственный голос через Teams, а затем Sokuji зачитывает вам перевод на вашем языке.
Советы для лучших результатов
- Надевайте наушники. Иначе микрофон улавливает собеседника из динамиков, и Sokuji переводит его так, будто это говорите вы.
- Сначала сделайте короткий тестовый звонок, например коллеге, и проверьте, что он слышит переведённый голос.
- Делайте короткую паузу в конце каждого предложения: перевод озвучивается, когда вы заканчиваете мысль.
- Зачитывание речи собеседника вслух стоит дополнительно. Если субтитров достаточно, выключите «Перевод, который слышу я» до начала сеанса: во время сеанса его нельзя изменить.
Часто задаваемые вопросы
Нужно ли собеседнику что-то устанавливать?
Нет. Sokuji запускаете только вы. Собеседник просто слышит микрофон, который говорит на его языке.
Работает ли это с настольным приложением Teams?
Да. Настольное приложение Sokuji работает с любым приложением для встреч, в котором можно выбрать микрофон, включая настольные приложения Teams и Zoom.
Собеседник ничего не слышит. Что проверить?
Проверьте, что в приложении для встреч выбран микрофон CABLE Output (VB-Audio Virtual Cable), что в Sokuji включён «Перевод, который слышит собеседник» и что Sokuji работает в режиме «Я» или «Оба» с запущенным сеансом.
Слова собеседника не переводятся. Что проверить?
Проверьте, что в «Аудио собеседника» выбрано ваше приложение для встреч или System Audio (All Applications), что Sokuji работает в режиме «Оба», где для собеседника выбрано «На встрече», и что звонок действительно воспроизводит звук.
Я читаю перевод собеседника, но не слышу его. Что проверить?
Проверьте, что «Перевод, который слышу я» включён и воспроизводится на устройстве, которое вы слушаете, и что в «Аудио собеседника» выбрано ваше приложение для встреч, а не System Audio (All Applications). Чтобы изменить этот переключатель, остановите сеанс.
Стоит ли перевод в обе стороны вдвое дороже?
По умолчанию — примерно да: в режиме «Оба» для каждого направления запускается отдельный сеанс Soniox, что лучше всего справляется с одновременной речью обоих собеседников. Если включить «Общий сеанс в режиме «Оба»» (Настройки → Расширенный → Поставщик), обе стороны переводятся в одном сеансе и дешевле. Зачитывание перевода собеседника вслух добавляет к этому второй голос. Подробности — в руководстве по оплате.
Устранение неполадок
Всё ещё не получается? Отправьте нам отзыв через меню учётной записи или напишите на support@kizuna.ai. Также можно задать вопрос в GitHub Discussions.