Назад до швидкого старту KizunaAI

Двосторонній голосовий переклад у Teams, Zoom та інших застосунках для зустрічей

Огляд

Цей посібник налаштовує настільний застосунок Sokuji для відеодзвінка з людиною, яка говорить іншою мовою. Співрозмовник чує ваші слова своєю мовою. Ви чуєте його мовлення, перекладене вашою мовою й зачитане вголос, а мовлення обох сторін можете читати у вигляді субтитрів. Використовується KizunaAI (на базі Soniox); це працює з будь-яким застосунком для зустрічей, у якому можна вибрати мікрофон, зокрема з настільними застосунками Microsoft Teams і Zoom. Знімки екрана зроблено в Sokuji 0.44.0 на Windows з Microsoft Teams.

1Налаштуйте Sokuji з KizunaAI

Якщо ви ще цього не зробили, дотримуйтеся посібника «Швидкий старт із KizunaAI», щоб установити Sokuji та увійти в обліковий запис.

2Виберіть двосторонній сценарій

У майстрі налаштування виберіть Двостороння онлайн-розмова. Sokuji переходить у режим Обидва, озвучує ваш переклад на зустрічі й зачитує вам переклад співрозмовника. Якщо ви вже завершили налаштування, натомість натисніть Обидва в перемикачі режимів у лівому нижньому куті головного вікна. Першого разу панель запитає, де співрозмовник: залиште На зустрічі. Натискання «Обидва» не вмикає Переклад, який чую я; це ви зробите на кроці 5.

Виберіть двосторонній сценарій

3Задайте дві мови

У налаштуваннях, у розділі Мови перекладу, укажіть у полі Я говорю свою мову, а в полі вони чують — мову співрозмовника. Рядок під полями показує зворотний напрямок: «Вони говорять Англійська → я читаю Китайська», доки Sokuji не почне слухати один застосунок, наприклад Teams (крок 5), а потім «→ я чую Китайська», бо переклад співрозмовника зачитується вам уголос. Наприклад, для дзвінка клієнтові з Великої Британії: Я говорю китайською, вони чують англійською.

Задайте дві мови

Tip

Не залишайте в полі «Я говорю» значення «Автовиявлення». У режимі «Обидва» Sokuji має знати вашу мову, щоб перекладати нею співрозмовника, і кнопка «Почати» залишається недоступною, доки ви її не виберете.

4Установіть віртуальний аудіокабель

Ваш перекладений голос потрапляє на зустріч через віртуальний мікрофон. На Windows це VB-CABLE, безкоштовний драйвер. Поки його не встановлено, Sokuji під час кожного запуску пропонує його встановити: натисніть Install Now і перезапустіть Windows, якщо система попросить. Після цього Sokuji сам надсилає перекладений голос у VB-CABLE.

Установіть віртуальний аудіокабель

Tip

На macOS інсталятор Sokuji додає віртуальний аудіодрайвер, а на Linux Sokuji створює власний віртуальний мікрофон. Решта посібника така сама.

5Виберіть мікрофон, застосунок для зустрічей і те, що ви чуєте

Там само, у налаштуваннях: у розділі Мікрофон виберіть свій справжній мікрофон. У розділі Аудіо співрозмовника виберіть застосунок для зустрічей, тут Microsoft Teams. Тоді Sokuji слухає лише цей застосунок, тож звук інших програм не перекладається, а власний голос співрозмовника ви й далі чуєте через Teams, як зазвичай. У блоці Мовлення Переклад, який чує співрозмовник надходить на віртуальний мікрофон, а Переклад, який чую я зачитує вам переклад співрозмовника на пристрої, вибраному поруч. Вимкніть «Переклад, який чую я», якщо хочете лише читати переклад.

Виберіть мікрофон, застосунок для зустрічей і те, що ви чуєте

Tip

Якщо вашого застосунку для зустрічей немає в списку, спочатку приєднайтеся до дзвінка (застосунок часто з’являється в списку лише тоді, коли починає відтворювати звук) і натисніть значок оновлення. System Audio (All Applications) теж підходить, але тоді «Переклад, який чую я» стає неактивним, щоб Sokuji не перекладав повторно власний голос: мовлення співрозмовника ви лише читаєте.

6Виберіть VB-CABLE як мікрофон у застосунку для зустрічей

У Microsoft Teams відкрийте Налаштування → Пристрої (Settings → Devices) і виберіть як мікрофон CABLE Output (VB-Audio Virtual Cable). У Zoom те саме налаштування розташоване в розділі Налаштування → Аудіо → Мікрофон (Settings → Audio → Microphone). Динамік залиште на звичайній гарнітурі чи колонках.

Tip

Справжній мікрофон вибирається в Sokuji, а не в застосунку для зустрічей: Sokuji слухає вас, а застосунок для зустрічей отримує лише перекладений голос.

7Почніть переклад

Натисніть Почати в Sokuji. Коли ви говорите, співрозмовник чує ваші слова своєю мовою через застосунок для зустрічей, а Sokuji показує мовлення обох сторін у вигляді субтитрів. Коли говорить співрозмовник, ви чуєте його власний голос через Teams, а потім Sokuji зачитує вам переклад вашою мовою.

Почніть переклад

Поради для найкращих результатів

  • Надягайте навушники. Інакше мікрофон уловлює співрозмовника з динаміків, і Sokuji перекладає його так, ніби це говорите ви.
  • Спершу зробіть короткий тестовий дзвінок, наприклад колезі, і перевірте, що він чує перекладений голос.
  • Робіть коротку паузу в кінці кожного речення: переклад озвучується, коли ви завершуєте думку.
  • Зачитування співрозмовника вголос коштує додатково. Якщо субтитрів достатньо, вимкніть «Переклад, який чую я» перед початком: під час сеансу цей параметр змінити не можна.

Часті запитання

Чи потрібно співрозмовнику щось установлювати?

Ні. Sokuji запускаєте лише ви. Співрозмовник просто чує мікрофон, який говорить його мовою.

Чи працює це з настільним застосунком Teams?

Так. Настільний застосунок Sokuji працює з будь-яким застосунком для зустрічей, у якому можна вибрати мікрофон, зокрема з настільними застосунками Teams і Zoom.

Співрозмовник нічого не чує. Що перевірити?

Перевірте, що в застосунку для зустрічей вибрано мікрофон CABLE Output (VB-Audio Virtual Cable), що в Sokuji ввімкнено «Переклад, який чує співрозмовник» і що Sokuji працює в режимі «Я» або «Обидва» із запущеним сеансом.

Слова співрозмовника не перекладаються. Що перевірити?

Перевірте, що в «Аудіо співрозмовника» вибрано ваш застосунок для зустрічей або System Audio (All Applications), що Sokuji працює в режимі «Обидва», де співрозмовник на зустрічі, і що дзвінок справді відтворює звук.

Я читаю переклад співрозмовника, але не чую його. Що перевірити?

Перевірте, що «Переклад, який чую я» ввімкнено й він відтворюється на пристрої, який ви слухаєте, і що в «Аудіо співрозмовника» вибрано ваш застосунок для зустрічей, а не System Audio (All Applications). Щоб змінити цей перемикач, зупиніть сеанс.

Чи коштує переклад в обидва боки вдвічі дорожче?

За замовчуванням — приблизно так: у режимі «Обидва» для кожного напрямку запускається окремий сеанс Soniox — це найкраще підходить, коли обоє говорять одночасно. Якщо ввімкнути «Спільний сеанс у режимі «Обидва»» (Налаштування → Розширений → Постачальник), обидві сторони перекладаються в одному сеансі дешевше. Зачитування співрозмовника вголос додає ще й другий голос. Докладніше — у посібнику про баланс і витрати.

Усунення несправностей

Досі не виходить? Надішліть нам відгук через меню облікового запису або напишіть на support@kizuna.ai. Також можна запитати в GitHub Discussions.