CaptionGo v1.1 Примечания к выпуску

CaptionGo v1.1 обеспечивает работу субтитров в реальном времени на значительно большем числе видеосайтов и стриминговых платформ. Движок распознавания речи полностью переработан — с более надёжным обнаружением аудиоисточников, поддержкой зашифрованных потоков, загрузкой только аудиоданных для экономии трафика и улучшенным отображением субтитров на сложных веб-страницах.

• Кнопки панели управления неправильно расположены или перекрываются с меню на Baidu Pan и аналогичных сайтах
• Субтитры теперь привязываются к основному видео, а не к фоновой рекламе
• Живые субтитры корректно распознают новое видео после переключения эпизодов на Bilibili и других SPA-сайтах
• Автоматический выбор лучшего режима распознавания при перезапуске субтитров
• Субтитры больше не расходятся с видео после переключения
• Нечитаемые субтитры из фазы определения языка автоматически очищаются
• Двуязычные субтитры больше не используют несовпадающие дорожки для перевода
• Перевод пропускается, если исходный и целевой языки совпадают
• Наведение мыши на субтитры больше не вызывает дрожание и некликабельные кнопки

CaptionGo v1.1.5 улучшает субтитры для прямых трансляций на YouTube, Twitch, Bilibili и похожих сайтах. Live Captions использует уже буферизованное плеером аудио, чтобы субтитры ближе совпадали с речью, и возвращается к опережающему распознаванию, когда буфер восстанавливается.

• Субтитры на популярных live-площадках: Лучшая синхронизация на YouTube, Twitch, Bilibili и др.; возврат из режима реального времени при достаточном буфере
• Ждёт речь в начале: Длинные интро только с музыкой или тишиной без раннего перехода на субтитры в реальном времени
• Больше потоков без DRM на аудио: Предварительные субтитры, если защищено только видео
• Умнее авто Live Captions для сайта: Сначала субтитры видео; распознавание речи только без них. Повторная проверка при переходе к другому видео
• Стабильнее при переводе: Меньше мерцания при live-распознавании и переводе; предыдущая строка дольше при быстрой речи
• Быстрее и надёжнее загрузка субтитров: Повторное использование субтитров на странице; пауза при лимитах сайта

• Стабильнее CaptionGo Cloud при автоопределении языка, переключении предварительный/реальное время и длинном просмотре
• Понятное сообщение при исчерпании дневной пробной квоты вместо «Подключение…»
• Нет ложной ошибки на фрагментах только с музыкой или тишиной
• Субтитры в реальном времени отстают от речи при автоопределении языка
• Субтитры в реальном времени иногда не запускаются со своим ключом голосового API
• YouTube: чужие субтитры; субтитры не обновляются при автопереходе вперёд/назад
• Предварительные субтитры смешиваются с прошлым видео или обрываются при смене; уведомления о языке снимаются при смене видео

• Предварительные Live Captions на большем числе сайтов и форматов: CaptionGo готовит двуязычные субтитры до воспроизведения на большем числе сайтов и потоков, привязанные к реально играющему видео — быстрее и меньше трафика
• Умнее выбор аудиодорожки в многоязычных видео: Приоритет дорожке по умолчанию или языку страницы
• Стабильнее автоопределение языка: Нет слишком раннего «не удаётся определить язык» при длительной тишине; сообщение исчезает при распознавании речи
• Миниатюры предпросмотра без кнопки: На маленьких плеерах предпросмотра нет кнопки CaptionGo и нет автозапуска Live Captions
• Сброс субтитров при автопереходе Dailymotion: При автоматическом следующем видео на Dailymotion Live Captions начинается заново
• Понятнее подсказки без захвата звука: Точнее, когда браузер не получает звук с плеера

• Загрузка аудио после остановки Live Captions
• Предварительные субтитры только в начале на некоторых сайтах; быстрее переход в реальное время при нераспознаваемом аудио
• Клик по CaptionGo сдвигал полосу прогресса; наложение кнопок на Dailymotion
• Повторные переподключения без аудиосигнала

• Статус субтитров в реальном времени для CaptionGo Cloud: Индикатор состояния в правом верхнем углу теперь показывает ход создания субтитров и при использовании встроенного CaptionGo Cloud. Нажмите на него, чтобы узнать оставшееся на сегодня время бесплатного пробного периода, сменить язык распознавания или остановить субтитры
• Заранее созданные субтитры на большем числе сайтов: Субтитры можно заранее создавать на большем числе видеосайтов, и они остаются синхронными с речью, даже если включить их с середины видео
• Расширенные настройки Deepgram: В настройках провайдера Deepgram можно включить умное форматирование, фильтр нецензурной лексики и ключевые термины (для более точного распознавания имён и профессиональных терминов), а также отдельно настроить паузы между предложениями для субтитров в реальном времени и заранее создаваемых субтитров

• Удобные для чтения субтитры при длинной речи: Длинные фрагменты речи теперь делятся по концам предложений и естественным паузам на короткие субтитры вместо одного длинного блока без разбивки. Предложения стали полнее, окончания теряются реже (можно отключить «Разбивать длинные субтитры» в настройках)
• Более точное автоопределение языка: Музыкальные заставки, тишина и другие фрагменты без речи больше не сбивают определение, а язык применяется только при надёжном результате
• Пошаговое подтверждение языка: При заблаговременном создании субтитров фрагменты распознаются по одному, а язык речи подтверждается до ускорения обработки. Счётчик прогресса растёт только когда субтитры действительно готовы, а при неверном языке обработка сразу приостанавливается — это экономит квоту
• Одинаковая работа с CaptionGo Cloud и собственным ключом Deepgram: Язык распознавания, режим захвата, фильтр тишины и другие настройки теперь действуют и для встроенного CaptionGo Cloud, а субтитры готовятся так же заранее
• Понятные сообщения об определении языка: На каждом этапе — определение, подтверждение, исправление или ошибка — показывается короткое сообщение с названием языка вместо кода, и язык можно выбрать сразу
• Причина ошибки в меню субтитров в реальном времени: Если субтитры не запускаются или останавливаются, меню теперь показывает конкретную причину вместо общего сообщения об ошибке
• Более точная синхронизация субтитров в реальном времени: После кратковременного обрыва сети субтитры больше не пропадают и не сбиваются
• Аккуратные двуязычные субтитры: Старые строки больше не появляются снова и не вытесняют последнюю строку

• Исправлено обрезание начала длинных предложений в субтитрах в реальном времени
• Исправлено: сообщение об автоматической смене языка исчезало сразу после появления
• Исправлено: прогресс надолго застывал на одной цифре, а затем без необходимости переключался в режим реального времени, если сервис распознавания речи был недоступен; теперь примерно через 40 секунд появляется просьба проверить сеть и кнопка повтора
• Исправлено отсутствие сообщения при сбое подключения в реальном времени
• Исправлено: после остановки субтитров аудио продолжало загружаться в фоне и расходовало квоту
• Исправлено: после входа в аккаунт субтитры в реальном времени работали только после перезагрузки страницы

• Более умное определение языка: Автоматическая пауза и запрос ручного выбора языка при неудачном определении — экономит квоту распознавания
• Улучшенное распознавание китайского/японского/корейского: Повышена точность различения
• Повторное определение языка при перемотке: Определение языка перезапускается с новой позиции — удобно для пропуска музыкальных заставок
• Более надёжная обработка аудио: Улучшена совместимость с большим количеством видеоформатов
• Прогресс загрузки аудио: Отображается прогресс в реальном времени со скоростью (например, «Загрузка аудио… 35% (120 КБ/с)»)
• Лучшая надёжность на медленных сетях: Автоматический повтор с оптимизированными параметрами
• Прогресс между сегментами: Показывает индикаторы прогресса между сегментами субтитров
• Улучшение качества ИИ-перевода: Оптимизированные промпты, расширенное контекстное окно (до 30 строк) и метаданные видео
• ИИ-перевод с учётом ASR: Оптимизированный подход для субтитров распознавания речи

• Контроль конфиденциальности ИИ-перевода: Новый переключатель в настройках перевода — включён по умолчанию

• Чёрный экран при открытии ссылок на видеофайлы (.mp4) в браузере
• Извлечение аудио из MP4 загружало почти весь файл для некоторых форматов (обучающие видео)
• Субтитры прекращали генерироваться в середине длинных видео
• Сообщение «Подготовка субтитров…» не исчезало после перемотки к уже обработанному участку
• Прогресс предзагрузки зависал и не достигал 100%
• Значок выбора языка не отображался, когда требовался ручной выбор
• Неточности перевода из-за общего кеша для повторяющихся фраз в разных сегментах
• Статус подписки не обновлялся после перезапуска браузера

• Исправлен повторный перезапуск предварительной загрузки субтитров на сайтах с проигрывателем Wistia (например, на платформах онлайн-курсов)

• Повышена стабильность предварительной загрузки: меньше лишних перезапусков, исключена повторная обработка уже распознанных аудиофрагментов

• Субтитры в реальном времени на большем числе сайтов: полностью переработанный движок распознавания речи с автоматическим обнаружением аудиоисточников HLS, DASH и MP4
• Автоматическое обнаружение видеопотоков: мониторинг сетевого трафика страницы для поиска видеоманифестов и аудио-URL — субтитры работают без предварительной настройки
• Поддержка зашифрованного видео: субтитры работают на сайтах с AES-128 шифрованием аудио
• Экономичная загрузка аудио: извлечение и загрузка только аудиодорожки из MP4-файлов
• TikTok и защищённые сайты: автоматическое добавление правильных заголовков запросов для устранения ошибок загрузки

• Сообщения о прогрессе больше не отображаются после появления субтитров — показываются только ошибки
• Улучшена изоляция стилей Shadow DOM для субтитров, повышена совместимость со сложными веб-страницами
• Настройки предзагрузки аудио могут обновляться удалённо без обновления расширения
• Индикатор определения языка ASR: при получении пустых результатов субтитров отображается баннер с встроенным выбором языка
• Автоматический откат в режим реального времени при обнаружении DRM-защищённого контента или неудачном получении аудиоисточника
• AI-перевод автоматически повторяет попытку для уменьшения пропущенных переводов из-за гонки при инициализации модели

• Исправлена проблема, при которой перетаскивание субтитров к верхнему краю видео приводило к выходу ручки за пределы, делая повторное позиционирование невозможным
• Исправлено несоответствие кэша субтитров на страницах с несколькими видео (например, Twitter/X), где субтитры могли отображаться у неправильного видео