YouTube научится синхронизировать автоматический дубляж с губами спикера

YouTube тестирует технологию на базе искусственного интеллекта (ИИ), предназначенную для синхронизации движений губ спикеров при автоматическом переводе. Эта разработка дополняет существующую функцию автодублирования, которая уже использует ИИ для перевода аудиодорожки.

Почему ИИ никак не сесть на безматричную диету

YouTube научится синхронизировать автоматический дубляж с губами спикера

Обзор умных часов HUAWEI WATCH 5: часы юбилейные

YouTube научится синхронизировать автоматический дубляж с губами спикера

Пять причин полюбить HONOR Magic7 Pro

YouTube научится синхронизировать автоматический дубляж с губами спикера

Hollow Knight: Silksong — песнь страданий и радостей. Рецензия

YouTube научится синхронизировать автоматический дубляж с губами спикера

HUAWEI FreeArc: вероятно, самые удобные TWS-наушники

YouTube научится синхронизировать автоматический дубляж с губами спикера

Фитнес-браслет HUAWEI Band 10: настоящий металл

YouTube научится синхронизировать автоматический дубляж с губами спикера

Пять причин полюбить HONOR X8c

YouTube научится синхронизировать автоматический дубляж с губами спикера

Пять причин полюбить HONOR Pad V9

YouTube научится синхронизировать автоматический дубляж с губами спикера

По словам руководителя продукта по автодублированию Будхики Коттахаччи (Buddhika Kottahachchi), команде пришлось разработать инструменты, способные «модифицировать пиксели на экране так, чтобы они соответствовали переведённой речи». Для этого система анализирует не только форму губ, но и положение зубов, мимику, осанку и другие визуальные параметры. По сообщению PCMag, на текущем этапе тестирования технология показала наилучшие результаты в видео с разрешением Full HD. В 4K её эффективность ниже, однако качество может быть улучшено к моменту официального запуска.

Напомним, YouTube впервые продемонстрировал функцию на мероприятии в сентябре, но дата публичного релиза пока не объявлена. Первая версия инструмента поддерживает синхронизацию губ при переводе на английский, французский, немецкий, испанский и португальский языки. В дальнейшем планируется расширить охват на все языки, поддерживаемые системой автодублирования, включая бенгальский, голландский, иврит, хинди, индонезийский, итальянский, японский, корейский, малаялам (дравидийский язык), польский, панджаби, румынский, русский, тамильский, телугу, турецкий, украинский и вьетнамский. Стоимость использования функции не раскрывается.

В настоящее время функция находится на ранней стадии тестирования, и доступ к ней ограничен избранными пользователями платформы.

PRICEP-VLG.RU
Добавить комментарий

Нажимая на кнопку "Отправить комментарий", я даю согласие на обработку персональных данных и принимаю политику конфиденциальности.