Хотите получать важные новости науки?
Подписаться
  • Добавить в закладки
  • Facebook
  • Twitter
  • Telegram
  • VK
  • Печать
  • Email
  • Скопировать ссылку

Этот пост добавлен читателем Naked Science в раздел «Сообщество». Узнайте как это сделать по ссылке.

ИИ научился превращать текст в видео

Представлена новая система под названием Make-A-Video, которую разработали инженеры Meta* (признана экстремистской организацией на территории России). Как и следует из названия, пользователь может ввести текстовое описание того, что он хочет увидеть, а система с помощью искусственного интеллекта (ИИ) генерирует короткий ролик, соответствующий тексту. Видео пока что не слишком качественные, с размытыми объектами и искаженной анимацией, но все же система представляет значительный шаг вперед в области создания контента с помощью ИИ. 

Пример видео, сгенерированный новой моделью преобразования текста на основе искусственного интеллекта Make-A-Video. Текст для создания ролика гласил: «плюшевый мишка рисует свой портрет» / ©Meta*

Make-A-Video сейчас генерирует 16 кадровые ролики с разрешением 64 на 64 пикселя, которые затем увеличиваются в размере с помощью отдельной модели ИИ до 768 на 768.

Создатели системы отмечают, что Make-A-Video обучается на парах изображений и подписей, а также на немаркированных видеоматериалах. Учебный контент получается из двух наборов данных (WebVid-10M и HD-VILA-100M), которые вместе содержат миллионы видеороликов, охватывающих сотни тысяч часов отснятого материала. Сюда входят стоковые видеоматериалы, размещенные на таких сайтах, как Shutterstock, и извлеченные из других сайтов в Сети.  

Сейчас не известно, как и/или когда Make-A-Video станет общедоступным средством создания контента.  

Подписывайтесь на нас в Telegram, Яндекс.Новостях и VK

Комментарии

Написать комментарий
Вчера, 17:59
Татьяна

Ученые продолжают исследовать генетическую историю народов Европы. Один из важнейших регионов — Среднедунайская, или Паннонская, равнина. Сейчас это территория, главным образом, Венгрии, Румынии. В конце неолита здесь произошли радикальные изменения археологических культур. Что стало причиной? Миграции, экономика, а может быть, климатические катаклизмы? Авторы новой работы дали ответ, изучив кровные связи жителей.

Позавчера, 13:37
ФизТех

Исследователи из МФТИ и ИО РАН изучили, как распространяется плюм реки Лены — огромный по площади слой опресненной воды в Восточной Арктике. Оказалось, что из-за быстрого таяния льдов и усиления ветра поверхностное опреснение значительно увеличилось. В последние годы плюм доходит до акваторий, ранее не подверженных влиянию речного стока. На севере опреснение регистрируется всего в 1300 километрах от полюса. На востоке оно стало достигать Чукотского моря, что может негативно повлиять на его высокую биологическую продуктивность.

5 часов назад
Илья Гриднев

Химики и биологи модифицировали кишечную палочку, чтобы она перерабатывала ПЭТ — один из самых распространенных видов пластика. Эти бактерии превратили отходы от пластиковых бутылок в ацетаминофен, активный компонент парацетамола.

20 июня
Александр Березин

Выбросы углекислого газа, которые возникнут при сжигании доказанных запасов ископаемого топлива всего 200 компаний, будут настолько велики, что для их компенсации нужны новые леса в десятки миллионов квадратных километров. По крайней мере, так считают авторы новой научной работы. Однако исследование их предшественников ставит эти выводы под серьезное сомнение.

Вчера, 17:59
Татьяна

Ученые продолжают исследовать генетическую историю народов Европы. Один из важнейших регионов — Среднедунайская, или Паннонская, равнина. Сейчас это территория, главным образом, Венгрии, Румынии. В конце неолита здесь произошли радикальные изменения археологических культур. Что стало причиной? Миграции, экономика, а может быть, климатические катаклизмы? Авторы новой работы дали ответ, изучив кровные связи жителей.

Позавчера, 11:25
Александр Березин

Нарастающий в последние десятки лет пластиковый кризис многие годы пытались решить наращиванием вторичной переработки пластика. Ученые выяснили, что такие переработанные полимеры негативно повлияли на развитие подопытных животных.

17 июня
Адель Романенкова

Радиотелескопы уловили очень короткий сигнал, и по его характеристикам стало ясно, что он не может быть естественного происхождения. Астрономы пришли к выводу, что источник находился в околоземном пространстве — там, где уже более полувека летает «мертвый» аппарат NASA.

5 июня
Александр Березин

Вид антилоп, с ледникового периода привыкший к массовым миграциям, пытается вернуться в свой исторический ареал, когда-то достигавший Днепра. Однако их нетипичные для травоядных привычки вызывают сильнейшее отторжение у сельских жителей, предлагающих массово уничтожать их с воздуха. С экологической точки зрения возвращение этих животных весьма желательно, но как примирить их с фермерами — неясно.

19 июня
ЮФУ

В ЮФУ придумали новый остроумный способ тестировать ИИ на способность работать в реальных ситуациях использования русского языка. Исследователи искусственного интеллекта из МИИ ИМ ЮФУ предлагают использовать интеллектуальные языковые игры, как пример — заставлять ИИ отвечать на вопросы из архива телевикторины «Что? Где? Когда?» и «Своей игры». Инициативу прокомментировал опытный игрок.

[miniorange_social_login]
Подтвердить?
Подтвердить?
Причина отклонения
Подтвердить?
Не получилось опубликовать!

Вы попытались написать запрещенную фразу или вас забанили за частые нарушения.

Понятно
Жалоба отправлена

Мы обязательно проверим комментарий и
при необходимости примем меры.

Спасибо
Аккаунт заблокирован!

Из-за нарушений правил сайта на ваш аккаунт были наложены ограничения. Если это ошибка, напишите нам.

Понятно
Что-то пошло не так!

Наши фильтры обнаружили в ваших действиях признаки накрутки. Отдохните немного и вернитесь к нам позже.

Понятно
Лучшие материалы
Закрыть
Войти
Регистрируясь, вы соглашаетесь с правилами использования сайта и даете согласие на обработку персональных данных.
Ваша заявка получена

Мы скоро изучим заявку и свяжемся с Вами по указанной почте в случае положительного исхода. Спасибо за интерес к проекту.

Понятно