Как GigaChat и Алиса анимируют картинки

Как GigaChat и Алиса анимируют картинки

Совсем недавно две российские нейросети, GigaChat и Алиса, предложили пользователям новую интересную опцию — «оживление» изображений с помощью технологий искусственного интеллекта.

GigaChat делает это с помощью Телеграм-бота — @gigachat_bot. А Алиса предлагает такую опцию в своём мобильном приложении: https://alice.yandex.ru/aliceapp.

GigaChat

Чтобы превратить изображение в анимацию, заходим в Телеграм-бот сервиса GigaChat по адресу: @gigachat_bot.

Нажимаем на кнопку «Меню» и выбираем опцию «Создать видео».

Загружаем изображение, нажав на кнопку со стрелкой. Выбираем ориентацию видео (горизонтальная, вертикальная) и пишем промпт.

В промпте указываем, что именно должно происходить с героями картинки.

Если нужно, выбираем движение камеры. И нажимаем «Создать».

Ждём какое-то время и скачиваем готовое видео правой клавишей «мыши» (Сохранить как…). Бесплатно можно создавать до 10 видео в день.

Вот такое видео у меня получилось.

Алиса

Чтобы превратить иллюстрацию в видео с помощью Алисы, нужно установить приложение на смартфон и авторизироваться в нем с помощью аккаунта Яндекс.

Скачать приложение можно здесь: https://alice.yandex.ru/aliceapp

Нажимаем на кнопку «Оживить фото».

Загружаем изображение, нажав на кнопку со стрелкой, и пишем промпт.

В промпте указываем, что именно должно происходить с героями картинки.

И нажимаем на кнопку со стрелкой.

Ждём какое-то время и скачиваем готовое видео.

Вот такое видео у меня получилось.

Hailuo — нейросеть для создания видео

Hailuo — нейросеть для создания видео

Hailuo AI — один из китайских генеративных сервисов, которые набрали популярность в 2024 году. С его помощью можно создавать видео и анимацию по текстовому запросу и на основе изображения.

При регистрации выделяются 100 бесплатных кредитов на три дня. Этого запаса хватит на создание 4-5 видеороликов.

Авторизация

Для работы в сервисе нужна авторизация через аккаунты Google или Apple.

Заходим на сайт сервиса и нажимаем на кнопку «Sign in».

Авторизируемся с помощью одного из аккаунтов: Google или Apple.

Видео на основе текста

Создать первое видео очень быстро и просто — прямо на главной странице сайта.

Для этого в поле для промпта описываем будущее видео (на английском языке). Дополнительно можно прикрепить изображение.

Чтобы запустить генерацию, нажимаем на кнопку «Create Video».

Готовый ролик можно скачать, нажав на кнопку «Download» — «With Watermark».

Вот такое видео у меня получилось.

А это промпт: «A cute, fluffy cartoon raccoon skiing downhill through a snowy forest, joyful and energetic, with big sparkling eyes and expressive movements. Pixar-style 3D animation, soft pastel winter palette, bright and cheerful atmosphere. Dynamic motion, smooth gliding on skis, snow sparkling in the air. Transparent or light snowy background, minimalistic yet detailed design, kawaii-inspired charm».

Видео на основе изображения

Другой вариант создания видео — на основе изображений. Для этого идём во вкладку «Video», а потом — «Image to video».

Загружаем одно или два изображения. Если используем две картинки, то одна будет первым кадром видео, в второе — последним.

Ниже вписываем промпт, например, кассказываем, что происходит между первым и последним кадром.

Среди настроек — возможность выбрать движение камеры из предложенных вариантов.

Рядом с кнопкой настроек — кнопка для автоулучшения промпта (по умолчанию она включена).

Для генерации по картинке можно выбрать модель нейросети из трех вариантов. Самая «дешёвая» — Hailuo 2.3-Fast, стоимость генерации с ее помощью — 15 кредитов.

Чуть ниже выбираем количество создаваемых роликов и запускаем генерацию.

Это моё видео про мышку-балерину, созданное по картинке.

«Оживляем» картинки с помощью нейросети Runway

«Оживляем» картинки с помощью нейросети Runway

Runway — так называется и сама нейросеть, и платформа для создания контента, с помощью которой можно получить доступ к генеративному ИИ, создающему видео.

Есть несколько версий нейросети, начиная с Runway Gen 1. Самая новая — модель Gen 4 Turbo.

К сожалению, бесплатные возможности сервиса очень ограничены: каждому новому пользователю выделяется 125 кредитов, которые можно использовать для создания видео на основе изображений. Этого запаса хватает для создания 5 видеороликов.

Потом придётся оплачивать подписку или заводить новый аккаунт.

Вот пример видео от Runway.

Регистрация

Заходим на сайт сервиса и нажимаем на кнопку «Get Started». В дальнейшем для входа на сайт используем кнопку «Log in».

Авторизироваться можно с помощью аккаунтов Google или Apple. 

Чтобы зарегистрироваться с помощью электронной почты, указываем адрес и нажимаем «Next».

Для создания аккаунта можно указать никнейм и пароль. Нажимаем «Next».

Теперь указываем имя и фамилию. Нажимаем «Create Account».

На почту придет код верификации. Вставляем его в предложенное поле. Нажимаем «Validate».

Потом два раза нажимаем «Skip», чтобы попасть в личный кабинет.

Как создавать анимацию?

Бесплатно с помощью сервиса можно создавать только 5-секундные видео на основе картинок.

Для этого заходим во вкладку «Tools». Здесь нужно будет загрузить исходное изображение, написать промпт (что должно происходить в кадре) и выбрать соотношение сторон.

Чтобы загрузить иллюстрацию, нажимаем на кнопку «Select asset».

Дальше нажммаем на надпись «Drag and drop file (image)».

После этого нажимаем «Generate».

Готовое видео можно скачать, нажав на кнопку «Download».

И вот что получилось.

Сервис Dreamface для генерации видео

Сервис Dreamface для генерации видео

DreamFace – это онлайн-сервис для создания говорящих аватаров и видео с помощью технологий искусственного интеллекта.

Бесплатно можно создать по одному цифровому аватару и одному видео в день. Дополнительно выдается 2 кредита в месяц, которые тоже можно потратить на генерацию видео.

Регистрация

Регистрация у сервиса очень простая. Заходим на сайт и нажимаем вверху справа на кнопку «Начать сейчас».

Дальше нажимаем на кнопку «Войти / Зарег.» вверху справа.

Авторизироваться можно через аккаунт Google, а зарегистрироваться — с помощью электронной почты: указываем её адрес и придумываем пароль.

Создаём цифровой аватар

Сервис разрешает создавать видеоаватары, аватары Dream и видео. Попробуем все три варианта.

Начнём с «Видео с аватаром».

Из библиотеки сервиса выбираем подходящего аватара. Если нужно, загружаем свое изображение или видео.

Справа, во вкладке «Текст», указывает текстовый фрагмент, который будет произносить аватар. Ограничение — до 500 символов.

Текст может сгенерировать и нейросеть, для этого нажимаем на кнопку «AI».

Задаем тему текста и нажимаем «Generate». Перед генерацией не забываем выбрать язык и тон текста.

Для аватара нужно выбрать голос. Бесплатных голосов, говорящих на русском языке, совсем немного — около пяти. 

Если нажать на кнопку «+ Созд. нов. голос», можно загрузить аудио со своим голосом, а нейросеть применит его к добавленному тексту.

Загружаем файл, даем голосу название и нажимаем «Подтвердить»

Проверяем, чтобы на странице с аватаром был выбран именно этот голос. Если выбор не сохранился, заходим в раздел «Голос» — «Мой» и выбираем аудио еще раз.

Можно загрузить с ПК своё аудио или видео — вместо озвучивания текста.

Для этого заходим во вкладку «Аудио». Там же кнопка для записи аудио. Все эти материалы будут использоваться при создании аватара.

Когда все настройки завершены, нажимаем на кнопку «Генерировать».

Стоимость генерации — 1 кредит. Готовую работу можно просмотреть и скачать из личного кабинета.

Вот что у меня получилось.

Создаём цифровой аватар Dream 3.0

Теперь попробуем создать цифровой аватар Dream. Бесплатно можно создавать по одному такому аватару в день.

Выбираем на старте «Dream Avatar 3.0».

Дальше открывается примерно такое же окно, как и в прошлый раз. Отличие одно — для этого аватара можно использовать только фотографии.

Выбираем героя из библиотеки сервиса. Если нужно, загружаем своё изображение. Пишем текст (ограничение — 2000 символов). Можно написать текст с помощью ИИ.

Выбираем голос или создаём свой (как в предыдущем примере).

Запускаем генерацию, нажав на кнопку «1/сут. безп».

Ждём результат и скачиваем проект на ПК.

Я создала вот такого двойника и дала ему свой голос. Интонация не совсем точная, мимика чересчур активная, Но в целом очень даже неплохо.

Создаём видео

Осталось разобраться, как с помощью сервиса можно создать видео. Выбираем вариант «AI Видео».

Заходим в раздел «Моё видео». В предложенное окно вписываем промпт.

Рядом с промптом — кнопка для загрузки изображения (если нужно создать видео — «оживление» картинки).

Чуть ниже выбираем модель для генерации.

Для обычных пользователей доступны модели Dream Video 1.0 и 1.5.

Если выбрать модель 1.5, то можно будет бесплатно создавать по одному видео в день. Поэтому этот вариант и протестируем.

В «Настройках» выбираем соотношение сторон видео (ландшафт, портрет) и качество ролика (480 или 720). Бесплатное видео будет длиной 5 секунд.

Видео будет генерироваться со звуком. Его можно отключить внизу.

Во вкладке «Нач./Кон.» можно загрузить первый и последний кадр будущего видео.

Видео можно создать и на основе шаблона. Для этого даже промпт писать не надо. Выбираем подходящий, загружаем свое изображение — и запускаем генерацию.

Готовую генерацию скачиваем на ПК.

Это видео, созданное на основе текстового описания.

А это видео, созданное по шаблону.

Как Шедеврум генерирует изображения и анимацию

Как Шедеврум генерирует изображения и анимацию

В 2023 году Яндекс выпустил приложение «Шедеврум» — аналог популярных нейросетей, сочетающий в себе возможность работать с текстами и генерировать качественные картинки высокого разрешения.

Дополнительным бонусом является то, что у приложения «Шедеврум» очень хороший бесплатный тарифный план.

«Шедеврум» основан на нейросети YandexART. Она генерирует изображения методом каскадной диффузии: сначала создает картинки в соответствии с запросом, затем поэтапно увеличивает их разрешение и добавляет детали.

Ключевое отличие «Шедеврума» от конкурентов в том, что это не просто сервис для генерации картинок, а полноценная соцсеть для нейрохудожников. Здесь можно подписываться на других пользователей, ставить лайки и оставлять комментарии под сгенерированными картинками. В сервисе также есть алгоритмическая лента, которая предлагает интересные посты. Для просмотра ленты регистрация не нужна. А вот, чтобы самостоятельно творить, необходимо завести Яндекс-аккаунт.

Под каждой опубликованной картинкой можно посмотреть запрос, по которому она сгенерирована. Это удобно: «Шедеврум» позволяет учиться промптингу на популярных в сообществе картинках и адаптировать чужие запросы для своих изображений.

Изначально Шедеврум работал только на мобильных устройствах, сейчас доступна и десктопная версия. На ПК можно генерировать до 70 изображений каждый день, в мобильной версии можно работать без ограничений.

Есть платная подписка Шедеврум ПРО: первые 7 дней бесплатно, потом – 100 рублей в месяц. Среди опций платного тарифа: доступ к самым последним моделям нейросети, к режиму «Раскраски», приоритетная очередь в генерации и возможность скачивать изображение без водяного знака.

Генерация изображений

Авторизируемся в Яндекс-аккаунте. Заходим на сайт сервиса и нажимаем на кнопку «Создать» справа вверху.

Во вкладке «Картинки» будем писать запрос для генерации. Сервис принимает промпты (запросы) и на русском, и на английском. В запросе обычно описывают то, что хотят видеть на картинке: объект, действие, цвета, атмосферу, стиль изображения, детализацию. Объем промпта — не более 500 символов.

Дальше выбираем формат будущего изображения и нажимаем «Создать».

На сайте сервис сгенерирует одно изображение, в мобильном приложении — два. Если результат порадовал, то нажимаем на кнопку «Опубликовать». Если получилось не очень, можно удалить изображение и запрос и начать заново или попробовать подкорректировать запрос, нажав на значок-«карандаш».

Чтобы скачать картинку, нажимаем «Сохранить», чтобы удалить, жмём на значок с тремя точками, а далее — на «Удалить».

Готовая работа скачается с логотипом сервиса. Если он мешает, его можно аккуратно обрезать в фоторедакторе или удалить с помощью специальных сервисов.

Другой вариант — сохранить изображение с помощью правой клавиши «мыши».

Вот несколько изображений от Шедеврума.

В качестве запроса можно загрузить отрывок из книги или стихотворение, чтобы получить иллюстрацию к произведению.

Генерация анимации

Сервис также умеет создавать четырёхсекундную анимацию на основе текстового запроса. Генерируем её во вкладке «Видео»: придумываем запрос, выбираем формат видео и нажимаем на кнопку «Создать первый кадр».

В бесплатном тарифе можно генерировать по 10 видео в день и по 20 первых кадров.

Сервис сгенерирует две картинки как первые кадры анимации. Выбираем из них подходящую и нажимаем «Создать видео».

Если ни одно из изображений не подошло, можно скорректировать описание и запустить генерацию снова.

После того как закончится генерация видео, нажимаем на кнопку «Опубликовать», а затем — «Сохранить»

Видео скачается в формате mp4. Вот что примерно может получиться. 

Фильтрумы

«Шедеврум» может не только генерировать картинки, но и стилизовать изображения, загруженные пользователем. Например, представить человека с фото в виде вязаной игрушки или сделать брутального кота романтичным.

Для этого используют «Фильтрумы» — обученные на конкретном стиле модели нейросети YandexART.  Эта функция доступна только на мобильных устройствах. 

Чтобы перейти к ним, на главном экране приложения нажимаем на значок «+» и далее — на надпись «Фильтрумы».

Откроется список фильтрумов, чтобы просмотреть все варианты, вверху нажимаем на кнопку «все».

Выбираем подходящий фильтрум.

Дальше нажимаем на «Использовать фильтрум».

Загружаем фотографию со смартфона.

Нажимаем «Создать».

Если результат порадовал, нажимаем «Готово». И картинка будет опубликована. Затем её можно будет скачать.

Можно создать свой собственный фильтрум. Для этого на старте выбираем вариант «Создать свой фильтрум».

Загружаем фотографию и добавляем к ней текстовый запрос с описанием преобразований.

Дополнительно можно добавить настройки. После этого нажимаем на «Готово», а потом — на «Создать».

И снова нажимаем «Готово» — картинка появится в нашем профиле. Созданный фильтрум можно опубликовать и дать ему имя.

Лучше всего фильтрумы работают с портретными фотографиями людей.

Тексты

В «Шедеврум» встроена также текстовая нейросеть YandexGPT. С ее помощью можно создавать истории и сразу же их иллюстрировать. Или использовать другим привычным способом: решать задачи, составлять рецепты или просить объяснить термины.

На главном экране приложения нажимаем на «плюсик», выбираем пункт  «Текст».

Дальше формулируем текстовый запрос. Внизу периодически появляются подсказки, которые можно включить в запрос. Нажимаем «Создать».

Через минуту приложение выдаст текст и предложит выбрать к нему обложку из нескольких вариантов. Если ни один не подходит, можно создать и свою обложку по текстовому запросу.

В итоге нажимаем «Готово» и публикуем работу.

Подобным образом можно создавать и тесты. Только результаты работы нейросети, конечно, надо проверять. Иногда они не соответствуют действительности.

Нейросеть Qwen для работы с текстами, картинками и видео

Нейросеть Qwen для работы с текстами, картинками и видео

Qwen — это нейросеть, разработанная Alibaba — китайской корпорацией, известной нам по AliExpress.

С 2009 года компания развивает подразделение Alibaba Cloud для всевозможных облачных решений для бизнес-клиентов: от обработки больших данных до защиты от DDoS-атак.

В 2023 году компания анонсировала нейросеть Tongyi Qianwen, которую быстро переименовали в Qwen для западного рынка.

Нейронка может написать или отредактировать текст, объяснить непонятные термины и явления, составить план тренировок, написать и доработать код, помочь с изучением иностранного языка и просто поболтать.

Но это ещё не всё. Qwen может генерировать картинки и видео по текстовому описанию, описывать изображения и анализировать прикрепленные документы.

Работа в нейросети бесплатна, но для доступа к генерации изображений и видео предварительно необходимо зарегистрироваться.

Регистрация

Заходим на сайт нейросети и, чтобы пройти регистрацию, нажимаем на кнопку «Зарегистрироваться».

Авторизируемся с помощью аккаунта Google или регистрируемся с помощью электронной почты.

В последнем случае указываем своё имя, адрес электронной почты, пароль, соглашаемся с условиями сервиса и нажимаем «Создать аккаунт». 

Теперь надо пройти капчу: «мышкой» протянуть синюю кнопку со стрелкой слева направо.

После этого на почту придет письмо со ссылкой для активации аккаунта. Нужно нажать на кнопку «Activate My Account».

Регистрация закончена, можно начинать работу. Интерфейс нейросети на руссклом языке, запросы на русском она тоже хорошо понимает.

Как нейросеть работает с текстами и файлами?

Разглядываем рабочее поле. Слева находится меню с историей общения с нейросетью (историей чатов). Это очень удобно: можно вернуться к старым запросам. 

Там же, слева, можно начать новый чат — нажимаем на кнопку «Новый чат»

В центре — окно для запроса к нейросети. В левом нижнем углу окошка — значок «+». С его помощью можно прикрепить к запросу документ, изображение и даже видео.

У сервиса два режима работы. Функция «Поиск» позволяет искать информацию в Интернете. Ее лучше использовать, если нужна статистика или дополнительная информация, ответ на конкретный вопрос. Тогда нейросеть начнет «серфить» и выдаст ответ с указанием источников.

Если нужно получить уникальное решение, найти ответ на математические задачи или сгенерировать код — включаем «Мышление». Эта модель умеет глубоко анализировать информацию и рассуждать. 

Вписываем свой запрос в предложенное поле, выбираем один из режимов и нажимаем на синий значок со стрелкой, который находится справа.

Это результат быстрого поиска ответа на вопрос. Ответ нейросеть сгенерировала в виде небольшого текста со ссылками на Интернет-источники.

В чате можно задать уточняющий вопрос по теме, чтобы нейросеть расширила или дополнила информацию.

Попросим нейросеть поработать в режиме «Мышление». Здесь сразу видно, как думает нейросеть. Даже самый простой запрос она разбивает на этапы, расширяет, структурирует.

Это конспект урока, который составила нейросеть. Получилось очень даже неплохо.

Qwen помогла и с созданием рабочего листа: включила в него и практические, и теоретические задания.

Хорошо нейросеть справилась и с написанием сценария мероприятия.

Придумала вопросы для викторины, при этом ещё и расставила их по степени сложности.

Успешно Qwen справилась и с заданием по написанию пресс-релиза.

Попробуем поработать с загруженными файлами. Загрузила в нейросеть брошюру о здором питании и попросила составить для меня меню на неделю из простых продуктов. Отлично получилось!

А если загрузить изображение или видео, то можно попросить нейросеть его описать. Такие описания можно использовать в дальнейшем в качестве промптов.

Поддерживается загрузка файлов весом до 20 мегабайт.

Теоретически нейросетка может и стихотворение написать. Правда, получается не очень.

А вот с сочинением эссе уже лучше.

Под каждым ответом нейросети есть несколько полезных кнопок. С их помощью можно скопировать результат, отредактировать его или попросить нейросеть перегенерировать ответ.

Генерируем изображения и видео

Чтобы создать с помощью нейросети изображение, нажимаем на кнопку «Генерация изображений». Далее вписываем промп для генерации и выбираем нужный формат из предложенного списка. Запускаем генерацию нажатием на кнопку со стрелкой.

По моему запросу получилась вот такая красота.

У нейросети есть ещё и функция редактирования картинок. Для этого нажимаем на кнопку «Редактировать изображение», загружаем иллюстрацию и запускаем процесс, нажав на кнопку с изображением стрелки.

Я попросила удалить лишнюю лапу у собаки, которую сгенерировала другая нейросеть. Результат очень порадовал!

Сравните сами. Вот что было.

А это то, что стало.

Осталось поэкспериментировать с созданием видео. Нажимаем на кнопку «Генерация видео». Пишем запрос, выбираем формат видео. Дополнительно можно загрузить файл и сделать видео на его основе (для загрузки нажимаем на кнопку «+»). 

И вот что в итоге получилось. Если не придираться, то вполне неплохо.

Недавно у сервиса появилась новая опция – «оживление» изображения. Использовать можно картинку, созданную в сервисе или загруженную с ПК.

Нейросеть может добавить персонажам голос. Для этого в промпте можно прописать реплики героя. Например: «Енот улыбается и говорит: «Привет! Очень рад тебя видеть!».

Полученные картинки и видео можно скачать на ПК, также можно ими поделиться в Сети, скопировав ссылку. А можно запустить генерацию ещё раз, если что-то не понравилось.