Сайт — https://colab.research.google.com
Сфера использования : Дизайн, Иллюстрация, Реклама и SMM, Разработка игр, Анимация, Электронная коммерция, Производство фильмов.
Цель : Создать видео, Создать изображение.
Изменение : Текст в видео.
Нейросеть Disco Diffusion Warp — это разработка, которая предназначена для генерации видео с морфинг-кадрами. Эта версия нейросети, известная как Disco Diffusion v5.2 Warp, предлагает более плавные результаты, чем обычные методы DiscoDiffusion.
В чем заключается особенность данной функции? Возьмем первый кадр, применим к нему обычную диффузию в качестве изображения с фиксированными шагами пропуска. Затем мы искажаем его с помощью карты оптического потока во второй кадр и смешиваем его с оригинальным вторым кадром видео. Таким образом, мы получаем стиль сильно стилизованного первого кадра (искаженного соответственно) и содержание второго кадра (для уменьшения артефактов деформации и предотвращения переизбытка).
Для создания видео с гладким и безшумным результатом можно использовать настройки оптического потока видео. Обратите внимание, что в данной версии блокируется функционал оценки глубины и 2D/3D анимации для устранения конфликтов имен при импорте.
Disco Diffusion Warp представляет собой непосредственное улучшение модели диффузии Кэтрин Кроусон, хорошо подогнанной для изображений размером 512×512. В случае возникновения проблем предлагается присоединиться к серверу Discord Disco Diffusion или обратиться к разработчикам на Twitter.
Эта нейросеть объединяет возможности OpenAI и CLIP для связи текстовых запросов с изображениями, обеспечивая более быструю и качественную генерацию в сравнении с предыдущими версиями. Disco Diffusion Warp — это свежий шаг в развитии искусственного интеллекта, приносящий новые возможности и улучшения в области создания и обработки видео.