Сайт — https://colab.research.google.com
Сфера использования : Дизайн, Иллюстрация, Электронная коммерция.
Цель : Создать изображение.
Изменение : Текст в изображение.
DALL-E 2 на LAION — это крупномасштабная модель преобразования текста в изображение для DALL-E 2 Pytorch, которая обучается на наборе данных LAION. Модель отличается от DALLE2-Inference-Demo.ipynb и не связана с OpenAI. Несмотря на то, что она обучена всего на 0,5% от объема данных, использованных для обучения DALLE2 от OpenAI, она способна на производство впечатляющих результатов. У модели отсутствуют upsamplers, поэтому она способна генерировать изображения только размером 64×64, однако было применено замещение SwinIR для создания изображений размером 256×256, что в целом улучшает качество результата.
Модель была обучена благодаря щедрому пожертвованию вычислительного времени от LAION и его спонсоров, в частности StabilityAI. Она была обучена на эстетическом подмножестве набора данных LAION2B. Несмотря на свои ограничения, она обещает достичь высоких результатов и может стать новым словом в области нейросетей и искусственного интеллекта.