В этом видео я покажу четыре способа получения промпта из фото, два из которых связаны с использованием ComfyUI, один основан использовании нейросети, а еще один используя скрипт.
А также покажу как установить, настроить и создать workflow в ComfyUI для модели DeepSeek Janus Pro, способной извлекать промпты из изображений для последующей генерации похожих на исходник своих фото.
Для этого вам понадобятся следующие ссылки на модели:
Модель Janus-Pro-1B: https://huggingface.co/deepseek-ai/Janus-Pro-1B/tree/main
Модель Janus-Pro-7B: https://huggingface.co/deepseek-ai/Janus-Pro-7B/tree/main
Вы сможете, используя мои инструкции, заметно улучшить качество получаемых промптов даже на маленькой модели Janus-Pro-1B.
Помимо этого, я покажу рабочий процесс другой модели по извлечению промптов из изображений - Florence2, отметив ее сильные и слабые стороны. Сравню качество получаемых с помощью Florence2 промтов с аналогичными от Janus-Pro.
Еще покажу хорошую нейросеть, способную предоставить на основе ваших фото подробные, детальные и качественные промпты - сервис бесплатный, но с суточным лимитом на бесплатное использование.
Ну и коснемся и обсудим возможность получения промптов из изображений, используя Python-скрипт модели BLIP-2. Выскажу свое мнение и о нем.
Таймкоды:
00:01 - Анонс задач, рассматриваемых в видео
00:19 - Рабочий процесс Florence2 в ComfyUI. Плюсы и минусы данного метода получения промпта из изображения.
01:48 - Установка, создание рабочего процесса и настройка Janus-Pro для ComfyUI. Необходимые условия, плюсы и минусы в работе с ним.
13:53 - Рассматриваем нейросеть, способную выдавать качественные промпты из изображений. Условия и примеры работы с сервисом.
15:21 - Python-скрипт модели BLIP-2
19:03 - Подводим итоги и делаем выводы.
🎥 Весь плейлист "My ComfyUI": https://www.youtube.com/playlist?list=PLLNyLQa76X7JbSPrZl_tSFMWtTIZ-Crcf
🎥 Весь плейлист "Content Creator": https://www.youtube.com/playlist?list=PLLNyLQa76X7LdvbUSTBK_ODvGW1MLNo4i
➣ Telegram: https://t.me/LikeSpiderAI (публикую некоторые лайфхаки, фишки, а также важные новости с сфере AI - очень интересно!)
#ИИ #нейросети #гайд #ai #ГенерацияКонтента #ПромптФото