Нейросеть Midjourney как пользоваться
Объект :: Параметры (в последний раз!)
Возвращаемся к структуре промпта.
Итак, параметры можно определять самыми разными художественными стилями и техниками, параметрами освещения, моделями камеры, названиями софта для рендера и графических редакторов и даже названия популярных ресурсов и библиотек (behance, art station, etc). И даже можно задавать им числовые значения с помощью операторов -- и ::. В заключительной части еще несколько слов о том, как можно сотрудничать с Midjourney (Частично переведены с сайта разработчика и еще не проверены в бою).
- Объект Что, Где, Как — лучше писать главное в начале. Хотя, стоит признать, что иногда в самом начале описывают время суток и погоду и прочий стиль и свет и тоже нормально получается.
- Медиум — , painting, drawing, sketch, pencil drawing, w, woodblock print, matte painting, child's drawing, charcoal drawing, an ink drawing, graffiti, watercolor painting, fresco, stone tablet, cave painting, sculpture, work on paper, needlepoint.
- Материалы — пластик, шерсть, или диктатор из червяков - все получается.
- Стили —
//<..in style of> Библиотека художников с примерами изображений (их там реально тысячи, хотя многих любимых нет).
- Exel-Список художников, которых знает нейросеть, с референсами по стилю.
- Wiki-Названия художественных жанров и стилей.
Не только художники
- Хорошо работают упоминания литературных и киножанров и их героев, а художников вполне можно заменить именами режиссеров или названиями известных фильмов и сериалов. Вот, например, лошади в сериале Stranger Things:
Верхний ряд 1.-3. 4.
Нижний ряд1.-4
AI плохо понимает или игнорирует частицы “но”, "не", "ни", "кроме", "без" ("not", "but", "except", "without").
- Вместо: “a hat that’s not red” Писать: “a blue hat”
- Вместо: “a person but half robot” Писать: “half person half robot” (возможно, нам не стоило заказывать ai рисовать лежащую на диване "Машу" а нормально попросить "молодая женщина в черном викторианском платье "
-
- Вместо: “monkeys doing business” Писать: “three monkeys in business suits”
- Чтобы задать количество объектов, нужно использовать существительные в единственном числе или конкретные числа.
- Если гугл хорошо знает объект, пусть и вымышленный — сеть будет знать что ей делать: Попробуйте: wizard, priest, angel, emperor, necromancer, rockstar, city, queen, zeus, house, temple, farm, car, landscape, mountain, river; Попробуйте: “a sense of awe”, “the will to endure”, “cognitive resonance”, “the shores of infinity”, “the birth of time”, “a desire for knowledge”, “the notion of self”.
Это происходит потому, что нейронная сеть пытается выяснить, к какому типу относится объект, и она должна решить, какое слово представляет этот тип объекта. Например, когда мы написали "чувство благоговения", нейронная сеть подумала, что слово "благоговение" было правильным словом.
Часами листали аккаунт Weird Dall-E Mini Generations, где собраны самые невероятные картинки, сгенерированные нейросетью по заапросам пользователей? Новая программа на основе искусственного интеллекта тоже должна вам понравиться.
Недавно нейросеть Dall-E Mini буквально захватила сеть: пользователи до сих пор делятся огромным множеством изображений, которые та генерирует по запросам. Коллажей стало так много, что их отдельно собирают в твиттер-аккаунте Weird Dall-E Mini Generations — у него уже более миллиона читателей. Там, например, можно увидеть курящий под дождем куриный наггетс или запись с видеорегистратора, на которой хомяк-годзилла в огромной шляпе сомбреро атакует Токио.
Но теперь у детища связанной с Илоном Маском компании OpenAl появился конкурент — нейросеть Midjourney, которая 13 июля вышла в стадию открытого бета-тестирования. Чтобы воспользоваться ей, нужно лишь зайти на официальный канал в Discord и следовать инструкциям бота. Как и в случае использования Dall-E, вы вбиваете интересующий запрос на английском языке и дожидаетесь результата.
Алгоритм не сложный, но он на удивление быстр. На самом деле, на создание изображения птицы уходит примерно столько же времени, сколько и на его создание. Например, последние два предложения в этом видео были написаны менее чем за шесть секунд.
Результат:
Следующий эксперимент, — рендер 3d редактора Z-brush, но добавив к этому Прерафаэлитов, чтобы изображение наверняка получилось цветным:
Сохранять картинки из профиля одним кликом поможет сценарий к браузерному расширению Tampermonkey. Соответственно работает он не в дискорде, а в браузерной части - midjourney.com/app
/#id=27891.
Как протестировать Midjourney:
Для тестирования эксперимента вам нужен бот Discord под названием "TAMPERMOUTH" (тот же, который использовался нами в предыдущих тестах), затем откройте веб-сайт, на котором проводится эксперимент.
Первые результаты
Всем привет.
Сегодня в этой статье мы попытаемся шаг за шагом показать вам, как использовать модель нейронной сети. Мы будем использовать набор данных MNIST и изучим глубокую сверточную нейронную сеть с помощью Keras.
Ввод задания: /imagine prompt:
Итак, вы в канале midjourney и вы знаете как описать объект, его положение и окружение: “На диване лежит Маша, одетая, как обычно, в черное” (Здесь и далее “Три сестры”, А.П. Чехов)
On the sofa Masha is lying, dressed as usual in black
Маша одета по всем правилам сообщества, это хорошо. И вы сообщили цвет — это тоже хорошо. А вот “как обычно/as usual” и всякие темпоральности — это странный запрос для AI, генерирующего статичное изображение. Мы попробуем и с ним и без него, для этого обратимся к боту дважды:
один раз, когда он новый, и один раз, когда он старый.
В первом случае бот говорит: “Пришло время создать объект”. Объект еще не создан.
Как нейросеть Midjourney видит творчество художников Пабло Пикассо и Клода Моне
Полотна знаменитых художников сильно изменились в обработке нейросети Midjourney. По запросам пользователей искусственный интеллект показал битву на световых мечах в стиле Пабло Пикассо, героями картин Леонардо да Винчи стали роботы, а в работах Густава Климта поселился монстр Ктулху.
Нейросеть Midjourney — это сервис, подходящий для создания диджитал-артов по словесному описанию. В настоящее время ИИ находится в состоянии бета-тестирования, но почти каждый пользователь Сети может отправить заявку и получить приглашение на использование.
Участники тестирования ИИ решили проверить способности Midjourney в воссоздании стилей знаменитых художников. Благодаря нейросети можно узнать, как Пабло Пикассо написал бы битву на световых мечах из франшизы «Звёздные войны». Для этого нужно лишь дать нейросети конкретный запрос.
Я попросил Midjourney нарисовать битву на световых мечах в стиле Пикассо…
Пользователи Сети предположили, что в XXI веке главными героями чертежей и картин Леонардо да Винчи могли бы стать роботы. Нейросеть исполнила эту фантазию.
Гиперреалистичное изображение боевого робота в стиле Леонардо да Винчи.
Леонардо да Винчи. «Тайная вечеря роботов».
Небо со знаменитого полотна «Звёздная ночь» постимпрессиониста Винсента Ван Гога в исполнении нейросети раскинулось над высотными зданиями в австралийском городе Брисбен.
Панорама Брисбена в стиле «Звёздной ночи» Ван Гога. Хотя Брисбен не особо узнаваем, всё равно выглядит классно.
А импрессионист Клод Моне, как показала Midjourney, на своём полотне запечатлел огненные всполохи из горящих мусорных баков.
Горящие мусорки в стиле Моне.
Монстр Ктулху, выдуманный писателем Говардом Лавкрафтом, мог бы неплохо вписаться в эстетику модернизма в исполнении художника Густава Климта.
Ктухлу в стиле Климта.
Midjourney передала уникальный стиль каждого художника и реализовала запросы пользователей, а картинки выглядят завораживающими и пугающими одновременно.
Ранее Medialeaks рассказывал, как нейросеть DALL-E mini изменила героев FNAF и Poppy Playtime. На пикче ИИ объединила Хагги Вагги со Слендерменом.
В команду Heroes of Olympus была добавлена собака.
Нейросеть Midjourney, как пользоваться
Краткое руководство как пользоваться нейросетью Midjourney.Даже такого базового понимания вполне хватит, чтобы залипнуть на часок и получить на впечатляющие результаты. А вот для проф.работы стоит уж прочесть полное оф.руководство, там есть много интересного.
Итак, нейросеть Midjourney работает на основе дискорда, так что вам нужно будет перейти на соответствующий дискорд-канал сюда
- ищем любой канал с newbie (например, newbie-20). Панель со списком каналов будет слева, присоединяетесь.
- пишем в чате /imagine, у вас выпадает сообщение /imagine prompt: вот после prompt вы и говорите сети, что надо создать. Можно писать через запятую. Советую пролистать вверх ленту с изображениями, там видны запросы, они помогут понять что стоит добавить. Вместо "battle robot" напишите "copper battle robot on the run, oriental, blood red sky". Будьте точнее, результаты будут удивительнее
- дальше вам надо отследить свою картинку в общем потоке изображений других пользователей. Проще всего сделать это, щелкнув правой кнопкой и скопировав ссылку, потом просто откройте её в новом окне.
- Mindjourney предложит вам 4 изображения. Дальше вы можете кнопками u1,u2,u3,u4 увеличить одно из них или же кнопками v1,v2,v3,v4 улучшить. Если вы выберете второе, то итог опять надо будет отлавливать в чате (если кто знает как в Discord удобнее отслеживать свои сообщения, прошу черкнуть в комменты). Когда итоговое улучшенное изображение окончательно вас устроит, то стоит нажать max upscale, чтобы увеличить его. Потом все, вы можете просто сохранить его.
- Если результат вам не понравился, то жмите на кнопку ⟳
Напоследок отмечу что все изображения будут в вашем discord-аккаунте, так что можно потом сохранить их и оттуда.
Сейчас есть ограничение на 25 запросов на создание. Впрочем, никто не мешает вам завести новый аккаунт -) Впрочем, безлимит стоит 30$ - совсем недорого.
Кстати, я уже рассказывал про программу, которая с помощью нейросети увеличивает изображения. Если у вас есть старое маленькое фото, то она может здорово помочь.
Просто скопируйте его ссылку, а затем следуйте инструкциям. Это называется обработчиком изображений Midjourney. Это программа, которая сканирует изображения и следит за тем, чтобы каждое изображение было хорошо обработано.
Результат Upscale:
Код написан в функциональном стиле. Код прост в понимании и обслуживании. Я с нетерпением жду вашего прогресса.
Image prompt
Если взять ссылку на изображение, .jpg или .png, и сделать ее частью текстового prompt, то можно получить любопытные результаты. Текстовый промпт не будет вести себя как фильтр по отношению к загружаемой картинке. Скорее он рассматривает такую картинку как источник стиля, а не наоборот.
Для теста Image Prompt мы добавили к Маше вот эту картинку, ее нейросеть создала нам днем ранее.
iw (image weight) это насколько подгруженный png или jpg в начале промпта повлияет на результат. По умолчанию оно 0.25, мы берем больше.
И вот что получилось:
*В этом промпте мы поменяли местами "маша" и "диван" — без этого Машу было не видно.
Дальше начинаются метания: может быть что диван Маши находится в лесу? Запросто. А можем мы представить, что он залит утренним светом? Конечно. И еще можем сообщить ему стиль, имя художника, эпоху — чтобы наша Маша была на стиле. И это вторая часть prompt-задания, которую пока умеет писать относительно небольшая группа людей, и вы сейчас войдете в число этих немногих.
Для этого мы должны показать Маше что-то особенное.
Итак, мы добавляем изображение из папки и называем его "солнце", потому что сегодня солнечно. Мы даем Маше цветовой код, и он увидит несколько звездочек. Что еще нам нужно знать?
Пишем в строке для ввода:
/Imagine prompt: On the sofa Masha is lying dressed as usual in black
нажимаем ввод, изображение улетает боту. И во второй раз:
/Imagine prompt: On the sofa Masha is lying, dressed in black
Желтой стрелочкой на картинке выше показано, где у вас в Discord вся личная переписка с ботом. Берите обязательно! Пригодится, чтоб не крутить ленту бесконечно, ведь в канале вы создаете изображения параллельно с другими пользователями и их результаты вам тоже видны. Засекретить свои результаты можно, но это стоит отдельных денег. Здорово то, что вы можете видеть, как работают другие, как устроены их промпты, и даже лучше — можете брать сделанные ими изображения и докручивать их самостоятельно;
нет необходимости нанимать дорогостоящее программное обеспечение.
Вы также можете изменить цвета вашего изображения после нажатия клавиши enter.
Для начала вам нужно всего лишь ввести изображение и нажать клавишу Enter. Чтобы сделать его более красочным, введите изображение и снова нажмите клавишу Enter.
Стили, Оптика и Рендер.
Кто придумал дурацкие названия вроде “octane render” или “v-ray” сказать невозможно — просто разный софт создавался, развивался, а потом по изображениям, созданным с его помощью, и их метаданным учили нейросети. В итоге вышло так, что AI понимает многие слова, которых живой человек не знает или не помнит. Например параметры хранящиеся в exif. Посмотрите на этот величайший из читсетов, — он показывает как реагируют на разные волшебные слова нейросети CLIP и VQGAN.
Если пользоваться этими словами, можно получить что-нибудь удивительное. Здесь мы попросили mj включить параметры рендера из 3d редактора Maya:
3d-редактор
Если вы уже знакомы с рабочим процессом, вы можете сохранить выходные данные вашей модели нейронной сети в виде анимации. Это может быть как видео, так и изображение. Вы также можете загрузить его обратно в Maya и снова начать анимировать.
Разговорный минимум
На языке mj вам нужно запомнить всего два знака, это двойное двоеточие
::
и двойное короткое тире без пробела
--
между ними.
Домик на Discord
Чтобы начать генерировать изображения из текста c нейросетью Midjourney, вам нужен аккаунт на Discord. Создатели выбрали его в качестве фронтэнд решения (а не стали пилить апп). Впрочем сайт с пользовательскими аккаунтами и фидом у них тоже есть. Про Discord мы уже рассказывали, он классный: что-то среднее между мессенджером и площадкой для аппов (дискорд-ботов). Здесь все заточено не для продвижения отдельных каналов, а во имя взаимодействия и сотрудничества пользователей. Конечно, главные площадки для экспериментов с нейросетями и в т.ч text-to-image, это ноутбуки в Google Collab и репозитории Github. Но давайте оставим это на продвинутый уровень и курс, а пока сосредоточимся на Midjourneyи ее возможностях.
Базовый подход аналогичен тому, как мы тестировали нейронные сети в нашей предыдущей книге, и в этом случае каждое изображение извлекалось путем разделения текстовой строки на слова, а затем преобразования списка слов в вектор.
-- Тире и тире
После него встречаются разные числовые параметры:
-- ar 9:16 — уже знакомый вам aspect ratio;
--h и --w (высота и ширина, можно использовать один параметр)
.png)
-- iw5 (image weight) вес фотографии референса, который по умолчанию 0.25. К фотографии нельзя добавить обычный значок веса :: - тк тогда сломается ссылка на фотографию;
--120mm (фокусное расстояние)
--s - стилизация и -q -качество. По умолчанию --s2000, предельные значения до 60000 , а качество --q1 и до пяти. Наглядно тут и тут (фотоаппарат Kodak)
Но иногда его используют и вместо разделителя с весом*, например в --no (например --no people = people::-0.5 ) поди пойми --no dof — запретить глубину (depth of field); -- no blur попросить не блюрить;
Я хотел бы сказать спасибо всем вам, кто оказал мне такую большую помощь.
!!frag-33/38
Comments
Post a Comment