Арт-нейросети

А вот статья, где про это рассказывается, там тоже можно послушать примеры - https://google-research.github.io/seanet/musiclm/examples/

Хотелось бы, конечно, руками потрогать, чтобы самому составить мнение, а так - красивая статья, да.

Из плюсов - обещают, что сеть понимает детали запроса, типа - на каком инструменте играть, или что в композицию нужно вставить соло.

Из минусов - говорят, что сеть может просто взять существующую мелодию из тех, что ей скормили. Кроме того, сеть пытается "генерировать" голос, но не очень успешно, хотя в примерах есть вполне успешные насвистывания мелодий.

Продолжаю изучать инструментарий Stable Diffusion Web UI. Выбор пал на Нахиду, а отправной точкой послужил данный арт:

Поместил его в раздел img2img и прогнал пару десятков раз в поисках удачного кадра

Использовал промпт innocent child 12 year old, elven ears, (SWF: 1.5) with green eyes and white hair holding a green leaf in front of her face and looking at the camera, Chizuko Yoshida, сrossdraws global illumination, rayonism, opened mouth, [[smirk]], eyebrow up, (butterflies around, touching a butterfly:1.2), photography, 8 k, highly detailed, smooth, sharp focus, depth of field, bokeh, colored, moody light, aesthetic, very inspirational, by artgerm greg rutkowski alphonse mucha, extremely detailed, Nikon D850, award winning photography

lora nahida_cross-shaped_pupils_finger_frame

модель projectUnrealEngine5

остальные параметры менял по ходу дела.

Так как я сразу решил, что изображение будет с рабочим разрешением 1920х1080, потребовалось расширить изображение в ширину, добавив деталей, а заодно и поправить руку с ухом в inpainting.

Также сделал видео, чтобы продемонстрировать процесс редактирования кадра с исходного состояния до готового.

Надеюсь данный материал окажется полезным для начинающих нейрохудожников.