"Осовременивание",колоризация и создание короткого видео из фотографии,при помощи нейросети Grok AI
Нейросеть Grok AI можно использовать для синтеза статической картинки в короткое 5 мин. видео. Существует два варианта программы в виде веб версии и приложений для android или ios.В данном случае я использовал приложение Grok AI для смартфона на android.
Загрузите любую статическую картинку в раздел приложения (Imegine) и программа сразу автоматически создаст,по умолчанию, короткое видео из вашей картинки.
Но это будет автоматическое видео,как захочет сама программа,без вашего желания.
Что бы объекты на картинке изменялись и совершали какие либо действия,нужные вам,потребуется написать "сценарий действий",так называемый "prompt"(в текстовом поле под картинкой).
То есть вы должны текстом описать программе,что бы вы хотели,что бы персонаж исполнял в синтезированном программой видео ролике.
Можно задать любые движения,поменять цвет,добавить персонаж,фон,перенести объект в другое место,заменить одежду и т.д. и все это будет синтезировано программой,по вашему сценарию,в более менее реалистичное видео.
Можно писать сценарий на русском языке,программа понимает.
Для примера:
У вас на картинке изображен стоящий человек,вы бы хотели,что бы на видео,созданном программой,человек садился на скамейку,смотрел вам в лицо,улыбался,махал рукой,в знак приветствия.
Пишите,в произвольной форме,под картинкой свой "сценарий"("prompt"),на русском языке
"В кадре(на фото),рядом с мужчиной(за мужчиной и т.д.) находиться скамейка.Мужчина садиться на скамейку,лицом к зрителю(или камере).Улыбается.Поднимает правую(левую)руку и приветствует зрителей."
Писать можно как угодно,главное четко обозначить,какие действия и в какой последовательности вы хотите,что бы программа произвела с персонажем в кадре.
Программа создаст первое короткое(5 сек.)видео по вашему сценарию,нейросеть не всегда с первого раза создает удачное видео,для этого вы еще раз нажимаете (создать)и программа синтезирует уже новый вариант и так несколько раз,пока вам не понравиться результат.
Теперь остановимся на сценарии(("prompt"),который был написан для синтеза видео из фотографии,которую я обработал в программе.
"Prompt"писался на русском языке.Один нюанс,если на фотографии изображена очень известная личность,то в начале нужно дать подсказку программе,написать имя персонажа,желательно на английском языке,тогда программа,более менее,не будет искажать черты и форму лица и головы.
"На фотографии изображен мужчина Joseph Stalin.
Фигура становиться цветной,современной.
Черты лица и форма головы Joseph Stalin не изменяются.
Мужчина переодевается в современный,модный костюм,черного цвета.
Обстановка меняется на современную.
Мужчина перемещается в современный офисный кабинет.
Мужчина сидит за столом.
Во рту мужчина держит курительную трубку,подносит ко рту и курит.
Из трубки идет дым.
На заднем плане современная обстановка в офисе.
Мужчина смотрит в камеру,поднимает правую руку,улыбается,приветствует зрителя."
На базе этого "Prompt" получился такой результат,причем не с первого раза,пришлось делать несколько попыток.
Можно было бы сделать видео длиннее,создавая новые ролики-продолжения по скриншоту с последнего кадра предыдущего ролика,который мы так же бы вставляли в программу и задавали сценарий.Например Сталин мог бы встать из за стола,пройти и сесть на диван,или выйти из комнаты и т.д. и т.п.
























