«Триколор Нейролаб» существует чуть больше двух лет. Нейросети, способные генерировать качественное видео, появились сравнительно недавно, но и до этого мы активно использовали их в различных художественных концепциях. Например, мы выпустили проект по мотивам русских народных сказок для «Триколора», а также сделали передачу, в которой искусственный интеллект рассказывает про искусственный интеллект для компании «Первый ТВЧ». Для нее сгенерировали аватар ведущего с помощью ИИ. Мы также приняли участие в производстве многосерийного фильма «Декабристы», посвященного событиям 1812 г. Для этого проекта на основе исторических материалов – писем, портретов, докладов - мы создали 24 аватара членов Северного и Южного общества. Премьера сериала «Декабристы» прошла в конце прошлого года на канале «Арсенал».
Да, рассматривали и другие произведения классиков, например, одним из вариантов были «Вечера на хуторе близ Диканьки». Решили, что хотим воспользоваться всеми возможностями искусственного интеллекта и смоделировать наводнение в Петербурге. Очевидно, что такое можно сделать и в студии, выполнить с помощью компьютерной графики, но это очень дорого. С помощью нейросетей «воплотить» стихийное бедствие намного проще. Плюс нам захотелось совместить в проекте сразу несколько жанров: и фэнтези, и лавстори, и исторический фильм, и драму… Искусственный интеллект помог и в этом.
Когда мы стартовали, нам такие проекты не были известны. Сейчас, конечно, они уже появились.
Для создания художественного фильма требуется большая съемочная группа, в которую входят режиссер, актеры, помощники режиссера, операторы, гафферы, осветители, костюмеры, рабочие и так далее. В большом проекте количество участников съемочной группы может достигать двухсот и более человек, в документальном фильме также могут быть задействованы десятки участников. У нас эта часть производства фильма была заменена генерациями, и весь проект был сделан силами нескольких сотрудников. Что касается времени, нельзя сказать, что мы как-то сильно сэкономили, результат получился сопоставимый с традиционными съёмками. Если привлечь больше специалистов к ИИ-генерациям, то и фильм удалось бы сделать значительно быстрее. С точки зрения финансирования ресурсов для натурных съёмок потребовалось бы много. Теоретически можно организовать съёмки в центре Петербурга, но, конечно, наводнение снять не получится. Его пришлось бы моделировать студийными съемками с постройкой декораций, дорабатывать с помощью компьютерной графики, что вышло несравнимо дороже. С задействованием такого количества ресурсов не было бы смысла снимать короткометражку – нужно делать полный формат с возможностью показа на большом экране.
В самой поэме мало сцен. Александр Сергеевич описывал мысли и чувства главного героя, а это всегда сложно показывать, поэтому мы взяли за основу идею, а все сцены и диалоги придуманы сценаристом. В соответствии с текстом Пушкина сделаны две сцены: когда Пётр Первый говорит, глядя на Петербург: «Отсель грозить мы будем шведу» и погоня грозного Медного всадника за Евгением. В тексте поэмы есть посылы для некоторых других сцен. Но их все равно приходилось придумывать сценаристу.
Музыкальное сопровождение, голоса, и, конечно, видео – это стопроцентная работа ИИ. Мы использовали разные нейросети – в основном Kling, но иногда применяли Sora или Veo. Были ситуации, в которых одна нейросеть не справлялась с поставленной задачей и нам приходилось переключаться на другую.
Стандартные движения, когда человек просто сидит, стоит, или идет, достаточно хорошо получаются у всех нейросетей. Но у нас есть сцена, в которой главного героя вытаскивают из воды в лодку. Она оказалась очень сложной для генерации и с ней пришлось изрядно повозиться.
Режиссер готовила подробное описание того, что и как должно выглядеть в кадре. На основе этого описания создавалась раскадровка, его же брали за основу и для создания промпта. Промпт готовили на английском языке, потому что нейросети понимают промпты на английском значительно лучше, чем на русском.
Этапы работы над фильмом.
С одной стороны, проще, потому что людей и организационных моментов намного меньше. С другой — сложнее, не существует устоявшегося производственного процесса. Пока мы работали, технологии развивались, чуть ли не раз в неделю у различных нейросетевых сервисов выходили новые релизы с новыми возможностями. Поэтому мы начали с тех сцен, где меньше героев и каких-то сложных, нестандартных движений, а сложные с точки зрения динамики сцены делали в самом конце. Нам приходилось придумывать технологический процесс на ходу, совершенствовать его.
Еще на этапе подготовке сценария мы понимали, что это будет сделано с помощью ИИ, поэтому какие-то чересчур сложные сцены в него старались не включать. Наверное, что-то мы отбросили, но в целом, поскольку это не съёмка, всегда есть возможность прерваться и сгенерировать заново. Кроме того, собственно при генерации делается много подходов – может быть и 10, и 30 генераций одного кадра, из которых потом делается выбор.
Мы не ставили своей задачей соблюдать историческую достоверность. Известно, что Петербург в начале XIX века выглядел совсем не так, как сейчас, и это отображено на картинах, гравюрах. Тот же Исаакиевский собор выглядел совсем по-другому. Мы решили, что будем воспроизводить тот Петербург, который зритель узнает сейчас. Ну, и отчасти нам помогали нейросети – мы ставили задачу изобразить, например, лавку старьёвщика в Петербурге в XIX веке, и нам предлагались различные варианты, из которых мы выбирали те, которые считали подходящими, опираясь на известные нам образцы. У нас в фильме есть известные исторические деятели, например, Александр I или Бенкендорф – вот их изображения мы создавали по портретам, и они выглядят достаточно достоверно.
В конце прошлого года фильм вышел в онлайн-кинотеатре «Триколор», и среди всех зрителей, которые посмотрели фильм больше минуты, досматриваемость составила 35-38 %, что является неплохим результатом. Кроме того, мы провели опрос среди зрителей – около 150 человек мы расспросили о том, как они воспринимают фильм. 69 % опрошенных готовы рекомендовать его к просмотру: 43% посоветовали бы его посмотреть тем, кто интересуется новыми технологиями, а 26% отметили фильм обязательным к просмотру. Также мы отметили, что фильм лучше воспринимает женская аудитория.
Пока нет. Сейчас мы работаем над анимационным проектом, но тоже с помощью нейросетей.
Мне очень понравилась работа над сценами наводнения, которая в полной мере показывает возможности нейросетей. И кроме Медного всадника, в нашем фильме «оживают» и другие известные скульптуры – я считаю, что это удачная находка.
Увидеть короткометражный проект «Медный всадник» можно в мобильном приложении «Триколор Кино и ТВ» и на сайте онлайн-кинотеатра. Фильм доступен бесплатно и без регистрации.
