OpenAI выпустила подробный гайд по созданию видео в Sora 2.
Компания отмечает, что для достижения наилучшего результата нужно использовать подробные промты, которые учитывают все детали.
Например, для создания кинематографических кадров можно прописать в промте параметры камеры, цветокоррекции и звука.
Если вы не хотите использовать большие промты, OpenAI рекомендует детально уделять внимание хотя бы одному параметру. К примеру, можно подробно расписать, как Sora 2 должна имитировать движение камеры:
Камера: широкий кадр, низкий ракурс.
Глубина резкости: мелкая (резкость на объекте, размытый фон)
Освещение + палитра: теплая подсветка с мягким контуром.
Также следует точно прописывать действия в кадре:
Актёр делает четыре шага к окну, останавливается и в последнюю секунду задергивает занавеску.
Все диалоги и фоновые звуки нужно расписывать так, как будто вы составляете настоящий сценарий:
Тесная комната без окон со стенами цвета старого ясеня. С потолка свисает единственная голая лампочка, ее свет падает на исцарапанный металлический стол в центре. Два стула напротив друг друга. С одной стороны сидит детектив, плащ висит на спинке стула, глаза острые и немигающие. Напротив него сидит подозреваемый, сигаретный дым лениво клубится к потолку. Наступает тишина, нарушаемая лишь слабым гулом верхнего света.
Диалог:
– Детектив: «Ты лжешь. Я слышу это в твоем молчании».
– Подозреваемый: «А может, я просто устал говорить».
– Детектив: «В любом случае, ты заговоришь до конца ночи».
Один из эффективных способов написания промтов — разделить различные виды информации, которую должна использовать модель. Это не универсальный рецепт успеха, но он даёт чёткую структуру и помогает ей быть последовательной.
📍 Промт
[Описание сцены прозой простым языком. Опиши персонажей, костюмы, декорации, погоду и другие детали. Пишите как можно подробнее, чтобы видео соответствовало вашему замыслу.]
Кадр камеры: [композиция и угол съёмки, например: широкий план, уровень глаз]
Настроение: [общий тон, например: кинематографично и напряжённо, игриво и тревожно, роскошное ожидание]
Действия:
– [Действие 1: чёткое, конкретное движение или жест]
– [Действие 2: Еще один отчетливый момент в видео]
– [Действие 3: Еще одно действие или диалог]Диалог:
[Если в кадре есть диалог, добавь короткие естественные реплики здесь или в списке действий. Делай их короткими, чтобы они уместились в длину клипа.]
OpenAI подчеркивает, что это всего лишь рекомендации, которые не гарантируют получение самого лучшего результата. Зачастую промт надо корректировать, а иногда делать 2–3 генерации.
