Почему проще сравнивать в workflow?
Если сравнивать модели вручную, условия легко сбиваются. Вы немного поменяли формулировку, выбрали другой формат кадра или забыли приложить референс, и уже непонятно, чем вызвана разница в результатах: моделью или вашими правками. В workflow промт и референс вводятся один раз и сами попадают во все ветки. Готовые изображения лежат рядом на одном пространстве, их удобно смотреть вместе. Сохранённую схему можно запустить снова, когда выйдет новая версия модели.
Что должно быть одинаковым
Между ветками должна отличаться только модель. Всё остальное оставьте одинаковым: промпт, референс, соотношение сторон и разрешение. Для видео добавьте длительность и частоту кадров, если их можно задать. Если каким-то моделям нужна другая формулировка промпта, сначала запустите один общий вариант для всех, а подогнанные под каждую модель версии сделайте вторым кругом и подпишите отдельно. Seed (число, от которого зависит случайность генерации) полезен, когда нужно повторить результат в одной и той же модели. Для сравнения разных моделей он ничего не даёт: с одним и тем же seed они всё равно выдадут разные картинки. Одна генерация мало что говорит о модели, ведь результат может оказаться случайно удачным или неудачным. Если бюджет позволяет, запускайте каждую модель два или три раза и сравнивайте лучший и худший результат. Одна модель может иногда выдавать отличные кадры, но часто промахиваться, другая каждый раз даёт ровный средний результат. Для разных задач подойдут разные.
Как собрать схему
Первым блоком идёт вход: промпт и при необходимости референс. От него отходят параллельные ветки, в каждой одна нода модели с одинаковыми настройками. Назовите каждую ноду по модели, иначе через неделю придётся гадать, что за ветка перед вами. Результаты выведите рядом. Начните с трёх моделей: быстрой, самой качественной и одной нестандартной. Пять веток стоят дороже и усложняют решение. Если схема нужна на постоянной основе, оставьте изменяемыми только промпт и референс, остальное зафиксируйте.
Как оценивать
Чтобы выбор не зависел от настроения, заранее решите, по чему вы будете оценивать результаты. Через час после просмотра вы уже не вспомните, почему понравилась именно эта картинка, а записанные критерии это объяснят. Достаточно четырёх или пяти пунктов, каждый оценивайте по шкале от одного до пяти. Для изображений можно взять такие пункты: насколько точно модель выполнила промпт, как нарисованы детали (руки, текст, мелкие предметы), как выглядят стиль и свет, есть ли странные искажения, подойдёт ли картинка для дальнейшей обработки, например для увеличения или анимации. Для видео добавьте, насколько естественно двигаются объекты, остаётся ли персонаж одним и тем же от кадра к кадру, нет ли дрожания и деформаций, и сделала ли камера то, о чём вы просили. Какие пункты важнее, решите до просмотра результатов. Для рекламного ролика обычно важнее стабильность и аккуратность, для творческого проекта выразительность. Если определить это заранее, вы не подгоните оценки под картинку, которая просто понравилась с первого взгляда. Оценки удобно собрать в таблицу: модели записываются по строкам, критерии по столбцам, справа оставьте место для заметок. Короткая заметка вроде «хорошо рисует свет, но путает пальцы» часто полезнее, чем одна цифра.
Пример: изображения
Задача: обложка статьи с человеком за рабочим столом и надписью на экране ноутбука. Ветки: GPT Image, Flux, seedreame, промпт и соотношение сторон одинаковые. Модели обычно расходятся в понимании сложной композиции, фактуре фотореализма и читаемости текста. Кто выиграет на вашем промпте, покажет только запуск. Для стилизованной графики добавьте Recraft. Если нужна детализация для печати, пропустите победителя через Topaz и сравните версии после апскейла: разрыв между моделями иногда сокращается, и хватает более дешёвой.
Пример: видео
Видео стоит дороже, поэтому сравнение идёт в два этапа. Сначала короткий ролик в минимальном разрешении: один исходный кадр, одно описание движения, три модели, например Kling, Seedance и Grok. Смотрите, как модель выполняет команду для камеры, насколько естественно движется объект и сохраняется ли внешний вид персонажа. Затем одну или две лучшие модели запустите на полной длительности и в нужном качестве. Seedance часто хвалят за динамичные сцены, а Kling за кинематографичность, но это гипотеза для проверки на вашем кадре.
Что делать с результатом
Когда сравнение закончено, запишите выводы в короткую памятку: какая модель лучше подошла для какой задачи. Например, одна модель хорошо справилась с обложками с текстом, другая дала более живой фотореализм, а для быстрых черновиков хватило самой дешёвой. В следующий раз вы точно будете понимать какая модель нужна для решения вашей задачи.
