Как сохранить единообразие персонажей в Meshy

Если вы создаёте сцену, комикс или игру с повторяющимся персонажем, вам захочется, чтобы этот персонаж выглядел одинаково при каждой генерации в новой позе или обстановке. Meshy не сохраняет постоянную «идентичность персонажа» между отдельными генерациями, но несколько привычек рабочего процесса позволяют приблизиться к этому очень близко. В этой статье рассказывается, что на самом деле означает единообразие в Meshy, как использовать референсные изображения, пользовательские позы, повторное использование текстур, а также о известных ограничениях.

Каждая генерация в Meshy создаётся независимо, поэтому «единообразие» означает намеренную подачу одних и тех же визуальных ориентиров (референсных изображений, промптов и текстур) в каждую генерацию, а не полагание на способность модели запоминать персонажа между сессиями.

Используйте Image to 3D с одним и тем же чистым референсным изображением (или небольшим согласованным набором ракурсов) для каждой позы или сцены с этим персонажем. Сохранение одинаковой компоновки, освещения и цветовой палитры референса между генерациями — это самый эффективный способ добиться совпадающего внешнего вида.

Используйте первый успешный результат как референс на будущее. Как только вы получите генерацию, которая вас устраивает, отрендерите её или сделайте скриншоты с нейтральных ракурсов — спереди, в 45° три четверти и сбоку — и используйте эти изображения в качестве референсных в дальнейшем. Это привязывает последующие генерации к результату, который вы уже одобрили, а не к внешнему концепт-изображению, которое может трактоваться по-разному.

Охватите стандартную тройку ракурсов. При формировании набора референсных изображений стремитесь к минимум трём ракурсам: спереди, в 45° три четверти и сбоку. Они дают модели достаточно информации, чтобы восстанавливать единообразный силуэт, пропорции и детали поверхности в новых позах.

Для вариантов одного и того же персонажа в позах сначала сгенерируйте нейтральную модель в A-позе или T-позе, а затем используйте генерацию пользовательской позы, чтобы изменить её положение, вместо того чтобы генерировать заново каждый раз — это сохраняет стабильность пропорций и деталей между позами.

Ведите краткую письменную справку об определяющих деталях персонажа (цвета, аксессуары, пропорции) и используйте эту точную формулировку в каждом промпте. Небольшие изменения формулировок между генерациями — распространённая причина визуального расхождения.

Будьте максимально конкретны в отношении цвета, пропорций и стиля. Расплывчатые описания оставляют модели пространство для разных трактовок при каждом запуске. Вместо «синяя броня» пишите «кобальтово-синяя броня, не королевский синий». Вместо «мускулистый» пишите «коренастое телосложение с широкой грудной клеткой». Также зафиксируйте стилевую опору — например, «стилизованный low-poly, не реалистичный», — чтобы художественная манера оставалась стабильной между генерациями.

По возможности повторно используйте или применяйте один и тот же набор текстур для вариантов поз, вместо того чтобы позволять каждой генерации создавать текстуры независимо — это сохраняет единообразие материалов и цветов во всём наборе.

Meshy в настоящее время не гарантирует попиксельного совпадения между отдельными генерациями, особенно для мелких черт лица или сложных аксессуаров. Ожидайте небольшой ручной доработки (с помощью инструментов редактирования Meshy или вашего предпочтительного DCC/движка) для максимального совпадения во всём наборе поз.

Совет по уменьшению расхождения черт лица: Лицо — самая сложная область для сохранения единообразия, поскольку небольшие вариации генерации наиболее заметны в мелких деталях. Использование плоского или стилизованного художественного стиля (вместо гиперреалистичного) значительно уменьшает расхождение черт лица между генерациями — микродеталей, которые можно потерять, просто меньше. Если точность лица персонажа критична, рассмотрите стилизованную эстетику на этапе генерации и добавьте реалистичность в вашем DCC afterwards.

Когда у вас есть единообразный набор поз, экспортируйте каждый вариант с одинаковыми настройками масштаба и ориентации, чтобы они правильно совмещались при импорте в Blender, Unity или Unreal Engine для финальной сборки сцены или анимации.

Нет — каждая генерация независима. Единообразие достигается повторным использованием одного и того же референсного изображения, формулировки промпта и текстур между генерациями.

Сгенерируйте нейтральную модель в A-позе или T-позе один раз, а затем используйте генерацию пользовательской позы, чтобы изменить её положение, вместо того чтобы генерировать заново для каждой позы.

Не идеально — мелкие черты лица и небольшие аксессуары могут расходиться. Заложите время на небольшую ручную доработку наиболее близких вариантов.

Нет. Реферсное изображение направляет генерацию, но не фиксирует её — каждый запуск имеет присущую вариативность. Совместное использование одного и того же референсного изображения, промпта и стилевой опоры даёт наилучшие шансы на близкое совпадение, но некоторая вариативность между запусками неизбежна.

Да. Экспортируйте карты текстур (albedo, roughness, normal) из первой генерации и вручную примените их к последующим вариантам поз в вашем DCC (Blender, Maya и т. д.). Это самый надёжный способ сохранить идентичность материалов во всём наборе поз — геометрия может немного отличаться, но текстуры будут идентичными.