Виправлення проблем з позою, обличчям та руками персонажа в Meshy

Спотворені руки, деформовані обличчя та неочікувані пози — це одні з найпоширеніших проблем під час генерації персонажів. У цій статті пояснюється, чому виникають ці проблеми та як отримувати чистіші та послідовніші результати в Meshy.

Якість вхідних даних найбільше впливає на якість пози вашого персонажа. Meshy інтерпретує ту позу, силует і пропорції, які видно на вашому референсному зображенні або які подразуміваються у вашому запиті, тож неоднозначні або неякісні вхідні дані призводять до неоднозначних чи спотворених результатів.

• Використовуйте чітке, добре освітлене референсне зображення, на якому персонаж повністю видимий і кінцівки не обрізані.

• Уникайте заважаних фонів, предметів, що перекривають один одного, або інших людей у кадрі — це може заплутати визначення пози та кінцівок.

• Референсне зображення в повний зріст анфас зазвичай дає надійніші результати, ніж зображення під кутом або часткове.

• Порада: використовуйте функцію Image-to-Image у Meshy, щоб очистити або оптимізувати референсне зображення перед надсиланням його в Image to 3D. Краще скомпоновані та якісніші вхідні дані безпосередньо покращують результати для рук та обличчя — особливо для персонажів із складними деталями чи аксесуарами.

Якщо вам потрібен персонаж у певній, передбачуваній позі (наприклад, для ригінгу), не покладайтеся на опис пози в текстовому запиті — натомість використовуйте вбудовану функцію Pose Control в Meshy у робочій області Image to 3D, яка підтримує A-Pose, T-Pose та повністю довільне налаштування пози за допомогою керування суглобами.

• Перемикачі A-Pose та T-Pose генерують стандартизовану позу, готову до ригінгу, з мінімальним самоперетином.

• Custom Pose дозволяє вручну налаштувати суглоби перед генерацією, що корисно, коли жоден із пресетів не відповідає вашим потребам.

• Просте введення "T-pose" у запит Text to Model — це не надійний спосіб керування позою — спочатку згенеруйте референсне зображення, а потім використовуйте Image to 3D з увімкненим перемикачем пози.

Руки та обличчя — найскладніші частини персонажа для точного відтворення будь-якою моделлю 3D-генерації, оскільки вони містять багато дрібних геометричних елементів високої деталізації.

• Пальці можуть зливатися, їх може бути забагато/замало або вони можуть перетинати одне одного — це найімовірніше, коли руки маленькі, частково перекриті або розмиті на вихідному зображенні.

• Обличчя можуть виглядати пласкими, асиметричними або бракувати дрібних деталей, особливо за нижчих налаштувань роздільної здатності або зі стилізованими/нефотореалістичними референсами.

• Спробуйте референсне зображення, на якому руки та обличчя не перекриті та достатньо великі в кадрі, і подумайте про кілька повторних генерацій, оскільки результати можуть відрізнятися між генераціями.

• Мультивидові вхідні дані зменшують неоднозначність: використання Multi-view Image to 3D (зображення спереду, збоку та ззаду) дає моделі значно більше інформації для роботи, забезпечуючи точніші пропорції обличчя та геометрію рук — особливо коли результат з одного зображення виглядає пласко або під невдалим кутом.

• Стилізовані та фентезійні художні стилі: сильно стилізовані чи фентезійні персонажі створюють більше артефактів на руках, обличчях та тонких елементах (зброя, аксесуари) порівняно з фотореалістичними референсами. Якщо ваш персонаж виконаний у нереалістичному стилі, очікуйте більшої варіативності між генераціями та плануйте додаткове доопрацювання.

Якщо ваша мета — анімувати персонажа згодом, плануйте генерацію з урахуванням ригінгу з самого початку.

• Генеруйте в позі A-Pose або T-Pose, а не в динамічній дієвій позі — інструменти авторигінгу та скелети створені навколо цих стандартних поз.

• Тримайте кінцівки розділеними та уникайте перекриття рук/ніг на референсному зображенні, оскільки геометрія, що дотикається або перетинається, може зробити автоматичний ригінг та малювання ваг ненадійними.

• Перевірте топологію сітки навколо суглобів (плечі, лікті, коліна) перед ригінгом і спочатку виправте очевидні артефакти у вашому улюбленому DCC-інструменті.

Якщо генерація здебільшого вдала, але має локальну проблему — наприклад, спотворену руку чи трохи неточну рису обличчя — часто не потрібно починати спочатку.

• Спробуйте кілька разів згенерувати модель з тих самих вхідних даних; результати не є детермінованими, і інше сід/спроба може усунути конкретний дефект.

• Використовуйте доступні інструменти локального редагування або перетекстурування, щоб підправити конкретні ділянки, а не всю сітку.

• У разі стійких проблем імпортуйте експортовану сітку в DCC-інструмент — Blender, ZBrush або 3D Builder (Windows, зручний для початківців для швидкого виправлення non-manifold сіток) — щоб вручну виліпити або відремонтувати проблемні ділянки. Це стандартна практика навіть для якісних генерацій.

Якість генерації персонажів має притаманні обмеження, про які варто знати заздалегідь.

• Pose Control розроблений для гуманоїдних персонажів; негуманоїдні або сильно стилізовані об'єкти можуть непередбачувано реагувати на керування позою.

• Дуже дрібні деталі (окремі пальці, складні риси обличчя, аксесуари) найімовірніше міститимуть артефакти.

• Для сильно стилізованих чи фентезійних художніх стилів руки, обличчя та тонкі елементи (зброя, аксесуари) більш схильні до артефактів, ніж із фотореалістичними референсами.

• Не кожна генерація буде ідеальною з першої спроби — ставтеся до генерації як до ітеративного процесу та перевіряйте поточну доступність функцій і обмеження вашого плану у вашій панелі керування.

Текстові запити самі собою — не надійний спосіб керування позою. Використовуйте перемикач A-Pose/T-Pose або налаштування Custom Pose у робочій області Image to 3D замість опису пози текстом.

Руки — одна з найскладніших для відтворення частин. Використовуйте референсне зображення, де руки чітко видимі, не перекриті та достатньо великі, і спробуйте згенерувати знову, якщо перший результат не є чистим.

Якість обличчя сильно залежить від чіткості та кута вашого референсного зображення. Чітке зображення анфас з хорошим освітленням зазвичай дає кращі деталі обличчя, ніж зображення під кутом, розмите або сильно стилізоване. Для найкращих результатів розгляньте використання Multi-view Image to 3D (спереду + збоку + ззаду), щоб усунути неоднозначність і покращити точність обличчя.

Генеруйте в позі A-Pose або T-Pose за допомогою Pose Control. Стандартні пози для ригінгу з розділеними кінцівками, що не перекриваються, дають інструментам авторигінгу найкращу відправну точку.

Так — спочатку спробуйте кілька разів згенерувати знову, оскільки результати відрізняються між спробами. У разі стійких проблем використовуйте DCC-інструмент, як-от Blender або 3D Builder, щоб вручну підправити лише уражену ділянку експортованої сітки.

Pose Control створений спеціально для гуманоїдних персонажів. Негуманоїдні або сильно абстрактні персонажі можуть непередбачувано реагувати на налаштування A/T-Pose чи Custom Pose.

Генераційні моделі Meshy найкраще працюють із фотореалістичними або напівреалістичними референсами. Сильно стилізовані художні стилі — включно з аніме, мультяшним та фентезійним — привносять нестандартні пропорції, незвичні кольорові палітри та перебільшені риси, що підвищує ймовірність артефактів на руках, обличчях та дрібних деталях, як-от зброя чи аксесуари. Використовуйте чистіше та детальніше референсне зображення, розгляньте попередню обробку через Image-to-Image для покращення якості вхідних даних і очікуйте більше зусиль з доопрацювання для стилізованих персонажів.

Використовуйте Multi-view Image to 3D, коли результат з одного зображення дає пласкі обличчя, неточні пропорції або артефакти на спині чи боках персонажа. Надання видів спереду, збоку та ззаду усуває неоднозначність, яку створює одне зображення, і зазвичай дає точнішу геометрію обличчя та загальну форму персонажа.

Функція Image-to-Image у Meshy дозволяє уточнити, очистити або перекласти референсне зображення перед передаванням його в Image to 3D. Краще скомпоновані вхідні дані — з добре центрованим персонажем, чітким освітленням і без зайвого фону — безпосередньо покращують якість рук, обличчя та загальну точність пози. Це особливо корисно, коли ваша оригінальна концепт-графіка чи референсне фото мають проблеми з кадруванням, освітленням або композицією, які перейдуть у 3D-результат.