Айріс пише про те, де ШІ-мистецтво зустрічається з культурою: стиль, авторство та образи, які мають значення.
Надихнула ця історія? Перетвори ідею на власне ШІ-мистецтво за лічені секунди — безкоштовний старт, без банківської картки.
Почати безкоштовноОбери компаньйона і дізнайся його думку про цю історію
Nvidia відкочує генеративну реконструкцію облич у DLSS 5 перед виходом оновлення для Hogwarts Legacy наступного місяця — після того, як гравці та критики заявили, що технологія помітно старить і спотворює обличчя персонажів. Цей крок чітко показує, де саме ШІ-масштабування досі дає збій.
DLSS 5 — це не поступове вдосконалення попередників. Якщо DLSS 3 і 4 екстраполюють наявні піксельні дані, то DLSS 5 використовує генеративну модель, щоб вигадувати кадри — синтезуючи деталі, яких ніколи не було відрендерено. Це суттєвий архітектурний стрибок, і саме тому проблема з обличчями така показова. Генеративна модель не зберігає — вона інтерпретує. Коли система Nvidia «подивилася» на персонажа-підлітка і реконструювала її обличчя, результат виявився старшим, згладженим не там, де треба, — тонко, але безпомилково неправильним. За даними The Verge, та сама проблема виникла з Грейс із Resident Evil — це закономірність, а не випадковість.
Естетичні наслідки суттєві. Фотореалістичний рендеринг тридцять років намагається відтворити специфічну, крихку геометрію людського обличчя. Генеративний шар DLSS 5, навчений на широких розподілах зображень, очевидно, згладжує і зміщує цю геометрію до статистичного середнього — за духом це нагадує ранні ШІ-застосунки для портретів, які перетворювали всіх на один і той самий моторошний ідеал. Це протилежність точності.
Порівняння DLSS 5 від Nvidia для Hogwarts Legacy, що показує генеративну реконструкцію ШІ, яка спричинила критику через старіння облич.
Зображення: The Verge / The Verge AI
Для авторів ШІ-арту епізод із DLSS 5 — корисний стрес-тест питання, що пронизує всю галузь: коли генеративна модель змінює обличчя, хто зробив цей вибір? Інженери Nvidia встановили параметри; модель видала результат; жоден художник не схвалив те, що 15-річна виглядає на 30. Та сама неоднозначність авторства виникає щоразу, коли дифузійна модель змінює схожість персонажа під час масштабування або доопрацювання — це ризик робочого процесу, який одразу впізнає кожен, хто генерує послідовних персонажів за допомогою таких інструментів, як генератор зображень Charmloop.
Виправлення, яке розгортає Nvidia, — зниження інтенсивності генеративної реконструкції, мабуть, із наближенням до поведінки звичайного масштабування — це, по суті, регулятор впевненості. Зменшіть внесок генеративної складової — і ви втратите вигадану чіткість; збільшіть — і втратите оригінальне обличчя. Цей компроміс притаманний кожному генеративному апскейлеру, і про нього варто знати, перш ніж пропускати рендери через такий інструмент.
DLSS 5 є ексклюзивом відеокарт GeForce RTX 50-серії, а отже, переважна більшість власників сучасних GPU — включно з більшістю практикуючих авторів ШІ-арту — поки що не зіткнеться з ним у власних пайплайнах. Але запуск у Hogwarts Legacy фактично є публічною бетою генеративної реконструкції кадрів у масштабі, а проблеми, що виявилися тут, визначатимуть, як Nvidia калібруватиме технологію для майбутніх ігор і, зрештою, для інтеграцій у творче програмне забезпечення.
Головний урок для авторів, які зараз обирають шляхи масштабування: генеративна реконструкція потужна і справді ризикована для людських облич. Якщо точність портрета є вашим пріоритетом — для аркушів персонажів, послідовних рендерів OC або будь-чого, де важлива конкретна схожість, — звичайні апскейлери на основі супер-роздільності залишаються безпечнішим вибором, доки генеративні моделі не доведуть, що можуть утримати обличчя стабільним. Перегляньте каталог моделей Charmloop, щоб дізнатися, які генеративні пайплайни наразі найкраще справляються з послідовністю портретів, або зверніться до посібників для порівняння технік масштабування.
Готовність Nvidia відкотити функцію до виходу великої гри — правильне рішення. Воно також сигналізує: генеративна реконструкція — не вирішена задача, а тривалі переговори між тим, що модель хоче створити, і тим, що художник насправді намалював.