Еліас простою мовою пояснює дослідження, що стоять за заголовками.
Надихнула ця історія? Перетвори ідею на власне ШІ-мистецтво за лічені секунди — безкоштовний старт, без банківської картки.
Почати безкоштовноОбери компаньйона і дізнайся його думку про цю історію
Pinterest тестує функцію під назвою Restyle, яка використовує генерацію зображень за допомогою ШІ для розміщення нових меблів, освітлення та декору безпосередньо на фотографіях кімнати користувача — перетворюючи збережений пін із абстрактного натхнення на конкретну візуалізацію «до і після».
Функція Restyle від Pinterest вставляє згенеровані ШІ меблі та декор у фотографію реальної кімнати користувача.
Зображення: TechCrunch / TechCrunch AI
Основна задіяна техніка — це інпейнтинг із просторовою прив'язкою — процес, у якому модель ШІ визначає поверхні та об'єкти на наявній фотографії, а потім синтезує новий візуальний контент, що відповідає перспективі, освітленню та масштабу кімнати. Уявіть, що модель сприймає фотографію вашої кімнати як незмінну сцену й розміщує на ній нові реквізити, замість того щоб генерувати цілком нову сцену з нуля. Це та сама родина можливостей, що й режим інпейнтингу Stable Diffusion або Generative Fill від Adobe Firefly, але тут упакована для нетехнічної аудиторії з чіткою комерційною метою: побачив — сподобалось — купив.
За даними TechCrunch, Pinterest позиціонує Restyle як спосіб допомогти користувачам візуалізувати, як збережені піни — диван, підвісний світильник, килим — виглядатимуть саме в їхньому конкретному просторі, а не в узагальненому макеті кімнати.
Відмінність, що має значення для тих, хто генерує зображення професійно, полягає у вхідних даних: Restyle обумовлена реальною фотографією конкретної кімнати, а не текстовим промптом, що описує уявну. Це означає, що модель має зберегти наявну геометрію, природні джерела світла та колірну температуру кімнати, одночасно вставляючи щось нове. Досягти цього правильно — щоб новий диван не виглядав вставленим — значно складніше, ніж відкрита генерація, і саме тут більшість споживчих інструментів для дизайну кімнат традиційно зазнавали труднощів.
Чи відповідає реалізація Pinterest цій планці, стане зрозуміло лише після ширшого доступу до функції. Поточний анонс — це тизер, а не повноцінний запуск, і Pinterest не оприлюднив технічних деталей про те, яка базова модель її забезпечує або як вона обробляє граничні випадки — незвичні форми кімнат чи змішане освітлення.
Приклад розміщення декору за допомогою ШІ в Restyle на фотографії кімнати користувача, опублікований Pinterest.
Зображення: TechCrunch / TechCrunch AI
Для авторів, які регулярно працюють із генерацією зображень за допомогою ШІ, Restyle є корисним сигналом про напрямок розвитку галузі. Контрольована генерація на основі фотографій — коли ви надаєте реальне зображення як обмеження, а модель заповнює або замінює певні ділянки — переходить від вузькоспеціалізованої техніки, що вимагає ретельного написання промптів і налаштувань ControlNet, до споживчої функції в одне натискання. Понад 500 мільйонів щомісячних активних користувачів Pinterest незабаром отримають практичне знайомство з можливостями AI-інпейнтингу.
Це має практичний наслідок: очікування клієнтів щодо AI-асистованої візуалізації зростатимуть. Від дизайнерів інтер'єрів, декораторів сцен і стилістів реквізиту, які використовують інструменти ШІ, дедалі частіше вимагатимуть створення просторово-когерентних, прив'язаних до конкретної кімнати композитів, які обіцяє Restyle, а не просто мудбордів. Знання того, як досягти цього з більш детальним контролем — регулювання сили маски інпейнтингу, вибір моделі, що добре обробляє перспективу, або робота з кондиціонуванням карти глибини — залишатиметься конкурентною перевагою навіть у міру вдосконалення споживчих інструментів. Посібники Charmloop охоплюють деякі з цих технік інпейнтингу та редагування зображень для авторів, які хочуть вийти за межі функції з одним натисканням.
Pinterest не оголосив дату запуску Restyle. Функція перебуває в тестуванні, а компанія відома тривалими проміжками між внутрішніми попередніми переглядами та публічним розгортанням — тому авторам варто стежити за ширшим релізом, а не очікувати його найближчим часом.