Русский военный корабль, иди нах*й.
Пожертвувати на армію
×
Упс!
Не вдала спроба:(
Будь ласка, спробуйте ще раз.

Штучний інтелект CLIPasso навчили перетворювати фото на художні скетчі

Тетяна Новак
Тетяна Новак
21 лютого 2022 2 хвилин читання

Науковці з Тель-авівського університету, Федеральної політехнічної школи Лозанни (EPFL) та ізраїльського Університету імені Райхмана презентували нейромережу CLIPasso, що малює ескізи за фотографіями та іншими зображеннями, зберігаючи базові візуальні компоненти. 

Жанр скетчу передбачає спрощене зображення об'єктів, які однак мають бути впізнаваними з першого погляду. Алгоритм CLIPasso (Contrastive Language Image Pretraining) досягає цього ефекту, визначаючи як геометричні, так і семантичні (смислові) патерни картинки. Для тренування моделі використовували метод оптимізації, тому надавали їй лише «стартові» зображення з текстовими описами, а не колекцію готових ескізів. 

Як пояснюють розробники, програма сприймає скетч як певний набір чорних ліній (штрихів) на білому тлі. Насамперед CLIPasso знаходить опорні точки об'єкта і визначає базове геометричне розташування штрихів. На основі цих даних створюється «чорновий» ескіз, який потім перевіряється на схожість із вхідним зображенням.

Регулюючи кількість штрихів, можна генерувати зображення з різним ступенем абстрактності — від зовсім схематичних до ретельно промальованих. 

Нагадаємо, британський стартап Sonantic створив «голосовий діпфейк», що імітує інтонації закоханої жінки. Подробиці — у матеріалі SPEKA.

0
Прокоментувати
Інші матеріали

100 компаній, які розвивають штучний інтелект в Україні

Юлія Даниленко 30 травня 2024 19:00

Старт Нобелівської премії, одинокий невідомий об'єкт та Ілон Москаль. Ранкова SPEKA

Наталія Миронова 18 годин тому

Text-to-image. Як нейромережі навчилися генерувати зображення завдяки NLP

Олександр Тартачний 3 жовтня 2022 19:00

OpenAI представила нейромережу, яка безкоштовно перетворює аудіо в текст

Вадим Добровольський 3 жовтня 2022 11:52

Meta представила нейромережу Make-A-Video, яка генерує відео за текстовим описом

Вадим Добровольський 30 вересня 2022 10:05