Додаток Reface дозволяє розмістити своє обличчя у відео із зірками, для цього достатньо одного селфі.
У березні 2019 року Ілон Маск опублікував у себе в Twitter фото, на якому він приєднав своє обличчя до тіла рестлера Дуейна Джонсона. Твіт набрав сотні тисяч лайків і шерів. На фото була вотермарка додатка Reface.
26 серпня 2020 року ця програма потрапила на першу сходинку американського онлайн-магазину Apple Store, випередивши навіть TikTok і Netflix.
Reface створили українські розробники.
Корреспондент.net розбирався, як вони прийшли до такого успіху.
Як це працює
Перша версія програми називалася Reflect, потім Doublicat. Згодом додаток разом з компанією перейменували на Reface.
Продукт починався із заміни осіб на фото. Згодом додалися GIF-ки, а тепер технологія може працювати з відео. На заміну обличчя йдуть секунди. Користувач завантажує знімок, додаток перетворює основні риси його обличчя на дані і відправляє їх у хмару, де нейромережа накладає обличчя на обраний користувачем контент.
Розробники Reface створили універсальну нейромережу, яка може працювати з різними обличчями та створювати їхні цифрові моделі за секунди.
Досягти високої роздільної здатності зображень дозволяє технологія генеративно-змагальних нейромереж (GAN, generative adversarial network). Одна частина алгоритму - генератор - бере участь у створенні зображення, а друга - дискримінатор - вчиться розпізнавати підробку. Генератор постійно покращує зображення до того часу, поки діскрімінатор не перестане бачити в ньому підробку.
Популярність
Найчастіше додаток Reface використовують, щоб розмістити своє обличчя у відео із зірками. Для цього достатньо одного селфі. На цей момент Reface завантажили понад 27 мільйонів разів, при цьому їм користувалися такі зірки, як Snoop Dogg, Britney Spears, Dua Lipa, Miley Cyrus, John Legend й інші.
Засновники стартапу запевнили, що Reface піклується про безпеку користувачів і не надає особисту інформацію третім сторонам. Додаток тільки зчитує основні риси обличчя, кодує, і переносить на відео або гіфку. Протягом 24 годин фото, яке зробив користувач для заміни обличчя, видаляють з Google Cloud платформи і воно зберігається лише локально на телефоні користувача.
Хто придумав
Засновники проекту Роман Могильний та Ярослав Бойко разом вчилися в Києво-Могилянській академії. У 2011 році вони заснували ML-стартап Neocortext. Neocortext займався розпізнаванням текстового і візуального контенту.
У 2018 році замовник запропонував компанії розробити алгоритм для заміни облич на фотографіях. Команда вперше зіткнулася з технологією deepfake і побачила в цьому перспективну нішу.
"Погодьтеся, круто бачити український стартап у топі на найбільш конкурентному ринку світу. Наскільки нам відомо, стартапи зі Східної Європи на зразок MSQRD і Prisma виходили в топ, але ніколи стартап з України не був №1 у США. Круто розуміти, що додаток став віральним і популярним не тільки в Америці, але і більш ніж у 100 країнах світу. Ми з командою пишаємося результатом, це нас зарядило, але зараз важливо не зупинятися на досягнутому, а рухатися далі. Тому зараз активно набираємо нових людей у команду. Скоро розповімо про новий продукт і функціональності в технологіях, які ми готуємо для Reface", - ділиться Роман Могильний емоціями від успіху.
Коли хлопці тільки починали, в команді було шість осіб, зараз - близько 50. У планах створення Reface Studio - веб-сервісу для професійних режисерів монтажу.