Нова технологія може міняти вирази обличчя в реальному часі

$config[ads_kvadrat] not found

Микромир ? Барбоскины ? Новая серия | 195 | Премьера!

Микромир ? Барбоскины ? Новая серия | 195 | Премьера!
Anonim

Пам'ятайте, що програма "Myidol" Bizarro World, яка стала вірусною цієї весни через можливість використання програмного забезпечення для розпізнавання обличчя для створення цифрового аватара, який виглядає і рухається точно в основному, як ви? Це стане реальністю… начебто.

Дослідники з Стенфорду зрозуміли, як передавати міміку однієї людини на іншу людину в режимі реального часу через відео.

Модель, показана на демонстраційному відео в Стенфорді, використовує лише комп'ютер для ПК та глибинну камеру для кожного актора - це означає, що вам не обов'язково потрібне фантастичне обладнання для виконання цього тромпу, вам просто потрібні складні алгоритми.

Дослідники розробили новий алгоритм реального часу, який приймає високоякісні візуальні зображення облич кожного учасника і використовує їх для перенесення виразів з «актора-джерела» (особи, яка надає вираз обличчя та / або мовлення) «цільовому акторові» (особа, чиє обличчя буде маніпулювати відповідно до того, що робить актор-джерело). Візуальна інформація вихідного актора проходить через програму і відображається поверх відеопотоку цільового актора, тому виглядає, як цільовий актор посміхається, розмовляє, висуває мову або що-небудь інше приходить на розум.

Завдяки серії опорних точок, нанесених навколо обличчя (подібно до програми Myidol), типи візуальної інформації, виміряні системою, включають форму обличчя та функції (наприклад, очі, ніс, рот і навіть зморшки), а також текстура обличчя і глибина. Потім програма збігається з базовими точками вихідного актора з цільовим актором і накладає ці вирази на ціль для гіперреалістичного відео.

Оскільки ця система ще працює (і використовувалося досить рудиментарне обладнання), кінцеві результати все ще трохи незрозумілі - подібно напів-тривожним штучним зубам, які програма наклала всередину рота мішені, так що не існує зяючої чорної діри, коли вона « відкритий »(див. вище)…, а також вид пустого погляду в очах цілі. Але це маленькі картопля-фрі в порівнянні з тим, що для нас потрібна розробка цієї програми.

Ось кілька ідей для того, що ми можемо використовувати цю технологію для:

  • Ви отримали важливе співбесіду в Skype, і ви не одягнені для успіху. Просто використовуйте привабливий вигляд стояти в той час як ви надаєте міміку і відповіді на інтерв'ю вбивці.
  • Ви дивитеся в прямому ефірі лекції провідного професора в Німеччині - єдина проблема полягає в тому, що ви не володієте німецькою мовою. Не хвилюйтеся, завдяки перекладачеві в режимі реального часу, який використовує це програмне забезпечення, ви можете спостерігати, як професор виступає з промовою на рідній мові, без будь-яких жахливих затримок дубляжу в графічних зображеннях.

Переглядайте вираз-підкачка у дії:

$config[ads_kvadrat] not found