Microsoft представляет Puppets, альтернативу Animoji
Microsoft выпущенный недавно вышла новая бета-версия приложения Swiftkey для клавиатуры компании Android. В новой бета-версии появилась новая функция под названием Puppets.
Puppets работает аналогично функции Animoji в операционной системе Apple iOS. Это дает Swiftkey Пользователи могут создавать клипы с виртуальными персонажами (марионетками) на основе записанных выражений лица человека, который находится перед камерой.

Microsoft представила эту функцию в Swiftkey Beta для Android. Эта функция будет доступна всем пользователям, как только бета-версия выйдет в финал, но пока она доступна только пользователям бета-версии приложения для клавиатуры.
Заинтересованные пользователи могут загрузить бета-версию APK со сторонних сайтов, например Софтпедия. Обратите внимание, что бета-версии не должны устанавливаться на производственных устройствах. Попытка запустить Swiftkey Beta на Google Pixel 3A привела к сбою приложения, однако на другом устройстве Android оно работало нормально.
Вот видео от Microsoft, демонстрирующее эту функцию.
Swiftkey — это приложение для клавиатуры для Android, что означает, что его можно использовать в любом приложении на устройстве, поддерживающем ввод с клавиатуры. Функция «Марионетки» работает в любом приложении для обмена сообщениями при условии, что оно поддерживает совместное использование видеофайлов.
Первая версия Puppets поставляется с пятью различными аватарами, которые пользователи Swiftkey могут выбрать, когда они решат создать новую анимацию. Речь идет о динозавре, панде, кошке, сове и собаке.
Puppets работает, выбирая опцию в приложении Swiftkey и записывая собственные выражения лица, которые приложение использует для анимации выбранного аватара.
Созданная анимация затем может быть опубликована с помощью встроенных функций совместного использования.
Команда Microsoft Swiftkey особенно гордится тем фактом, что в ее решении используются камеры RGB, а не камеры со встроенными датчиками глубины. Этот факт снижает требования к созданию марионеток и гарантирует, что эту функцию можно использовать практически на любом устройстве Android. Puppets доступен для всех устройств Android N и новее.
SwiftKey работал с командами Microsoft Computer Vision и Microsoft Research Asia, чтобы оживить Puppets. В отличие от другого программного обеспечения для отслеживания лиц, SwiftKey’s Puppets не полагается на то, что пользователи имеют устройство со встроенным датчиком глубины в их камеру, а вместо этого использует камеру RGB, которая есть в большинстве смартфонов Android.
Согласно Swiftkey, алгоритм Puppet был обучен с использованием «тысяч добровольцев со всего мира» для обучения глубинной нейронной сети, чтобы «научиться распознавать движения лица и передавать их на выразительного животного персонажа».
Вывод
Во время тестов алгоритм Puppets работал на удивление хорошо. Хотя не следует ожидать, что алгоритм имитирует все детали лица, он хорошо справляется с имитацией выражений лиц. Пользователям Android, которым нравится прикреплять к своим сообщениям анимированные гифки, видео, смайлы, смайлы и другие визуальные эффекты, вероятно, понравится эта функция.
Теперь ваша очередь : Что ты думаешь о Puppets? Уловка или что-то полезное?