Як це працює. Спочатку алгоритм аналізує кадри з камери і знаходить на них руку. Під час роботи алгоритм створює модель руки, яка складається з 21 точки. Цього достатньо, щоб точно описати положення кінцівки у конкретний момент. Водночас ПЗ може працювати у двох режимах: в одному воно створює двовимірну модель руки, а в іншому — тривимірну. 

Бонус. Також на основі алгоритму розробники створили систему розпізнавання жестів: коли алгоритм отримує модель руки, то аналізує кути між частинами пальців і співставляє їх з тими жестами, які йому вже відомі. Щоб навчити алгоритм розробники створили свій набір даних з понад 30 тисяч зображень. На кожному з них вручну розкреслили модель запястья. 

Вже можна спробувати. Для сторонніх розробників алгоритм доступний на Github. Він адаптований як для роботи на Android так і iOS. Користувачі Android вже можуть встановити собі два демо-застосунки. Одне з них створює двовимірну модель руки, а друге — малює тривимірну модель. 

⟶ Новим смартфоном Pixel 4 Google можна буде управляти без дотиків. Девайс стане першим апаратом, який отримає технологію Project Soli. Вона дозволяє виконувати жести керування без дотиків до самого девайса. Pixel 4 стане першим мобільним пристроєм з технологією Soli. Компанія презентувала її у 2015 році під час конференції Google I/O. З допомогою цієї функції ви зможете переключати треки, віддетермінувати будильник чи відхиляти дзвінки. Всі ці функції можливі завдяки спеціальному датчику, який розпізнає жести, а також функції Motion Sense. Ця функція буде доступна лише у деяких країнах. 

⟶ Нові флагмани від мають «чарівну паличку». Користуючись Galaxy Note 10 та Galaxy Note 10 Plus можна відчути себе Гаррі Поттером. Змахуючи стилусом S Pen, можна відкривати деякі застосунки у смартфоні. Наприклад, у такий спосіб можна буде управляти відео на YouTube, включно з відтворенням, зупинкою і налаштуванням гучності відео.

Фото: googleblog.com