Вот технология, лежащая в основе жестов Soli RADAR в Google Pixel 4

В своем блоге Google описывает, как Soli RADAR распознает минутные движения рук для бесконтактного взаимодействия с Google Pixle 4 и Pixel 4 XL.

Google представил революционную Технология Motion Sense в Google Pixel 4 устройства. Эта функция использует крошечный чип Soli RADAR, который распознает жесты рук и использует их для взаимодействия с телефоном, даже не прикасаясь к нему. Пиксель 4 Соли-движущиеся жесты можно использовать для переключайте треки в длинном списке музыкальных приложений, отключите звук вызовов и будильников или активируйте экран, когда вы достаете телефон. Технология RADAR была концептуализирована командой Google ATAP, и хотя первые прототипы мы видели еще в 2014 году, до сих пор существует некоторая неопределенность относительно того, как на самом деле работает технология Motion Sense. Чтобы подробнее рассказать об этом, Google опубликовал подробный блог о работе жестов Соли.

Pixel 4 Форумы XDA || Pixel 4 XL Форумы XDA

В отличие от типичных систем RADAR, Soli обнаруживает движение, а не определяет пространственное распределение твердого объекта. Чип Soli RADAR размером всего 5 x 6,5 x 0,873 мм излучает сигнал частотой 60 ГГц с частотной модуляцией (FM). Когда этот сигнал попадает на поверхность руки, он отражается обратно к приемнику. Чип Soli обнаруживает смещения руки пользователя размером менее миллиметра на основе отраженного сигнала и определяет жест руки и скорость движения после съемки.

Эффект Допплера в учетную запись.

Ранний прототип Soli от Google ATAP

Приемник Soli сложно отображает энергию, полученную в отраженном сигнале, и эта информация отображается в зависимости от скорость объекта с различными индикаторами, позволяющими определить, приближается ли объект к сигналу или удаляется от него. это. Он также может измерять расстояние объекта от датчика. Расстояние и скорость движущейся части тела или руки можно использовать для оценки ее пространственного положения в 3D. Google также оптимизировал сигнальную цепь, чтобы улучшить соотношение сигнал/шум и энергоэффективность чипа.

Чтобы эффективно справиться с множеством отражений сигналов и извлечь из них значимые закономерности, Google использует машинное обучение. Эти алгоритмы машинного обучения были обучены с использованием TensorFlow с помощью «миллионы жестов, записанных тысячами волонтеров Google.Предварительная версия Android 11 для разработчиков, мы также были свидетелями улучшения точности Motion Sense на Google Pixel 4, и того же можно ожидать от будущих обновлений.

Ранний прототип Soli и последний чип RADAR (крайний справа)

Google ATAP тесно сотрудничал с Google Pixel и другими группами разработчиков оборудования, чтобы гарантировать, что другие сигналы не мешают работе Soli. Это гарантирует, что сигналы, такие как звук из динамиков, не искажаются и не мешают работе функции Motion Sense Pixel 4. Мало того, более серьезной задачей было уменьшить размер устройства, чтобы оно могло поместиться во лбу Pixel 4 и 4 XL.

Хотя это первый отмеченный случай использования RADAR на потребительском устройстве, команды приложат все усилия, чтобы работа над технологией в будущем – хотя нет никаких обещаний по поддержке какого-либо устройства в будущем.


Источник: Блог Google по искусственному интеллекту