Управление андроид жестами через камеру

Расширяя возможности: Управление смартфоном без рук

«Сезам, откройся!» — этой фразой нужно приветствовать смартфон, чтобы разблокировать его. После этого пользователь сможет управлять им без помощи рук.

Продолжая тему «Расширяя возможности» обязательно стоит сказать о готовящемся к выпуску смартфоне Sesame. Он призван помочь тем, кто физически не может управлять телефоном с помощью пальцев.

Пока продолжается истерия на тему носимых устройств и фитнес-трекеров, которые большая часть пользователей забрасывает через полгода, до сих пор остаются люди, пытающиеся сделать что-то действительно важное. Речь идет о помощи людям, неспособным в полной мере использовать возможности смартфона из-за каких-либо недугов. Для них был создан интерфейс, распознающий движения головы.

На помощь в век сенсорных дисплеев приходит… старый добрый курсор. Направляя его, пользователь может не только работать с приложениями на Google Nexus 5, но даже играть в некоторые игры — например, в те же Angry Birds.

Устройство использует камеру смартфона для распознавания жестов, курсор указывает на нужные приложения или функции, а с помощью голосового управления телефон можно разблокировать и заблокировать.

За каждые 5 тысяч долларов, полученные на Indiegogo, разработчики обещают подарить смартфон с этим интерфейсом одному нуждающемуся.

Источник

Как управлять своим телефоном Android с помощью мимики

Прежде чем мы начнем, я хотел бы уточнить, что функция Switch Access не ограничивается телефонами Android 12. Я загрузил последнюю бета-версию Android Accessibility Suite на ROG Phone 5 под управлением Android 11, и она отлично работала. Если вы не видите параметр «Переключить камеру», загрузите файл APK из APKЗеркало или попробуйте обновить Android Accessibility Suite из Play Store, когда он станет общедоступным.

Настройка службы специальных возможностей переключателей камеры

1. Откройте приложение «Настройки» и нажмите «Специальные возможности», чтобы просмотреть настройки специальных возможностей. В разделе «Управление взаимодействием» нажмите «Переключить доступ».

2. Затем включите переключатель «Использовать переключатель доступа», чтобы начать работу. Теперь вы увидите всплывающее окно с запросом полного управления вашим устройством для управления экраном и выполнения действий. Нажмите «Разрешить», чтобы подтвердить и настроить функцию.

3. После того, как вы включили Switch Access, вы увидите возможность выбрать тип и количество переключателей. В качестве типа переключателя выберите «Переключатель камеры». Вы можете выбрать один или два переключателя, но Google рекомендует использовать два переключателя для доступа к большему количеству жестов.

4. Теперь вы должны выбрать, как Switch Access должен сканировать содержимое на вашем экране. Доступны следующие параметры: линейное сканирование, сканирование по строкам и столбцам и выбор группы. Выберите удобный для вас метод, а затем нажмите «Далее» в правом нижнем углу экрана. На следующей странице выберите один из жестов лица, который вы хотите использовать.

5. Например, я установил жест «Улыбка», чтобы открыть панель быстрых настроек. Вы можете назначить этот жест другим действиям, таким как переход на главный экран, возврат и многое другое. Вы можете выполнить те же действия, чтобы настроить действия для других жестов (проверьте изображение ниже или в следующем разделе). Если вы передумаете, вы можете нажать «Изменить назначение», чтобы переназначить жест другому действию.

Android 12 Accessibility Suite: лицевые жесты и действия

Вкратце, вот все возможные лицевые жесты в Switch Access и действия переключения камеры, которые вы можете им назначить:

• Открытый рот
• Улыбка
• Посмотри налево
• Поднять брови
• Смотреть прямо
• Погляди

Действия при переключении камеры

• Приостановить переключатель камеры
• Автоматическое сканирование
• Обратное автоматическое сканирование
• Выбирать
• Следующий
• Предыдущий
• Нажмите и удерживайте
• Прокрутите вперед
• Прокрутите назад
• Дом
• Назад
• Уведомления
• Быстрые настройки
• Обзор

Как использовать действия переключения камеры на Android

Теперь, когда вы настроили переключатели камеры на нашем телефоне Android и знаете обо всех возможных жестах лица и действиях, с которыми вы можете его использовать, вот быстрая демонстрация этой функции. В GIF ниже я использовал жест «Открыть рот», чтобы вернуться на главный экран.

А вот еще один пример, когда я использовал жест «Улыбка», чтобы открыть панель быстрых настроек. Пока это просто демонстрации, вы можете комбинировать и сочетать действия и жесты в соответствии с вашими предпочтениями.

Итак, мы подошли к концу нашего руководства по использованию Switch Access для управления телефоном Android с помощью мимики. Если вы попробуете, дайте нам знать, если вы нашли это полезным, в комментариях.

Источник

Что такое управление жестами на Андроид, как включить и выключить жесты

Управление жестами на Андроид оказалось главным нововведением с выходом Android 10 наряду с обновленным интерфейсом.

С момента релиза многие пользователи приняли эту функцию в штыки, но со временем люди привыкли и начали переходить на использование жестов, отказываясь от привычных кнопок, закрепленных в нижней части экрана.

Что такое управление жестами: когда это пригодится?

Управление жестами Android было создано Google для упрощения управления системой и освобождения места на экране.

Особенно эта функция хороша на безрамочных мобильных устройствах, потому что так дисплей получается абсолютно без навигационных элементов, если не считать индикаторы в верхней части.

Стандартные жесты для операционной системы Андроид одинаковые на всех аппаратах вне зависимости от бренда и наличия фирменной оболочки. Они представляют собой команды, которые активируется при совершении определенных жестов.

Необходимости для перехода к управлению жестами нет, но я отмечу, что это намного удобнее, нежели использование старых кнопок.

Более того, по своему опыту знаю, что мобильное устройство из среднего ценового сегмента работает слегка быстрее именно при таком методе эксплуатации. Не выяснено, как это влияет на быстродействие, но факт остается фактом.

Рекомендую как минимум попробовать, 2-3 дня пользуясь жестовым управлением.

Первое время будет непривычно, зато вскоре мышечная память запомнит, как именно нужно двигать пальцем для совершения определенных действий. После этого вы вряд ли вернетесь к кнопкам на нижней панели. Да и интерфейс так выглядит намного лучше.

Приложения для управления жестами

Помимо стандартных, есть возможность добавить дополнительные действия, привязанные к движениям пальцев, если скачать соответствующее программное обеспечение.

Выбор подобных программ большой, так что если вы намерены привязать жесты ко всем операциям, которые часто делаете, рекомендую попробовать их.

В число лучших софтов такого предназначения входит iGest, Finger Gesture Launcher и Gesture Magic.

Особенности каждой программы:

1. iGest.
   
   Можно запускать софт, ставить блокировку на программы, звонить, переходить на избранные страницы, открывать файлы, блокировать дисплей, создавать электронное письмо, формировать сообщения, включать фонарик.
2. Finger Gesture Launcher.
   
   Может открыть выбранные приложения, настройки системы, разделы в настройках, недавние задачи, звонок по телефону или через мессенджер, блокировка экрана, звонок выбранному пользователю, выключение аппарата, перезагрузка, переход в режим восстановления.
3. Gesture Magic.
   
   В число возможностей входит активация софта, совершение звонков, изменение настроек гаджета, блокировка экрана, открытие сайтов через браузер.

Как включить управление жестами в Android

На мобильных устройствах под управлением операционной системы Андроид 10 (и версии выше) управление через жесты включается довольно легко.

1. Перейти в Настройки.
2. Нажать на пункт “Система”.
3. Выбрать раздел “Жесты”.
4. Проскроллить вниз и тапнуть на надпись “Навигация”.
5. Поставить галочку напротив надписи “Управление жестами”.
   

Отсюда же можно обратно переключиться на кнопочный вариант, если нововведение десятого Андроида вам все же не понравится. К слову, есть способ как с тремя кнопками, так и с двумя.

Примечание: для аппаратов под управлением Android доступна установка жестового пароля.

Список жестов управления в Android 10

Для Андроидов все жесты стандартные, но у некоторых фирм есть свои оболочки, такие как OneUI, которые включают в себя дополнительные элементы управления системой. Также добавить действия можно через сторонние приложения.

Далее я описал стандартный список жестов управления, которые есть на каждом девайсе с операционной системой от Гугл.

Домой

Чтобы вернуться на домашний экран, нужно: от нижнего края дисплея провести пальцем вверх примерно до середины, при этом отпустив его, а не удерживая. Любое открытое приложение свернется и отобразится начальное окно.

Назад

Для возвращения назад необходимо провести пальцем от любого из краев дисплея до его центра. На некоторых мобильных устройствах нужно проводить с левого до правого края.

Именно так осуществляется команда “Назад”, чтобы вернуться к предыдущему окну, приложению или странице. Если несколько раз перейти назад, то откроется домашний экран.

Окно многозадачности

Отображение всех открытых или недавно открытых приложений похоже на жест для перехода к домашнему окну.

Необходимо провести пальцем сверху-вниз (примерно до середины) и удерживать его. Покажется страница многозадачности, на которой можно переключиться на любое из отображенных программ.

Переключение между приложениями

Операционная система Android дает возможность переключаться между приложениями моментально, но только на ближайший софт слева и справа от открытой программы.

То есть, должно быть открыто приложение, а в окне многозадачности должно находиться как минимум две программы.

Итак, что нужно сделать: провести пальцем вверх до середины и удерживать его, а затем сразу же свайпнуть этим же пальцем (не отпуская его) влево или вправо.

Произойдет переключение на программное обеспечение, которое находится слева или справа в окне многозадачности.

Активация ассистента Google

Google Ассистент — это голосовой помощник, который осуществляет поиск в интернете и позволяет управлять операционной системой (в меньшей мере). С помощью жестов можно легко получить доступ к Google Ассистенту.

Как это можно сделать: провести вниз по левому нижнему углу или по правому нижнему углу. После этого управления жестами на Андроид моментально запустится Google Ассистент.

Источник

Android научили использовать фронтальную камеру для управления жестами

Израильская компания EyeSight Technologies представила любопытную технологию, которая позволяет управлять мобильным устройством без касания рук – одними лишь жестами в воздухе. Основным каналом ввода при этом служит фронтальная камера мобильного устройства. Строго говоря, эта технология уже демонстрировалась на экспериментальных аппаратах Nokia, но теперь израильские разработчики предлагают инструменты, которые позволят реализовать новую технологию на серийных аппаратах под управлением операционной системы Android.

Разработчикам мобильных приложений компания EyeSight предлагает два решения – EyeCan и EyePlay. Эти инструменты разработки помогают реализовать бесконтактное управление в играх и других приложениях. Особенно полезными такие функции могут оказаться в аппаратах без сенсорного экрана – не будем забывать, что платформа Android рассчитана, в том числе, и на работу с аппаратной клавиатурой. Поскольку далеко не все аппараты сейчас оснащаются фронтальной камерой, управление жестами через камеру может стать настоящей находкой для производителей недорогих устройств на базе Android. Непонятно только, насколько комфортно будет таким способом отдавать команды своему аппарату, находясь в транспортной толчее или в темноте.

В демонстрационном ролике EyeSight можно увидеть, как с помощью жестов перед камерой пользователь может пролистывать фотографии движением ладони, проматывать музыкальные записи в списке воспроизведения, принимать и отклонять звонки, прокручивать веб-страницы, отправлять текстовые сообщения и даже бросать виртуальные звезды в игре – все эти действия осуществляются простыми движениями рук перед фронтальной камерой смартфона. Само собой, широкое распространение такой технологии невозможно без всемерной поддержки со стороны разработчиков приложений и производителей смартфонов.

Подробнее об инструментах разработки EyeCan и EyePlay и их возможностях для разработчиков мобильных приложений можно прочитать на официальном сайте компании EyeSight Technologies, а также в обзорах на сайтах Yahoo!News и GigaOM.

Источник