Ассистентом Siri можно будет пользоваться даже без интернета

Apple Siri

Голосовой ассистент Siri серьезно отстает от конкурентов в плане возможностей. Компания Apple постоянно пытается его улучшить, например, дав пользователям возможность самостоятельно добавлять голосовые команды. Судя по новому патенту, разработчики намерены сделать еще один шаг к улучшению помощника, научив его работать без подключения к интернету. Благо, все необходимое для реализации задумки у компании есть.

На данный момент ассистент Siri распознает сказанные пользователем слова, отправляя анонимную запись голоса на удаленные сервера. Следовательно, для работы помощника необходим интернет: удаленный сервер преобразует аудио в текст, и на его основе ищет информацию в Сети и предоставляет ее пользователю.

В новой патентной заявке компания описывает способ распознавания голосовых команд прямо на устройстве, без отправки аудио на удаленные сервера. Для этого предлагается использовать встроенную систему модулей, состоящую из элементов для синтеза речи, обработки диалогов, фонетического алфавита и модуля обработки естественного языка.

Исходя из распознанных слов и структуры запроса, помощник сможет выполнять определенные действия, сохраненные в модулях обработки потока задач и модуле обслуживания. Среди предопределенных действий, например, числятся установка таймера и воспроизведение сохраненных во внутренней памяти песен.

Патент предусматривает случаи, когда устройство может подключиться к интернету. Помощник будет использовать подключение для улучшения результата выдачи, а также обращаться к интернету при невозможности распознать команду локально.

Если предыдущие патенты Apple вроде улучшения пользования устройством под дождем вряд ли будут реализованы в ближайшее время, эта патентная заявка кажется вполне реализуемой. Последние чипсеты Apple оборудованы движком Neural Engine для выполнения интенсивных задач вроде распознавания лица — скорее всего, ему под силу и распознавание голосовых команд.

Как часто вы пользуетесь ассистентом Siri? Свои ответы можете отправить в комментариях или в нашем Telegram-чате.

Как звонить по громкой связи при помощи Siri на iPhone и iPad

Если вы находитесь в ситуации, когда обе руки заняты, но при этом необходимо осуществить телефонный звонок, заручитесь помощью Siri, которая одновременно поможет вам и при совершении звонка, и активации громкой связи с этим звонком. С этими двумя функциями, работающими рука об руку, вам не нужно будет даже касаться устройства, чтобы позвонить кому-то. ПО ТЕМЕ: Как […]

Как дела у «Команд» для Siri спустя месяц со дня релиза?

В сентябре 2018 года, спустя несколько дней со дня релиза iOS 12, компания Apple выпустила приложение Shortcuts. При помощи него пользователи могут создавать собственные голосовые команды для ассистента Siri. Например, можно сделать так, чтобы при команде «Едем домой» помощник прокладывал маршрут без пробок и включал плейлист из любимых песен пользователя. По данным Cult of Mac, новые возможности пользуются большой популярностью у пользователей, но некоторые разработчики приложений не готовы брать их на вооружение.

Такие приложения как The Weather Channel, CARROT и Dark Sky используются людьми для получения прогноза погоды на ближайшие дни. Пользователи также придумали много способов взаимодействия с заметочником Evernote: быстрая отправка интересных ссылок друзьям, создание звуковых и текстовых заметок. Пользователи с наиболее развитой фантазией умудряются создать команды для планирования и просмотра задач в календаре.

К сожалению, работа Shortcuts не всегда так идеальна. Например, приложение Tile для поиска потерявшихся дома ключей и других предметов работает через раз: приложение часто не реагирует на команду «Эй, Сири, где мои ключи?». Примечательно, что приложение магазина Walmart вообще отказывается работать с Shortcuts, однако разработчики уверяют о наличии совместимости.

Авторы Cult of Mac считают, что некоторые разработчики приложений на данный момент попросту не готовы к добавлению поддержки Shortcuts в свои приложения.

Приложение Shortcuts содержит более 300 собственных команд. Чтобы посмотреть список, необходимо зайти в приложение и нажать на кнопку «Добавить в Siri». Также можно перейти в пункт настроек «Siri и поиск» — система найдет подходящие команды на основе установленных приложений.

Сколько пользовательских команд вы создали в Shortcuts? Свои ответы можно оставить в комментариях и в нашем Telegram-чате.

Apple хочет, чтобы вы разблокировали iPhone еще и голосом

Apple работает над технологией распознавания голоса Voice ID. Это следует из материалов Ведомства по патентам и товарным знакам США, зарегистрировавшим патент с соответствующим содержанием. Будущий интерфейс будет способен улавливать уникальные особенности тембра и колебания речевых связок пользователя и в конечном итоге сможет заменить Face ID как еще более совершенный метод идентификации , не имеющий недостатков технологии распознавания лиц.

На то, что Apple планирует использовать Voice ID именно при снятии блокировки со смартфона, а не для распознавания голосов разных людей при работе с Siri, прямо указывает описание изобретения. Как видно на представленных чертежах, голосовая разблокировка будет даже проще, чем лицевая, поскольку не будет требовать нахождения пользователя в поле зрения смартфона. Все, что от вас потребуется, — произнести кодовую фразу, после анализа которой смартфон либо снимет блокировку, либо предложит ввести пароль доступа.

Разблокировка смартфона голосом

Попросить смартфон снять блокировку при помощи голоса, не прикасаясь к нему, как того требуют Face ID и Touch ID, гораздо удобнее, если он лежит на столе, а ваши руки чем-нибудь заняты или испачканы. Но даже если Voice ID не заменит другие способы идентификации полностью, он имеет все шансы стать одним из самых востребованных, по крайней мере в некоторых сценариях использования.

Недостатки Voice ID

Голосовая разблокировка, помимо очевидного удобства, имеет ряд недостатков, которые для многих пользователей могут оказаться решающими.

Во-первых, разблокировка голосом может смутить многих пользователей, которые будут чувствовать себя глупо, разговаривая со своим смартфонов. Именно стеснение препятствует построению конструктивного общения между пользователем и Siri, которая из-за человеческого страха быть услышанным посторонними редко используется вне дома.

Во-вторых, страх публичного разглашения кодового слова или фразы рискует превратить Voice ID в способ разблокировки, который будет использоваться только наедине со смартфоном. И хотя при голосовой идентификации значение имеет только тембр и особенности речи, а не само выражение, людям будет сложно свыкнуться с мыслью, что их пароль могут услышать не только они.

Обсудить эту и другие новости Apple можно в нашем Telegram-чате.

iOS 12: Как при помощи Siri быстро создавать сложные напоминания, включая ссылки, действия в приложениях, геопозицию и т.д.

С выходом iOS 12 (подробный обзор) Apple выпустила приложение Команды (бывшее Workflow) для автоматизации рутинных операций. Это нововведение призвано существенно облегчить жизнь пользователям – а мы сделаем его ещё более удобным. В этой статье мы расскажем о том, как при помощи Siri создавать достаточно сложные напоминания, содержащие ссылки на веб-сайты, геолокационные точки, а также различные действия […]

Siri позволяет украсть фотографии из чужого iPhone

В начале октября пользователь Хосе Родригес обнаружил, что уязвимость в iOS 12 позволяет обойти пароль чужого iPhone и получить доступ к его сообщениям и контактам. Для манипуляции ему потребовались помощник Siri, служба VoiceOver для озвучивания информации на экране и номер телефона жертвы. Дальнейшее изучение уязвимости показало, что примерно таким же образом можно украсть фотографии с чужого телефона. Метод оказался проще предыдущего.

Как и в предыдущем случае, для взлома требуется физический доступ к iPhone жертвы и номер его телефона. В самом начале автор видео позвонил на номер жертвы, чтобы активировать экран голосового вызова iOS. В нем он выбрал пункт ответа SMS-сообщением. Написав случайные буквы в поле ввода, хакер вызвал голосового помощника Siri и попросил активировать службу VoiceOver.

Вернувшись к сообщениям, Родригес вызвал системный конфликт, поочередно нажимая на кнопку камеры, домашнюю клавишу и два раза касаясь экрана. Ошибка возникла не сразу, но количество попыток было не ограничено. При удачном вызове конфликта появился черный экран с невидимым пользовательским интерфейсом. В нем, перемещаясь жестами вправо и влево и слушая подсказки VoiceOver, хакер нашел раздел с фотографиями. Двойное нажатие на соответствующем квадрате возвратило к сообщениям.

После манипуляций вместо клавиатуры появился раздел с невидимыми фотографиями. Так же перемещаясь при помощи жестов и два раза нажимая по невидимым участкам, Родригес переслал «чужие» фото на свой смартфон.

Данной уязвимости подвержены iPhone с операционной системой iOS 12.0.1. Чтобы защитить свое устройство, нужно запретить вызов Siri с экрана блокировки. Это делается в пункте настроек «Touch ID и код-пароль» в разделе «Доступ с блокировкой экрана».

Обсудить эту и другие новости об iPhone можно в нашем Telegram-чате.

Приложение Команды (Shortcuts) на iPhone и iPad: что это такое, для чего нужно и как пользоваться

«Команды» (ранее называлось Workflow) — официальное приложение для iOS от компании Apple, которое содержит множество шаблонов, позволяющих выполнять различные действия.   Что такое «Команды» (Shortcuts) в iOS и для чего это нужно? Приложение Команды (Shortcuts) Что такое действие? Где хранятся команды? Как искать шорткаты Обзор готовых шорткатов в Галерее приложения «Команды» Как добавить команду (шорткат) в […]

Как Siri позволяет обойти пароль в iOS 12

Несмотря на то что каждая последующая версия iOS становится надежнее предыдущей, порой даже в самой актуальной сборке могут появляться баги, на корню рушащие безопасность операционной системы. Эта проблема не обошла стороной iOS 12, которая, как удалось выяснить пользователю по имени Хосе Родригес, позволяет обойти пароль любой сложности и получить доступ к конфиденциальной информации владельца, в том числе списку контактов в записной книге и фото.

Как и серия прошлых багов, позволяющая обойти пароль операционной системы, этот также задействует Siri и службу VoiceOver. Впрочем, без сложностей тоже не обошлось. Данный метод обхода защиты операционной системы требует от злоумышленников не только иметь физический доступ к смартфону жертвы (хотя бы на несколько минут), но и знать номер ее телефона. В противном случае провернуть манипуляции, необходимые для «взлома», попросту не получится.

Как обойти пароль в iOS 12

  • Чтобы обойти пароль в iOS 12, необходимо вызвать Siri с экрана блокировки и попросить ее активировать службу VoiceOver;
  • Далее необходимо осуществить дозвон на номер телефона жертвы;
  • В момент вызова на взламываемом смартфоне необходимо выбрать ответ сообщением и нажать на клавишу «+»;
  • Затем нужно отправить сообщение на смартфон жертвы, уведомление о котором при условии активной службы VoiceOver вызывает системную ошибку и открывает доступ к интерфейсу сообщений, списку последних набранных контактов и возможности просматривать о них подробные сведения по нажатию на клавишу «i».

Как защитить iPhone от взлома

При всей своей примитивности данный метод обхода пароля не был исправлен даже в первой бета-версии iOS 12.1, которая вышла две недели назад. Тем не менее пользователи сами могут уберечь себя и свои iPhone от несанкционированного доступа. Для этого необходимо запретить вызывать Siri с заблокированного экрана. Просто перейдите в «Настройки» — «Touch ID и код-пароль» и в разделе «Доступ с блокировкой экрана» отключите возможность Siri быть вызванной с заблокированного экрана.

Обсудить эту и другие новости Apple можно в нашем Telegram-чате.