Ассистентом Siri можно будет пользоваться даже без интернета

Apple Siri

Голосовой ассистент Siri серьезно отстает от конкурентов в плане возможностей. Компания Apple постоянно пытается его улучшить, например, дав пользователям возможность самостоятельно добавлять голосовые команды. Судя по новому патенту, разработчики намерены сделать еще один шаг к улучшению помощника, научив его работать без подключения к интернету. Благо, все необходимое для реализации задумки у компании есть.

На данный момент ассистент Siri распознает сказанные пользователем слова, отправляя анонимную запись голоса на удаленные сервера. Следовательно, для работы помощника необходим интернет: удаленный сервер преобразует аудио в текст, и на его основе ищет информацию в Сети и предоставляет ее пользователю.

В новой патентной заявке компания описывает способ распознавания голосовых команд прямо на устройстве, без отправки аудио на удаленные сервера. Для этого предлагается использовать встроенную систему модулей, состоящую из элементов для синтеза речи, обработки диалогов, фонетического алфавита и модуля обработки естественного языка.

Исходя из распознанных слов и структуры запроса, помощник сможет выполнять определенные действия, сохраненные в модулях обработки потока задач и модуле обслуживания. Среди предопределенных действий, например, числятся установка таймера и воспроизведение сохраненных во внутренней памяти песен.

Патент предусматривает случаи, когда устройство может подключиться к интернету. Помощник будет использовать подключение для улучшения результата выдачи, а также обращаться к интернету при невозможности распознать команду локально.

Если предыдущие патенты Apple вроде улучшения пользования устройством под дождем вряд ли будут реализованы в ближайшее время, эта патентная заявка кажется вполне реализуемой. Последние чипсеты Apple оборудованы движком Neural Engine для выполнения интенсивных задач вроде распознавания лица — скорее всего, ему под силу и распознавание голосовых команд.

Как часто вы пользуетесь ассистентом Siri? Свои ответы можете отправить в комментариях или в нашем Telegram-чате.

Apple хочет, чтобы вы разблокировали iPhone еще и голосом

Apple работает над технологией распознавания голоса Voice ID. Это следует из материалов Ведомства по патентам и товарным знакам США, зарегистрировавшим патент с соответствующим содержанием. Будущий интерфейс будет способен улавливать уникальные особенности тембра и колебания речевых связок пользователя и в конечном итоге сможет заменить Face ID как еще более совершенный метод идентификации , не имеющий недостатков технологии распознавания лиц.

На то, что Apple планирует использовать Voice ID именно при снятии блокировки со смартфона, а не для распознавания голосов разных людей при работе с Siri, прямо указывает описание изобретения. Как видно на представленных чертежах, голосовая разблокировка будет даже проще, чем лицевая, поскольку не будет требовать нахождения пользователя в поле зрения смартфона. Все, что от вас потребуется, — произнести кодовую фразу, после анализа которой смартфон либо снимет блокировку, либо предложит ввести пароль доступа.

Разблокировка смартфона голосом

Попросить смартфон снять блокировку при помощи голоса, не прикасаясь к нему, как того требуют Face ID и Touch ID, гораздо удобнее, если он лежит на столе, а ваши руки чем-нибудь заняты или испачканы. Но даже если Voice ID не заменит другие способы идентификации полностью, он имеет все шансы стать одним из самых востребованных, по крайней мере в некоторых сценариях использования.

Недостатки Voice ID

Голосовая разблокировка, помимо очевидного удобства, имеет ряд недостатков, которые для многих пользователей могут оказаться решающими.

Во-первых, разблокировка голосом может смутить многих пользователей, которые будут чувствовать себя глупо, разговаривая со своим смартфонов. Именно стеснение препятствует построению конструктивного общения между пользователем и Siri, которая из-за человеческого страха быть услышанным посторонними редко используется вне дома.

Во-вторых, страх публичного разглашения кодового слова или фразы рискует превратить Voice ID в способ разблокировки, который будет использоваться только наедине со смартфоном. И хотя при голосовой идентификации значение имеет только тембр и особенности речи, а не само выражение, людям будет сложно свыкнуться с мыслью, что их пароль могут услышать не только они.

Обсудить эту и другие новости Apple можно в нашем Telegram-чате.

Siri позволяет украсть фотографии из чужого iPhone

В начале октября пользователь Хосе Родригес обнаружил, что уязвимость в iOS 12 позволяет обойти пароль чужого iPhone и получить доступ к его сообщениям и контактам. Для манипуляции ему потребовались помощник Siri, служба VoiceOver для озвучивания информации на экране и номер телефона жертвы. Дальнейшее изучение уязвимости показало, что примерно таким же образом можно украсть фотографии с чужого телефона. Метод оказался проще предыдущего.

Как и в предыдущем случае, для взлома требуется физический доступ к iPhone жертвы и номер его телефона. В самом начале автор видео позвонил на номер жертвы, чтобы активировать экран голосового вызова iOS. В нем он выбрал пункт ответа SMS-сообщением. Написав случайные буквы в поле ввода, хакер вызвал голосового помощника Siri и попросил активировать службу VoiceOver.

Вернувшись к сообщениям, Родригес вызвал системный конфликт, поочередно нажимая на кнопку камеры, домашнюю клавишу и два раза касаясь экрана. Ошибка возникла не сразу, но количество попыток было не ограничено. При удачном вызове конфликта появился черный экран с невидимым пользовательским интерфейсом. В нем, перемещаясь жестами вправо и влево и слушая подсказки VoiceOver, хакер нашел раздел с фотографиями. Двойное нажатие на соответствующем квадрате возвратило к сообщениям.

После манипуляций вместо клавиатуры появился раздел с невидимыми фотографиями. Так же перемещаясь при помощи жестов и два раза нажимая по невидимым участкам, Родригес переслал «чужие» фото на свой смартфон.

Данной уязвимости подвержены iPhone с операционной системой iOS 12.0.1. Чтобы защитить свое устройство, нужно запретить вызов Siri с экрана блокировки. Это делается в пункте настроек «Touch ID и код-пароль» в разделе «Доступ с блокировкой экрана».

Обсудить эту и другие новости об iPhone можно в нашем Telegram-чате.

Как Siri позволяет обойти пароль в iOS 12

Несмотря на то что каждая последующая версия iOS становится надежнее предыдущей, порой даже в самой актуальной сборке могут появляться баги, на корню рушащие безопасность операционной системы. Эта проблема не обошла стороной iOS 12, которая, как удалось выяснить пользователю по имени Хосе Родригес, позволяет обойти пароль любой сложности и получить доступ к конфиденциальной информации владельца, в том числе списку контактов в записной книге и фото.

Как и серия прошлых багов, позволяющая обойти пароль операционной системы, этот также задействует Siri и службу VoiceOver. Впрочем, без сложностей тоже не обошлось. Данный метод обхода защиты операционной системы требует от злоумышленников не только иметь физический доступ к смартфону жертвы (хотя бы на несколько минут), но и знать номер ее телефона. В противном случае провернуть манипуляции, необходимые для «взлома», попросту не получится.

Как обойти пароль в iOS 12

  • Чтобы обойти пароль в iOS 12, необходимо вызвать Siri с экрана блокировки и попросить ее активировать службу VoiceOver;
  • Далее необходимо осуществить дозвон на номер телефона жертвы;
  • В момент вызова на взламываемом смартфоне необходимо выбрать ответ сообщением и нажать на клавишу «+»;
  • Затем нужно отправить сообщение на смартфон жертвы, уведомление о котором при условии активной службы VoiceOver вызывает системную ошибку и открывает доступ к интерфейсу сообщений, списку последних набранных контактов и возможности просматривать о них подробные сведения по нажатию на клавишу «i».

Как защитить iPhone от взлома

При всей своей примитивности данный метод обхода пароля не был исправлен даже в первой бета-версии iOS 12.1, которая вышла две недели назад. Тем не менее пользователи сами могут уберечь себя и свои iPhone от несанкционированного доступа. Для этого необходимо запретить вызывать Siri с заблокированного экрана. Просто перейдите в «Настройки» — «Touch ID и код-пароль» и в разделе «Доступ с блокировкой экрана» отключите возможность Siri быть вызванной с заблокированного экрана.

Обсудить эту и другие новости Apple можно в нашем Telegram-чате.

Apple выпустила в App Store приложение «Команды» для Siri

Вечером 17 сентября, одновременно с релизом iOS 12, watchOS 5 и tvOS 12, Apple выпустила приложение «Команды» для Siri. Именно оно будет обеспечивать работу функции быстрых команд (shortcuts), позволяющих автоматизировать выполнение многих повседневных задач на iPhone и iPad.

Приложение «Команды» предназначено для создания персонализированных команд для Siri. Благодаря им в одну фразу можно уместить сразу несколько действий. Например, по команде «Siri, едем домой», голосовой ассистент включит ваш любимый плейлист и проложит оптимальный маршрут, обойдя пробки.

Создать свою команду для Siri

Помимо возможности генерировать собственные команды, приложение по умолчанию содержит более 300 встроенных действий и поддерживает многие программы для iOS. Так, с помощью штатных команд можно отправить сообщение с последним снимком, опубликовать пост в Twitter с названием песни, которую вы слушаете, или получить разом все изображения с веб-страницы.

Поскольку функциональность приложения «Команды» неразрывно связана с нововведениями iOS 12, то и установить его можно только на устройства под управлением актуальной версии ОС. Сделать это смогут владельцы всех совместимых гаджетов, начиная с iPhone 5s и iPad Air первого поколения.

Обсудить эту и другие новости Apple можно в нашем Telegram-чате.

Название: Команды
Издатель/разработчик: Apple
Цена: Бесплатно
Встроенные покупки: Нет
Совместимость: Универсальное приложение
Ссылка: Установить

Найдена реальная причина, по которой Siri отстает от конкурентов

Медленное развитие Siri может быть связано с банальным отсутствием интереса к проекту у Эдди Кью, некоторое время являвшегося его руководителем. Об этом сообщает The Information со ссылкой на нескольких экс-сотрудников Apple, занимавшихся разработкой голосового ассистента компании.

Назначить Эдди Кью руководителем проекта Siri изначально было плохой идеей, рассказывают его бывшие подчиненные. Из-за того, что он не испытывал интереса к продукту, доклады инженеров о путях развития ассистента не вызывали у него ничего, кроме скуки, которую он демонстрировал окружающим.

Что Эдди Кью делает, когда ему скучно

Известно как минимум два случая, когда Кью надоедало бороться со скукой и он просто засыпал во время встреч с членами команды Siri, откровенничают собеседники The Information. Он просто склонял голову на плечо и погружался в сон, в то время как кто-то из его подчиненных делился технической информацией.

Apple Music — идея Эдди Кью

При всем при этом Эдди Кью является очень важным для Apple сотрудником. Именно он осенью 2011 года, сразу после смерти Джобса, определил дальнейшее направление развития iTunes. По его мнению, музыкальный бизнес Apple следовало незамедлительно перевести на подписную модель распространения, перестав зависеть от продаж.

По словам бывших подчиненных Кью, он является чрезвычайно продуктивным человеком, который способен выполнять несколько дел одновременно. Он неоднократно доказывал это за годы работы в Apple, поэтому, пожалуй, простим ему его сон на рабочем месте и отсутствие интереса к такому сложному проекту, как Siri.

Обсудить эту и другие новости Apple можно в нашем Telegram-чате.

Как изменилась Siri в iOS 12

В последней версии iOS разработчики решили пересмотреть свой подход к Siri. Голосовой помощник обзавелся мощным инструментом «Siri Shortcuts», который позволяет автоматизировать ваши действия. Не обошлось и без улучшений самого алгоритма Siri. Остановимся на этом подробнее, и узнаем, на что способен голосовой ассистент Apple в iOS 12.

В этой статье мы не будем затрагивать нюансы работы с Siri Shortcuts, поскольку эта тема заслуживает отдельного пристального внимания. Сегодня речь пойдет исключительно о новых возможностях Siri в iOS 12.

Итак, что изменилось?

  • Команда «Привет, Siri» теперь работает с включенным режимом энергосбережения.
  • Siri отныне сможет включать и воспроизводить музыку из сторонних приложений, например, из Spotify.
  • Голосовой помощник теперь сможет показать пароли из «Связки ключей» по требованию.
  • Siri можно попросить найти потерянное устройство и воспроизвести сигнал на нём, не прибегая к помощи Find My iPhone.
  • Голосовой ассистент отныне может включать и выключать фонарик.
  • Алгоритм анализа ваших действий и привычек был усовершенствован. В результате чего при поиске будут показываться наиболее подходящие, лично вам, результаты.
  • База ответов по различным вопросам была значительно пополнена.
  • Поиск по фотографиям стал ещё лучше. Например, можно попросить Siri найти все снимки с определенным человеком.

Напомним, что официальный релиз iOS 12 ожидается в сентябре.

Обсудить эту и другие новости Apple можно в нашем Telegram-чате.

Вы точно захотите пользоваться такой Siri

Siri может приносить немалую пользу и быть удобной в использовании, доказал разработчик интерфейсов Кевин Эжен. Он представил собственный концепт интерфейса Siri, который, по его мнению, перевернет представление пользователей о голосовом помощнике от Apple.

Основная идея концепта состоит в том, чтобы сделать Siri менее заметной, но при этом более функциональной. Для этого следует научить голосового помощника не занимать собой весь экран, как это происходит сейчас, а работать в формате уведомлений. Иными словами, активация ассистента не должна прерывать выполнение текущей задачи.

Как улучшить Siri

Работа в формате уведомлений может оказаться куда более перспективным методом взаимодействия пользователя с Siri, считает Эжен. По его замыслу, пользователь, набирая сообщение своему другу, должен иметь возможность попросить ассистента показать фотографии, которые можно тут же отправить собеседнику.

Кроме того, полагает разработчик, было бы неплохо научить Siri работать с многозадачностью, например, попросив ее открыть окно сообщений во время отправки email, а также наделить ассистентку возможностью реально работать с элементами ОС. Например, позволяя ей копировать данные и вставлять их по требованию пользователя.

Какой будет Siri в будущем

Самое главное, что для реализации задумок Эжена дизайнерам Apple не придется сильно менять интерфейс операционной системы. Все элементы, которые разработчик задействовал в своем концепте, в том или ином виде уже присутствуют в iOS, применяясь разве что в других сценариях использования.

Apple, просим!

Обсудить крутейший концепт Siri можно в комментариях ниже или в нашем Telegram-чате.

Siri оказалась самым быстро обучаемым голосовым ассистентом

Аналитики компании Loup Ventures провели независимое тестирование популярных голосовых ассистентов, по итогам которого Siri удалось верно ответить на 78% заданных вопросов. Этот результат на 12% лучше прошлогоднего, но по-прежнему далек от показателей Google Assistant.

В испытании приняли участие четыре голосовых ассистента: Siri, Google Assistant, Cortana и Alexa. Чтобы все помощники находились в равных условиях, было решено тестировать их на смартфонах под управлением актуальных для каждого экземпляра версий операционных систем.

Самый умный голосовой помощник

Каждому ассистенту было задано по 800 вопросов из пяти категорий: знание местности, покупки, навигация, команды и текущая информированность. В рамках эксперимента эксперты выявляли точность понимания виртуальными помощниками задаваемых вопросов и точность предоставляемых ими ответов.

Siri против Google Assistant

Понимание вопросов оказалось наиболее простой задачей для всех ассистентов, однако лидером рейтинга все же оказался Google Assistant, который верно понял 100% вопросов. На втором месте расположилась Siri с показателем 99%, а на третьем и четвертом — с показателями 98% — Alexa и Cortana.

С ответами на вопросы оказалось сложнее. Впрочем, первое место со значительным отрывом вновь занял Google Assistant, правильно ответивший на 85,5% вопросов. Siri, как отмечалось выше, дала 78,5% верных ответов, а Alexa и Cortana заняли третье и четвертое места, ответив на 61,4 и 52,4% вопросов соответственно.

Насколько умна Siri

Интересно, что самый большой скачок в развитии произошел у Siri. За год голосовая ассистентка Apple подтянулась как в понимании вопросов, так и в даче верных ответов. По крайней мере, прогресс заметен у англоязычной версии виртуального помощника, который и принимал участие в тесте.

Обсудить эту и другие новости Apple можно в нашем Telegram-чате.

HomePod получит функции, которых так не хватает сейчас

С выходом iOS 12 умная колонка HomePod получит несколько новых функций, которых от нее ждали еще до официального появления в продаже. Об этом сообщает французский ресурс iGeneration. 

Поскольку управление колонкой осуществляется в основном вербально, большинство нововведений коснутся голосового ассистента Siri.

Как позвонить с помощью HomePod

Прежде всего, отмечают коллеги, с выходом обновления HomePod научится принимать о совершать телефонные звонки при подаче соответствующей команды. На данный момент пользователям разрешается только выводить на колонку звук со смартфона при условии ее нахождения в зоне досягаемости, но не могут попросить ее позвонить кому-либо из списка контактов.

HomePod и FaceTime

Кроме возможности принимать и совершать звонки, HomePod сможет воспроизводить голосовую почту, а также инициировать участие в FaceTime-конференциях. Последнее нововведение, к слову, было официально подтверждено в ходе Всемирной конференции разработчиков, которая прошла в первых числах июня.

Как найти iPhone с помощью HomePod

Из менее примечательных, но не менее полезных функций, которыми обзаведется HomePod этой осенью, отметим возможность поиска потерянного iPhone по голосовой команде, возможность подключаться к той же сети Wi-Fi, что и сопряженный смартфон (особенности актуальной версии прошивки таковы, что пользователь не знает, к какой сети он подключен), а также возможность запуска нескольких таймеров одновременно.

Обсудить эту и другие новости Apple можно в нашем Telegram-чате.