Как Siri в HomePod изменилась за последний год

Всего за год Apple удалось повысить точность распознавания запросов и ответов, которые дает Siri в HomePod, почти вполовину, убедился аналитик Джин Мюнстер. Он провел собственный эксперимент, в ходе которого задал конкурирующим голосовым ассистентам — Google Assistant, Cortana, Alexa и Siri — по 800 вопросов и сопоставил количество верных распознаваний и правильных ответов. Результат показал, что Apple не сидела все это время сложа руки, а действительно занималась совершенствованием своего детища.

В общей сложности Siri удалось правильно ответить на 74,6% вопросов, что является серьезным прорывом, если сравнивать с результатами эксперимента, проведенного год назад. Тогда голосовой ассистент Apple выдал всего 52,3% правильных ответов. По словам Мюнстера, это связано с обилием обновлений, которые привнесли поддержку новых функций вроде способности устанавливать несколько таймеров одновременно, искать песни по тексту, совершать и принимать телефонные звонки и многое другое.

Команды — конек Siri

В выполнении команд, как выяснилось, Siri в HomePod и вовсе нет равных. Голосовой ассистент Apple превосходно справляется с обменом сообщениями, управлением и поиском музыки и взаимодействием с другими приложениями и сервисами. По мнению Мюнстера, это связано с глубокой взаимной интеграцией Siri и других программных продуктов Apple, обеспечиваемой SiriKit.

Любопытно, что способности Google Assistant остались примерно на том же уровне, что и год назад, претерпев весьма незначительный апгрейд. За это время поисковому гиганту удалось повысить точность ответов фирменного ассистента всего на 6% — с 81 до 87%. Видимо, сказался и без того высокий уровень интеллектуальных способностей голосового помощника, даже малейшее совершенствование которого требует от разработчиков неимоверных усилий.

А как вы оцениваете интеллектуальные способности Siri? Делитесь мнением в комментариях или нашем Telegram-чате.

Как ИИ помогает HomePod узнавать ваш голос в любых условиях

Способность HomePod отделять речь живого человека от звуков из динамиков и посторонних шумов, проистекает из технологий машинного обучения. Только благодаря этому колонка позволяет управлять ей даже в моменты воспроизведения, а также улавливать команды со значительного расстояния. Об этом говорится в журнале Machine Learning Journal, в котором Apple подробно рассказывает о своих достижениях в разработке искусственного интеллекта и смежных областях.

«Среда, в которой вынуждена работать HomePod, имеет массу препятствий — эхо, реверберация и шум. В отличие от Siri на iPhone, которая работает на более близком расстоянии к губам [пользователя], Siri на HomePod должна изначально обладать большей чувствительностью. Пользователи хотят вызывать Siri со значительного удаления, например, с дивана или из кухни вне зависимости от того, где располагается HomePod. С учетом всех препятствий, с которыми может столкнуться [HomePod], потребовалась более тесная интеграция различных технологий многоканальной обработки звуков», — говорится в статье.

Распознавание речи

Чтобы добиться максимально эффективного распознавания, инженерам Apple пришлось оснастить HomePod программным фильтром. Именно он нивелирует влияние окружающих шумов на голосовой поток и выделяет речь обратившегося пользователя от речи остальных людей, которые находятся в одном с ним помешении. А искусственный интеллект был нужен для того, чтобы выделять на общем фоне голос подающего команды пользователя, а не сглаживать его вместе со всеми.

По словам представителей Apple, в компании провели массу испытаний, прежде чем взяться за реализацию конкретных технологий очистки звука. В рамках тестирования колонку испытывали в нескольких акустических условиях, например, при воспроизведении звука со сторонних аудиоустройств, шуме дождя, беседе группы людей и шумах бытовых приборах. Кроме того, отслеживалось влияние местоположения HomePod на ее способность воспринимать команды, а также степень улучшения распознавания при перемещении колонки.

Обсудить эту и другие новости Apple можно в нашем Telegram-чате.

iPhone получили поддержку команды «Окей, Google»

Владельцы iPhone, работающих под управлением iOS 12 и более новых версий мобильной ОС от Apple, теперь смогут вызывать Google Assistant фразой «Окей, Google». Это стало возможным благодаря функции быстрых команд Siri, которая позволяет использовать выражения-триггеры для быстрого выполнения тех или иных задач. Google Assistant для iOS получил их поддержку с выходом последнего обновления, чей релиз состоялся ранее на этой неделе.

Несмотря на то что теперь пользователи iOS-устройств действительно получили возможность вызывать Google Assistant голосом, делать это будет сложнее, или, по крайней мере страннее, чем на Android. Страннее хотя бы потому, что для активации голосового помощника от Google пользователю придется сначала вызвать Siri и только потом озвучить ей желание пообщаться с ИИ конкурента. Возможности избежать таких строгих правил, к сожалению, не предусмотрено.

Поскольку за активацию Google Assistant на самом деле будет отвечать не команда «Окей, Google», а Siri, пользователь вправе задать любое выражение-триггер. Главное, произнести его после активации штатного ассистента. После этого можете смело начинать общаться с разработкой Google, которая хоть и несовершенна, во многих вопросах оказывается даже более компетентной, чем Siri. Например, Google Assistant лучше распознает речь, облегчая диктовку текстовых сообщений.

Как вызвать Google Assistant по команде «Окей, Google» на iOS

Чтобы научить Siri активировать Google Assistant, необходимо проделать следующие действия:

  • Запустите Google Assistant на своем iOS-устройстве и произнесите «Окей, Google», чтобы система вас запомнила;
  • Перейдите в «Настройки» — «Siri и Поиск»;
  • В списке «Предлагаемые команды» выберите Google Assistant;
  • В открывшемся окне коснитесь красной клавиши записи и произнесите фразу «Окей, Google», после чего сохраните ее.

Теперь, активировав Siri, вы сможете вызывать Google Assistant соответствующей командой.

P.S. По неизвестной причине данный метод работает не у всех пользователей. Возможно, это как-то связано с тем, что обновление Google Assistant с поддержкой быстрых команд Siri распространяется постепенно. Если у вас не получилось, подождите некоторое время и попробуйте снова.

Обсудить эту и другие новости Apple можно в нашем Telegram-чате.

Название: Google Ассистент
Издатель/разработчик: Google LLC
Цена: Бесплатно
Встроенные покупки: Нет
Совместимость: Универсальное приложение
Ссылка: Установить

Создатель Siri рассказал, как сделать голосового помощника полезным

Siri рискует никогда не раскрыть весь свой потенциал, так и не обретя должной популярности среди пользователей, если Apple не допустит к развитию проекта сторонних разработчиков. Об этом основатель стартапов SIRI и Viv Labs Даг Киттлаус рассказал в интервью Джиму Крамеру, ведущему программы Mad Money на телеканале CNBC. По словам предпринимателя, политика закрытости, которая лежит в основе почти всех продуктов Apple, — это путь в никуда, лишающий их львиной доли функций.

К сожалению, голосовые помощники сегодня используются в основном для выполнения только самых примитивных задач вроде активации фонарика, установки будильника или набора телефонного номера, констатирует Киттлаус. Но этот перечень мог бы быть куда более широким, если бы в Купертино поняли, что идей, которые генерируют ее сотрудники, недостаточно для полноценного развития Siri. Весьма странно при этом, что Apple, имея перед собой наглядный пример, продолжает игнорировать объективную реальность.

Siri как открытая платформа

«Вспомните 2007 год. Когда был представлен первый iPhone, на нем было предустановлено около 9 приложений вроде «Погоды» и «Акций». Девять месяцев спустя они [Apple] представили App Store, благодаря которому пользователи получили доступ к миллионам и миллионам приложениям, изменившим мир. Мы хотим, чтобы то же самое произошло с помощниками», — провел параллель Киттлаус.

В качестве достойного примера Киттлаус привел голосового ассистента от Samsung, к созданию которого он также приложил руку. По его словам, перед разработчиками изначально стояла задача запустить Bixby в качестве открытой платформы. Для этого, объяснил предприниматель, был создан особый набор инструментов, который позволяет независимым разработчикам редактировать Bixby почти так же просто, как Википедию, расширяя его функциональные возможности.

Обсудить эту и другие новости Apple можно в нашем Telegram-чате.

Ассистентом Siri можно будет пользоваться даже без интернета

Apple Siri

Голосовой ассистент Siri серьезно отстает от конкурентов в плане возможностей. Компания Apple постоянно пытается его улучшить, например, дав пользователям возможность самостоятельно добавлять голосовые команды. Судя по новому патенту, разработчики намерены сделать еще один шаг к улучшению помощника, научив его работать без подключения к интернету. Благо, все необходимое для реализации задумки у компании есть.

На данный момент ассистент Siri распознает сказанные пользователем слова, отправляя анонимную запись голоса на удаленные сервера. Следовательно, для работы помощника необходим интернет: удаленный сервер преобразует аудио в текст, и на его основе ищет информацию в Сети и предоставляет ее пользователю.

В новой патентной заявке компания описывает способ распознавания голосовых команд прямо на устройстве, без отправки аудио на удаленные сервера. Для этого предлагается использовать встроенную систему модулей, состоящую из элементов для синтеза речи, обработки диалогов, фонетического алфавита и модуля обработки естественного языка.

Исходя из распознанных слов и структуры запроса, помощник сможет выполнять определенные действия, сохраненные в модулях обработки потока задач и модуле обслуживания. Среди предопределенных действий, например, числятся установка таймера и воспроизведение сохраненных во внутренней памяти песен.

Патент предусматривает случаи, когда устройство может подключиться к интернету. Помощник будет использовать подключение для улучшения результата выдачи, а также обращаться к интернету при невозможности распознать команду локально.

Если предыдущие патенты Apple вроде улучшения пользования устройством под дождем вряд ли будут реализованы в ближайшее время, эта патентная заявка кажется вполне реализуемой. Последние чипсеты Apple оборудованы движком Neural Engine для выполнения интенсивных задач вроде распознавания лица — скорее всего, ему под силу и распознавание голосовых команд.

Как часто вы пользуетесь ассистентом Siri? Свои ответы можете отправить в комментариях или в нашем Telegram-чате.

Apple хочет, чтобы вы разблокировали iPhone еще и голосом

Apple работает над технологией распознавания голоса Voice ID. Это следует из материалов Ведомства по патентам и товарным знакам США, зарегистрировавшим патент с соответствующим содержанием. Будущий интерфейс будет способен улавливать уникальные особенности тембра и колебания речевых связок пользователя и в конечном итоге сможет заменить Face ID как еще более совершенный метод идентификации , не имеющий недостатков технологии распознавания лиц.

На то, что Apple планирует использовать Voice ID именно при снятии блокировки со смартфона, а не для распознавания голосов разных людей при работе с Siri, прямо указывает описание изобретения. Как видно на представленных чертежах, голосовая разблокировка будет даже проще, чем лицевая, поскольку не будет требовать нахождения пользователя в поле зрения смартфона. Все, что от вас потребуется, — произнести кодовую фразу, после анализа которой смартфон либо снимет блокировку, либо предложит ввести пароль доступа.

Разблокировка смартфона голосом

Попросить смартфон снять блокировку при помощи голоса, не прикасаясь к нему, как того требуют Face ID и Touch ID, гораздо удобнее, если он лежит на столе, а ваши руки чем-нибудь заняты или испачканы. Но даже если Voice ID не заменит другие способы идентификации полностью, он имеет все шансы стать одним из самых востребованных, по крайней мере в некоторых сценариях использования.

Недостатки Voice ID

Голосовая разблокировка, помимо очевидного удобства, имеет ряд недостатков, которые для многих пользователей могут оказаться решающими.

Во-первых, разблокировка голосом может смутить многих пользователей, которые будут чувствовать себя глупо, разговаривая со своим смартфонов. Именно стеснение препятствует построению конструктивного общения между пользователем и Siri, которая из-за человеческого страха быть услышанным посторонними редко используется вне дома.

Во-вторых, страх публичного разглашения кодового слова или фразы рискует превратить Voice ID в способ разблокировки, который будет использоваться только наедине со смартфоном. И хотя при голосовой идентификации значение имеет только тембр и особенности речи, а не само выражение, людям будет сложно свыкнуться с мыслью, что их пароль могут услышать не только они.

Обсудить эту и другие новости Apple можно в нашем Telegram-чате.

Siri позволяет украсть фотографии из чужого iPhone

В начале октября пользователь Хосе Родригес обнаружил, что уязвимость в iOS 12 позволяет обойти пароль чужого iPhone и получить доступ к его сообщениям и контактам. Для манипуляции ему потребовались помощник Siri, служба VoiceOver для озвучивания информации на экране и номер телефона жертвы. Дальнейшее изучение уязвимости показало, что примерно таким же образом можно украсть фотографии с чужого телефона. Метод оказался проще предыдущего.

Как и в предыдущем случае, для взлома требуется физический доступ к iPhone жертвы и номер его телефона. В самом начале автор видео позвонил на номер жертвы, чтобы активировать экран голосового вызова iOS. В нем он выбрал пункт ответа SMS-сообщением. Написав случайные буквы в поле ввода, хакер вызвал голосового помощника Siri и попросил активировать службу VoiceOver.

Вернувшись к сообщениям, Родригес вызвал системный конфликт, поочередно нажимая на кнопку камеры, домашнюю клавишу и два раза касаясь экрана. Ошибка возникла не сразу, но количество попыток было не ограничено. При удачном вызове конфликта появился черный экран с невидимым пользовательским интерфейсом. В нем, перемещаясь жестами вправо и влево и слушая подсказки VoiceOver, хакер нашел раздел с фотографиями. Двойное нажатие на соответствующем квадрате возвратило к сообщениям.

После манипуляций вместо клавиатуры появился раздел с невидимыми фотографиями. Так же перемещаясь при помощи жестов и два раза нажимая по невидимым участкам, Родригес переслал «чужие» фото на свой смартфон.

Данной уязвимости подвержены iPhone с операционной системой iOS 12.0.1. Чтобы защитить свое устройство, нужно запретить вызов Siri с экрана блокировки. Это делается в пункте настроек «Touch ID и код-пароль» в разделе «Доступ с блокировкой экрана».

Обсудить эту и другие новости об iPhone можно в нашем Telegram-чате.

Как Siri позволяет обойти пароль в iOS 12

Несмотря на то что каждая последующая версия iOS становится надежнее предыдущей, порой даже в самой актуальной сборке могут появляться баги, на корню рушащие безопасность операционной системы. Эта проблема не обошла стороной iOS 12, которая, как удалось выяснить пользователю по имени Хосе Родригес, позволяет обойти пароль любой сложности и получить доступ к конфиденциальной информации владельца, в том числе списку контактов в записной книге и фото.

Как и серия прошлых багов, позволяющая обойти пароль операционной системы, этот также задействует Siri и службу VoiceOver. Впрочем, без сложностей тоже не обошлось. Данный метод обхода защиты операционной системы требует от злоумышленников не только иметь физический доступ к смартфону жертвы (хотя бы на несколько минут), но и знать номер ее телефона. В противном случае провернуть манипуляции, необходимые для «взлома», попросту не получится.

Как обойти пароль в iOS 12

  • Чтобы обойти пароль в iOS 12, необходимо вызвать Siri с экрана блокировки и попросить ее активировать службу VoiceOver;
  • Далее необходимо осуществить дозвон на номер телефона жертвы;
  • В момент вызова на взламываемом смартфоне необходимо выбрать ответ сообщением и нажать на клавишу «+»;
  • Затем нужно отправить сообщение на смартфон жертвы, уведомление о котором при условии активной службы VoiceOver вызывает системную ошибку и открывает доступ к интерфейсу сообщений, списку последних набранных контактов и возможности просматривать о них подробные сведения по нажатию на клавишу «i».

Как защитить iPhone от взлома

При всей своей примитивности данный метод обхода пароля не был исправлен даже в первой бета-версии iOS 12.1, которая вышла две недели назад. Тем не менее пользователи сами могут уберечь себя и свои iPhone от несанкционированного доступа. Для этого необходимо запретить вызывать Siri с заблокированного экрана. Просто перейдите в «Настройки» — «Touch ID и код-пароль» и в разделе «Доступ с блокировкой экрана» отключите возможность Siri быть вызванной с заблокированного экрана.

Обсудить эту и другие новости Apple можно в нашем Telegram-чате.

Apple выпустила в App Store приложение «Команды» для Siri

Вечером 17 сентября, одновременно с релизом iOS 12, watchOS 5 и tvOS 12, Apple выпустила приложение «Команды» для Siri. Именно оно будет обеспечивать работу функции быстрых команд (shortcuts), позволяющих автоматизировать выполнение многих повседневных задач на iPhone и iPad.

Приложение «Команды» предназначено для создания персонализированных команд для Siri. Благодаря им в одну фразу можно уместить сразу несколько действий. Например, по команде «Siri, едем домой», голосовой ассистент включит ваш любимый плейлист и проложит оптимальный маршрут, обойдя пробки.

Создать свою команду для Siri

Помимо возможности генерировать собственные команды, приложение по умолчанию содержит более 300 встроенных действий и поддерживает многие программы для iOS. Так, с помощью штатных команд можно отправить сообщение с последним снимком, опубликовать пост в Twitter с названием песни, которую вы слушаете, или получить разом все изображения с веб-страницы.

Поскольку функциональность приложения «Команды» неразрывно связана с нововведениями iOS 12, то и установить его можно только на устройства под управлением актуальной версии ОС. Сделать это смогут владельцы всех совместимых гаджетов, начиная с iPhone 5s и iPad Air первого поколения.

Обсудить эту и другие новости Apple можно в нашем Telegram-чате.

Название: Команды
Издатель/разработчик: Apple
Цена: Бесплатно
Встроенные покупки: Нет
Совместимость: Универсальное приложение
Ссылка: Установить

Найдена реальная причина, по которой Siri отстает от конкурентов

Медленное развитие Siri может быть связано с банальным отсутствием интереса к проекту у Эдди Кью, некоторое время являвшегося его руководителем. Об этом сообщает The Information со ссылкой на нескольких экс-сотрудников Apple, занимавшихся разработкой голосового ассистента компании.

Назначить Эдди Кью руководителем проекта Siri изначально было плохой идеей, рассказывают его бывшие подчиненные. Из-за того, что он не испытывал интереса к продукту, доклады инженеров о путях развития ассистента не вызывали у него ничего, кроме скуки, которую он демонстрировал окружающим.

Что Эдди Кью делает, когда ему скучно

Известно как минимум два случая, когда Кью надоедало бороться со скукой и он просто засыпал во время встреч с членами команды Siri, откровенничают собеседники The Information. Он просто склонял голову на плечо и погружался в сон, в то время как кто-то из его подчиненных делился технической информацией.

Apple Music — идея Эдди Кью

При всем при этом Эдди Кью является очень важным для Apple сотрудником. Именно он осенью 2011 года, сразу после смерти Джобса, определил дальнейшее направление развития iTunes. По его мнению, музыкальный бизнес Apple следовало незамедлительно перевести на подписную модель распространения, перестав зависеть от продаж.

По словам бывших подчиненных Кью, он является чрезвычайно продуктивным человеком, который способен выполнять несколько дел одновременно. Он неоднократно доказывал это за годы работы в Apple, поэтому, пожалуй, простим ему его сон на рабочем месте и отсутствие интереса к такому сложному проекту, как Siri.

Обсудить эту и другие новости Apple можно в нашем Telegram-чате.