Создание сценариев с Alexa
Разработчики смарт-колонки каждый год расширяют функционал голосового помощника Alexa. На 2019 год набор функций виртуального ассистента перешагнуло за 15000. Для создания разных сценариев задач, предназначенных для дальнейшей голосовой обработки, имеется специальная функция «Навыки» (Skills) с открытым API.
Благодаря этому пользователям Alexa доступно самостоятельное создание различных голосовых сценариев работы. В основе этих возможностей лежат значительные навыки, заложенные в неё создателями. Система хранит в своей памяти обширный набор знаний: названия кинофильмов, стран, городов, имена известных личностей и т.д. Спектр встроенных знаний при этом всё время увеличивается – виртуальный помощник развивается по мере его эксплуатации. С этими знаниями комбинируются различные команды, доступные для голосового восприятия Amazon Alexa.
Создание нового скилла происходит в три этапа:
- Определение интерактивной модели голосового API.
- Написание обработчика команд.
- Проход ревью в сервисе Amazon.
Далее в действие вступает облачная платформа Lambda, входящая в пакет «Веб-сервис» от Amazon. В ответ на вызов того или иного сценария через API платформой производится вычисление и активация соответствующего события. Lambda работает со следующими языками:
- Nodejs.
- Python.
- С+.
- Java.
Пользователи, которые имеют опыт работы на этих простых компьютерных языках смогут без труда написать новый сценарий для своей умной колонки.
Телефоны Amazon Alexa
В наши дни Amazon встраивает Alexa в несколько смартфонов, и они бывают двух видов: Hands-Free и Push to Talk. С моделями громкой связи вы можете просто сказать Alexa, чтобы она включала музыку, читала новости и проверяла погоду, где бы вы ни находились. В моделях с функцией Push-to-Talk вы должны сначала дважды нажать кнопку питания, чтобы запросить что-то, и Alexa ответит.
Среди нынешних моделей громкой связи, выставленных на продажу, — OnePlus 8 Pro, Moto G7, LG G8 ThinQ, Moto Z4, Moto G6, Moto Z3, Moto Z3 Play, LG V35 ThinQ и Sony Xperia 1. телефонами для разговора являются Moto G7 Power, Moto G7 Play, Motorola One Action, LG Stylo 5 и Moto G6 Play.
Старые модели HTC U11, Huawei Mate 9 и Moto X4 также поддерживают голосовой поиск в режиме громкой связи. Mate 9 был первым телефоном с встроенной поддержкой Alexa, а HTC U11 был первым телефоном, который позволял использовать команды Alexa без помощи рук с постоянно включенным микрофоном. Вы можете произнести «Alexa», а затем выполнить команду, даже когда экран телефона выключен. Alexa на Mate 9 и U11 ведет себя аналогично динамикам Amazon Echo, хотя приложения не могут делать все, что могут делать динамики Echo.
Что вы можете делать с Alexa на смартфоне
Приложение Alexa может определять время, доставлять прогноз погоды или предоставлять ежедневные сводки о спорте и новостях от NPR, CNN, Associated Press и т. Д. Вот несколько команд, которые поддерживает Alexa:
- Алекса, сколько времени?
- Алекса, какие последние новости?
- Алекса, подбрось монетку.
- Алекса, 10 долларов в фунтах.
- Алекса, 15 раз 32.
- Алекса, как сегодня погода на улице?
- Алекса, установи таймер минут.
- Алекса, добавь молока в мой список покупок.
- Алекса, что у меня в календаре?
- Алекса, начни семиминутную тренировку.
- Алекса, расскажи сказку на ночь .
Приложение Alexa совместимо с сервисами Amazon Kindle и Audible. Если вы спросите: «Алекса, прочти мою книгу Kindle», вы услышите аудиокнигу или преобразование текста в речь самого последнего дополнения к вашей библиотеке Amazon. Когда вы спрашиваете «Алекса, прочти мою аудиокнигу», помощник запускает или возобновляет любую аудиокнигу, которую вы приобрели в Audible.
Приложение Alexa может управлять устройствами умного дома и подключенными автомобилями. Если у вас есть устройство Philips Hue или Samsung SmartThings, вы можете попросить Alexa включить свет или переключить телеканалы. Синяя ссылка Hyundai Платформа позволяет удаленно заводить автомобили, изменять температуру в салоне, запускать диагностику и оповещения по запросу, искать места назначения и удаленно определять местонахождение вашего автомобиля. Вот список всех поддерживаемых для Alexa устройств Интернета вещей.
Alexa тесно интегрирована с торговой платформой Amazon. Вы можете оформить заказ на что угодно на Amazon Prime, включая Amazon Fresh бакалея, Amazon Prime Pantry нескоропортящиеся товары и товары с двухчасовой доставкой Amazon Prime Now. Вы можете сказать: «Алекса, где мои вещи?» чтобы получить информацию об отслеживании посылок и воспользоваться эксклюзивными предложениями Alexa, которые действуют круглый год.
С помощью приложения Alexa вы получаете доступ к набору навыков Amazon — приложениям, которые используют распознавание голоса помощника. К особенно полезным относятся Повар приложение, которое может читать рецепты, отправлять списки покупок и отслеживать срок годности. Убер а также Lyft’s приложения могут вызывать аттракционы к вашему примерному местоположению; Fitbit’s приложение может сказать вам, сколько шагов вы сделали; то Capital One приложение указывает ваш банковский баланс; и приложения из Домино, Пицца Хат, а также Grubhub позволяют доставить еду.
Рекомендации редакции
Модельный ряд
У компании Bragi не много моделей, но между ними есть разница. Dash и Dash Pro отличаются тем, что Pro-версия дольше держит заряд и теоретически должна исправлять недочеты оригинала. Но и стоит подороже. Самые дешевые – The Headphones – это простые беспроводные наушники без сенсорного управления и прочих «наворотов», которые имеются у старших моделей.
К нам на обзор попала обычная версия Dash. В ходе подготовки материала модель пропала из магазина на сайте Bragi, но добавилась опция Pro-версии, которая изготавливается специально под ушной канал клиента – The Dash Pro tailored by Starkey Hearing Technologies. Но такая модель, как у нас на тесте, еще доступна в других магазинах и площадках.
Как иметь Alexa на вашем Smart TV
Alexa, мы уже не раз говорили, что это один из наших любимых помощников, почти самый. И это Google Assistant не плохо работает наоборот. Однако естественность, с которой вы можете общаться с Alexa для выполнения различных действий, убеждает нас гораздо больше, и в отношении Siri она выше.
Однако основная причина, по которой многие в конечном итоге делают ставки на Alexa, заключается в том, что она предлагает очень широкая экосистема совместимых продуктов . Если мы добавим к этому, что их Amazon Echo можно регулярно приобретать по бросовым ценам, кажется невозможным не поддаться их использованию.
Что ж, если вы один из тех пользователей, которые смирились с его многочисленными возможностями, вам наверняка интересно узнать, как разместить его на как можно большем количестве устройств. И, конечно же, помимо смартфона, планшета и даже компьютера, нет лучшего устройства для использования помощника Amazon, чем ваш смарт-телевизор.
Чтобы наслаждаться Alexa на вашем Smart TV, есть два варианта . Первое требует только использования официального приложения, которое может быть или не быть для используемой вами платформы, а второе – через внешнее устройство, о котором вы уже знаете, потому что мы рассказывали вам об этом несколько раз. Итак, мы начали.
Alexa через собственное приложение для вашего Smart TV
Первый способ насладиться Alexa на вашем Smart TV – это использовать его родное приложение . Если у вас есть телевизор с WebOS или Tizen, вам просто нужно зайти в соответствующие магазины приложений и найти его. Получив его, установите его, и вы можете переходить к следующему шагу – настройке.
Этот процесс установки не отличается от процесса установки на других устройствах, совместимых с Amazon Assistant. Он в основном состоит из войти в свою учетную запись Amazon и связать устройство . Таким образом, через пару минут у вас будет все готово для использования Ассистента через телевизор
Конечно, здесь важно, чтобы пульт дистанционного управления, который вы собираетесь использовать, имел микрофон, чтобы вы могли, по логике, использовать свой голос
Наконец, также важно знать, что для некоторых интеллектуальных телевизоров с Android TV, приложение Alexa – это как бы дополнение, навык. Так, например, на Sony телевизоры то, что вы найдете Alexa для Bravia
После этого установка и настройка Alexa на телевизорах Sony очень проста.
Алекса через Fire TV
Второй вариант, если на вашем Smart TV нет собственного приложения или команды, позволяющей использовать голосовые команды или микрофоны, встроенные в экран, – это: прибегать к собственному Fire TV Amazon .
Здесь, как мы уже объясняли, вы не только получаете преимущества, используя собственную операционную систему Amazon для интеллектуального управления вашим телевизором, но и более «родное» использование ее помощника. И это в сочетании с использованием HDMI CEC разъем на вашем телевизоре, может привести к полному управлению голосом, так что вы можете включить телевизор, выключить его, попросить просмотреть определенный контент и т. д.
Алекса не остановить
Alexa стала важной опорой для Amazon, помощник присутствует все чаще и это предложение, которое позволяет лицензирование использования своего интеллекта может быть решающим шагом стать безоговорочным лидером. Потому что, несмотря на то, что многие могут подумать, что с таким количеством новых посетителей то, что они делают в Amazon, не вызывает никаких сложностей, компания была бы представляем здесь свое программное обеспечение и получаем выгоду от всех отзывов Это приведет к тому, что все больше и больше пользователей будут использовать ту технологическую базу, которая питает Alexa
Потому что, несмотря на то, что многие могут подумать, что с таким количеством новых посетителей то, что они делают в Amazon, не вызывает никаких сложностей, компания была бы представляем здесь свое программное обеспечение и получаем выгоду от всех отзывов Это приведет к тому, что все больше и больше пользователей будут использовать ту технологическую базу, которая питает Alexa.
Так что скачок качества, который может сделать Alexa, если принятие этой программы будет высоким, будет невероятным. Итак, если в то время вы решили сделать ставку на этого голосового помощника для управления домашней автоматизацией, решение, возможно, было наиболее удачным.
Виды колонок
На сегодня помимо базовой модели, существуют версии умных колонок от Amazon: Echo Dot, базовая Echo 2-го поколения, Plus, Show. Все они отличаются размерами и техническими характеристиками.
1. Echo Dot
Размеры 3,2 х 8,4 х 8,4 см.
Масса 160г.
Дисплея нет.
Звучание моно.
Стриминг музыки имеется.
Динамик d-15мм, высокочастотный.
2. Amazon Echo (2-го поколения)
Размеры 14,8 х 8,8 х 8,8 см.
Масса 820г.
Дисплея нет.
Звучание стерео.
Стриминг музыки имеется.
Динамик: вуфер высота 63мм + стереодинамик d-16мм.
3. Echo Plus
Размеры 23,5 х 8,4 х 8,4 мм.
Масса 955г.
Дисплея нет.
Звучание стерео.
Стриминг музыки имеется.
Динамик: вуфер 63мм + стереодинамик d-20мм.
4. Echo Show
Размер 18,7 х 18,7 х 9 см.
Масса 1175г.
Дисплей 7 дюймов.
Звучание стерео.
Стриминг музыки имеется.
Динамик: 2 стереодинамика d-55мм.
Функциональность
Dash – «умные» наушники. Они не просто могут воспроизводить музыку без проводов. Производитель снабдил их несколькими дополнительными возможностями. Для начала, тут есть хранилище емкостью 4 ГБ. Полезным это будет на тот случай, если в планах у пользователя какие-либо активности без источника звука под рукой. Например, на случай, если просто хочется отвлечься от всего и пройтись без смартфона, но музыку послушать все же хочется. Или в бассейне, например. И это подводит нас ко второй интересной особенности устройства.
В наушниках есть набор датчиков, которые собирают данные об активности. Есть три основные занятия, которые поддерживает аксессуар – бег, плавание и велосипед. Контролируются они через приложение смартфона. Кроме количества шагов, расстояния и времени, устройство может измерять пульс с помощью инфракрасных сенсоров. Я попробовал пробежаться. За время короткой (меньше километра) пробежки, сенсор показал в среднем 99 ударов, что явно не дотягивало до реального показателя. Что касается расстояния и количества шагов – тут результат был похож на показания iPhone и MiBand. Другими словами, для любителей это сгодится. Ко всему, наушники могут сами определить, что пользователь, например, едет на велосипеде, но срабатывает это иногда само по себе. ПО пока не совсем готово для таких задач.
На этом «умная» составляющая не заканчивается. Наушники включаются, когда оказываются в ушах пользователя и выключаются, когда тот их вынимает. Они могут использоваться как гарнитура, в каждом наушнике есть микрофоны. И тут интересная особенность – шумоподавление. Активировав режим Transparency можно пропустить с музыкой звуки окружающей среды. Это соответственно ухудшит композицию, ведь наушники будут улавливать довольно много звуков и «разбавлять» ими играющую песню, зато во время прогулки или физических упражнений можно будет слышать происходящее вокруг. В дополнение есть режим Windshield, который предназначен для работы в ветреную погоду, но качество музыки с ним станет заметно похуже.
Проблемы конфиденциальности
В феврале 2017 года Люк Милланта успешно продемонстрировал, как Echo может быть подключен к Tesla Model S и использован для управления им. В то время некоторые журналисты выразили обеспокоенность по поводу того, что такой уровень подключения в автомобиле может быть нарушен, предполагая, что хакеры могут пытаться взять под контроль указанные транспортные средства без согласия водителя. Демонстрация Millanta произошла за восемь месяцев до выпуска первой коммерчески доступной автомобильной системы Alexa, Garmin Speak.
В начале 2018 года исследователям безопасности в Checkmarx удалось превратить Echo в шпионское устройство , создав вредоносный который мог записывать ничего не подозревающих пользователей и отправлять расшифровку их разговоров злоумышленнику.
В ноябре 2018 года Amazon отправила 1700 записей американской пары другому европейскому мужчине. Инцидент доказывает, что Alexa записывает людей без их ведома. Хотя человек , который получил записи сообщили аномалия в Amazon, компания не уведомила жертву до немецкого журнала c’t также не связывался с ними и опубликовал рассказ о происшествии. Получатель записей связался с публикацией через несколько недель после его отчета, но без ответа от Amazon (хотя компания удалила записи со своего сервера). Когда Amazon наконец связалась с человеком, записи которого были отправлены незнакомцу, они заявили, что сами обнаружили ошибку, и предложили ему бесплатное членство в Prime и новые устройства Alexa в качестве извинений.
Amazon обвинила в инциденте « человеческую ошибку » и назвала его «единичным единичным случаем». Однако в мае 2018 года устройство Alexa в Портленде, штат Орегон, записало семейный разговор и отправило его одному из их контактов без их ведома. Компания отклонила инцидент как «крайне редкое происшествие» и заявила, что устройство «интерпретировало фоновый разговор» как последовательность команд для включения, записи, отправки записи и выбора конкретного получателя.
Известно, что Alexa подслушивает частные разговоры и хранит личную информацию, которая была взломана и отправлена хакеру. Хотя Amazon объявила, что это было редкостью, Alexa показывает опасность использования технологий и обмена личной информацией с робототехникой.
Есть опасения, что разговоры, записанные с помощью Alexa между людьми, могут быть использованы Amazon в маркетинговых целях. Эксперты по конфиденциальности выразили серьезную озабоченность по поводу того, как маркетинг вовлекается во все этапы жизни людей, а пользователи этого не замечают. Это потребовало создания правил, которые могут защитить личную информацию пользователей от технологических компаний.
В ноябре 2018 года суд Нью-Гэмпшира постановил, что власти могут исследовать записи с устройства Amazon Echo, извлеченные из дома жертвы убийства Кристин Салливан, для использования в качестве доказательства против обвиняемого Тимоти Веррилла. Следователи полагают, что устройство, принадлежавшее парню жертвы, могло записать аудиозаписи убийства и его последствий.
Во время допроса / интервью с Крисом Уоттсом с отметкой времени 16:15:15 следователь сказал Уоттсу: «Мы знаем, что в вашем доме есть Алекса, и вы знаете, что они обучены записывать бедствие », что означает, что Алекса может отправлять записи. на Amazon при обнаружении определенных частот и децибел (которые можно услышать только во время интенсивных споров или криков).
Дальнейшие опасения по поводу конфиденциальности возникают в связи с тем, что шаблоны и корреляции в голосовых данных могут использоваться для вывода конфиденциальной информации о пользователе. Манера выражения и характеристики голоса могут неявно содержать информацию о биометрической личности пользователя, чертах личности, форме тела, физическом и психическом состоянии здоровья, поле, поле, настроении и эмоциях, социально-экономическом статусе и географическом происхождении.
Управление и синхронизация
Очень интересным показалось управление жестами. На каждом из наушников есть оптический сенсор, манипуляции с которым позволяют управлять воспроизведением и дополнительными функциями. К сожалению, это не самый простой способ взаимодействия с устройством, который потребует привыкания к особенностям работы сенсора, его расположению и потребуют запомнить эти самые жесты. Субъективно, обычные кнопки были бы в разы удобнее, но определенный WOW-эффект сенсоры все же добавляют, как и ощущение более премиальности гаджета.
На каждом наушнике осуществляется управление отдельными функциями. Так, правый наушник отвечает за соединение и управление воспроизведением (как на внешнем устройстве, так и на встроенном проигрывателе), громкость, вызов голосового ассистента и звонки. Правый же управляет режимом Transparency и выбор упражнений. Большинство жестов сопровождаются женским голосом, который подсказывает, в каком меню находится пользователь и какие у него варианты действий.
Также управлять устройством можно с помощью виртуального 4D-меню – жесты головой. Для этого нужно войти в такой режим – опустить голову вниз, выровнять, затем поднять голову вверх – после чего повертев лицом в нужные стороны выбрать желаемую функцию и кивнуть для подтверждения. На практике это не самый удобный способ взаимодействия, так как его можно активировать случайно, да и назвать его интуитивным сложно. Наловчиться с сенсором куда проще, и это намного удобнее.
В конце концов управлять можно и через приложение для смартфона. Там же можно найти все необходимые инструкции по управлению с видео. Такое доступно для смартфонов под управлением iOS и Android. Но это не означает, что наушники нельзя спарить с другим гаджетом. Например, я подключал наушники к MacBook Pro. Разница заключается лишь в том, что управлять устройством с ноутбука нельзя (активировать шумоподавление или режим бега), но с самих наушников доступны все те же возможности.
Что неприятно удивило, это проблемы соединения. С самого начала я «привязал» наушники к своему уже староватому iPhone 6. Пока смартфон был близко, проблем не было, но стоило отойти буквально на пару метров, как появлялись прерывания музыки. Оказавшись за не самой толстой стенкой наушники вовсе могут потерять связь со смартфоном. Попробовав послушать музыку с Huawei P10 Plus я получил тоже самое. Но пока пользователь сидит и работает, со звуком нет проблем. А вот даже во время прогулки/пробежки можно снова получить короткие прерывания. И они довольно частые. Судя по тому, что еще на старте продаж была такая проблема, заключается она не в ПО.
Как работает Amazon Echo
В основе электронной начинки умной колонки от Amazon лежит процессор TI-DM3725 с ОЗУ на 256 мегабайт и флеш-памятью на 4 гигабайта. Для подключения к внешним устройствам Echo используется два варианта соединения:
- 2-диапазонный WiFi канал стандарта 802-11.
- Bluetooth соединение версии 4.0.
Подключение колонки к системе «умный дом» не составит особого труда даже для начинающих пользователей. Интеграция с домашней сетью WiFi производится при помощи ноутбука или ПК. Для этого потребуется включить колонку, и на мониторе компьютера, в списке подключений WiFi отобразится новая сеть, обозначенная как «AMAZON» плюс наименование модели. Далее нужно войти в личный кабинет Alexa, и ввести там пароль от своей внутридомовой сети WiFi.
Чтобы подключить смарт-колонку к мобильным гаджетам при помощи bluetooth-соединения, нужно подать команду “Alexa, pair” (по-английски – «спариться, соединиться»). На смартфоне или планшете после этого должно появиться новое устройство. Далее потребуется просто нажать на экране гаджета кнопку «соединится», и связь со смарт-колонкой будет установлена.
К сожалению, на начало 2019г. голосовой помощник «Алекса» от Amazon, способен распознавать только английский язык и, на специально выпущенной для Канады версии – франкоканадский (квебекский) диалект. Планируется ли выпуск русскоязычной версии Alexa, пока не известно. Единственное, что доступно российским пользователям, так это приложение Flash Briefing, позволяющее искать и прослушивать новости на русском языке. Поэтому команды на управление сопряжёнными с системой бытовыми приборами придётся отдавать по-английски.
Современные версии смарт-колонок Echo, модели 2017г., поддерживают контакт с широким спектром умных бытовых приборов, в перечень которых входит продукция таких производителей, как:
- Philips
- WeMo
- TP-Link
Чтобы быть точно уверенным, что данный прибор можно совместить с Echo, на его упаковке нужно найти маркировку «Работает с Алексой» (Works with Alexa). На сегодня смарт-колонки от Amazon совместимы с гораздо большим количеством бытовых приборов, нежели их ближайшие конкуренты, такие как Apple с HomeKit. Это связано с более открытым подходом к сторонним производителям. Среди прочего голосовой помощник Alexa может быть совмещён с русскоязычной платформой управления умным домом MajorDoMo. Для этого потребуется зарегистрировать аккаунт на сервисе CONNECT и подключить услугу ConnectPack.
Alexa Custom Assistant: Amazon позволит другим использовать интеллект Alexa
За последние годы Alexa покорила миллионы пользователей по всему миру своей очень эффективной работой, о которой нам не нужно больше рассказывать. Если вы использовали Amazon Echo или любое другое устройство, совместимое с помощником, вы уже понимаете, что мы имеем в виду. И дело в том, что, не забывая о хорошей работе Google Assistant и улучшения Siri, общение с предложением Amazon для многих становится более естественным.
Теперь Amazon удивляет движение тех, что сначала вы не могли подумать, что они могут сделать. Компания запускает Алекса Кукстом Ассистент , программа, с помощью которой она позволит любой компании, заинтересованной в создании собственного голосового помощника, использовать его технологию, искусственный интеллект, который служит основой для Alexa.
Благодаря этому многие компании смогут сэкономить на больших затратах времени и денег, которые подразумевают создание голосового помощника с нуля. Задача, которая совсем не простая или быстрая. И это легко увидеть с помощью Samsungпомощник, Биксби. Из-за большей финансовой мощи и ресурсов для развития, которыми располагает компания, ее помощнику не удалось добиться успеха. Тем не менее, они продолжают попытки его интеграции в различные устройства.
Однако с новой программой Amazon будет много компаний, которым это будет очень легко, и кажется, что первыми выиграют те, кто занимается автомобильным миром . Они смогут создать персонализированный голосовой опыт и, таким образом, улучшить взаимодействие своих пользователей с их автомобилями. Хотя они будут не единственными, каждый может получить доступ к этой программе.
Таким образом, например, они смогут не только установить имя и слово активации, но также предоставить конкретные инструкции для управления такими элементами, как огни, или информацию о их состоянии с помощью простой голосовой команды. А для других целей это будет база Alexa, которая обеспечит их остальными действиями, уже обычными для других устройств, таких как Echo Auto, например.