Голосовые ассистенты Сбер, Афина и Джой – что умеют и как пользоваться
Голосовой персональный помощник, который когда-то казался несбыточной мечтой, больше не является высокотехнологичной роскошью. Его услуги давно доступны для всех пользователей смартфонов.
Сбер Салют – голосовой помощник
Российские компании не остаются в стороне. Так, в прошлом году Сбербанк (после ребрендинга до просто Сбер) презентовал не одного, а целое семейство голосовых ассистентов под общим названием «Салют».
Джой, Афина и Сбер обладают не только уникальным голосом, но и собственным темпераментом, чтобы каждый человек мог выбрать «собеседника» по душе.
Голосовой помощник Сбер
Виртуальный помощник Сбер – яркий представитель сильного пола. Он интересуется современными технологиями, наделён врожденной интеллигентностью, вежлив, любит развлечения, привык к порядку во всём. Общается исключительно на «Вы».
Персонаж говорит голосом актера озвучки Даниила Щебланова.
Голосовой помощник Афина
Она – олицетворение спокойной и целеустремленной девушки, которая готова помочь пользователю структурировать все дела. Афина крайне продуктивна и хочет видеть то же качество в собеседнике.
Среди её интересов классическая музыка, кино в стиле арт-хаус и книги признанных авторов. Благодаря широкому кругозору, она способна поддержать любую беседу.
Афине принадлежит голос телеведущей Анастасии Чернобровиной.
Голосовой помощник Джой
Джой эмоциональный, свободный экстраверт. Её стиль общения придётся по вкусу молодежной аудитории. Она общается с пользователем на «ты», но не переходит личные границы.
Джой с радостью поможет решить бытовые вопросы, поддержит и развлечет.
Этому персонажу подарила свой голос актриса дубляжа Татьяна Ермилова.
Как скачать голосового помощника от Сбера
Виртуальные помощники «Салют» доступны для бесплатного скачивания в магазинах приложений Арр Store и Google Play.
Чтобы голосовой помощник работал корректно требуется приложение «Сбербанк онлайн» на том же устройстве.
Как подключить голосового помощника от Сбера
Если «Сбер Салют» и «Сбербанк онлайн» установлены, подключение голосового ассистента осуществляется автоматически.
Для общения с ним необходимо, чтобы работали микрофон и динамик.
Чтобы начать диалог, надо произнести команду «Салют». При этом «Сбербанк онлайн» или «Сбер Салют» должно быть в открытом режиме. Если хочется обратиться к конкретному помощнику, нужно назвать его по имени. Команда может звучать как «Салют, Афина» или «Салют, Сбер».
Как пользоваться помощником от Сбера
С мобильным ассистентом можно общаться в формате вопросов и ответов. Например, «Салют, Афина! Какая завтра ожидается погода?». Также можно отдавать голосовые команды. Например, «Найди куклу LOL по низкой цене». Возможно общение с ассистентом с помощью текстовых сообщений.
Что могут умные помощники от Сбера
Умные помощники созданы для того, чтобы сделать коммуникацию между пользователем и устройством более удобной.
Ассистенты обладают различными навыками. Базовая версия «умеет» следующее:
Разнообразие функций будет дополняться. В магазине приложений SmartMarket можно скачать дополнительные функции или создавать собственные. Навыки, которые пройдут модерацию, станут доступны не только для человека, создавшего их, но и для остальных пользователей «Сбер Салют».
Владельцы бизнеса, желающие использовать сервис для продвижения своих товаров и услуг, смогут заключить соглашение со Сбером и стать участником партнерской программы для разделения рисков и доходов по принципу revenue share.
Команды для голосового помощника «Салют»
Команды могут быть точными, такими как:
Или можно просто болтать:
Мобильные ассистенты «Салют» помогут освободить время и сделают жизнь более комфортной.
— Салют, Сбер! Переведи деньги
— Салют, Сбер!
Переведи деньги
Переведи деньги» src=»https://www.sberbank.ru/static/images/prod_product/2021_11/1635848520000_9521_teaser_teaserImageUrl.jpg?_=1635848538615″>
— Салют, Сбер!
Переведи деньги
Переведи деньги» src=»https://www.sberbank.ru/static/images/prod_product/2021_11/1635848520000_9521_teaser_teaserImageUrl.jpg?_=1635848538615″>
— Салют, Сбер!
Переведи деньги
Переведи деньги» src=»https://www.sberbank.ru/static/images/prod_product/2021_11/1635848520000_9521_teaser_teaserImageUrl.jpg?_=1635848538615″>
Лучше перевести голосом, когда.
Сказать пару слов проще, чем делать пять кликов
Как перевести деньги голосом
Шаг 1. Откройте приложение СберБанк Онлайн и нажмите на иконку Салюта.
Шаг 2. Скажите, какую сумму и кому перевести.
Шаг 3. Подтвердите перевод.
Примеры команд
Виртуальные ассистенты Салют.
С кем общаться?
Ассистенты Салют — это сразу три неповторимых характера. Интеллигентный Сбер, жизнерадостная Джой или педантичная Афина — кого выберете вы?
Что ещё умеют виртуальные ассистенты Салют
Выполнять другие банковские операции
Помогать в ежедневных делах
Рассказывать новости и факты
Контактная информация
Россия, Москва, 117997, ул. Вавилова, 19
© 1997—2021 ПАО Сбербанк.
СберБанк защищает персональные данные пользователей и обрабатывает Cookies только для персонализации сервисов. Запретить обработку Cookies можно в настройках Вашего браузера. Пожалуйста, ознакомьтесь с Условиями обработки персональных данных и Cookies.
Новый «Сбер»: голосовой помощник, «умные» устройства и единая подписка
Рассказываем о главных новинках «СберКонф 2020».
«Сбербанк» на «СберКонф 2020» представил несколько новинок, включая своё новое название. Наконец-то банк перестал обращать внимание на то, как его называют последние лет двадцать. Теперь он просто «Сбер». Вслед за названием изменился и логотип:
«Сбер» изменился очень кардинально. Из обычного банка он стал технологической компанией, объединяющей в себе целую экосистему из отделений, «умного» помощника, устройств и различных сервисов.
Отделения
Начали с обновлённых отделений. Во-первых, теперь это не просто банк. В отделении вы сможете выпить кофе, заказанный тут же, провести встречу, также здесь есть пункт выдачи посылок и магазин собственных устройств компании.
Компания показала и новые банкоматы. Теперь их экран гораздо больше привычного, а узнают клиента они не только по карточке или смартфону, но и по его лицу. Да, карточки теперь не нужны.
Также банкоматом можно управлять голосом. Говоришь «снять 500 рублей» — и готово.
«Сбер» обещает обновить все свои отделения, но конкретных дат пока не называет. Постоматы, например, уже появились в 2500 отделениях, а до конца года количество отделений увеличится до 10 500.
Мобильность
Вместе с «Ситимобил» «Сбер» показала и новые для России принципы работы такси. Если вдруг вы опаздываете на встречу, а перед вами пробка, то сервис предложит выбрать сразу несколько вариантов. Например, доехать до одной точки, где получится пересесть на самокат и поехать уже через, скажем, парк. Впоследствии к самокатам добавятся и велосипеды.
Судя по всему, работать такая штука будет пока только в Москве.
Ассистент
Постепенно приближаемся к «умным» устройствам. Их центром станет голосовой помощник «Салют». Собственно, это его позывной.
У помощника три разные роли: «Сбер», «Джой» и «Афина». Каждый ассистент имеет свой характер и свой голос. «Сбер» получил мужской, а «Джой» и «Афина» — женские голоса.
С помощью ассистента можно заказать еду, перевести кому-то деньги, вызвать такси и даже записаться к парикмахеру. При этом самому пользователю общаться ни с кем не нужно.
«Салют» обитает как в вашем смартфоне в приложении «Сбербанк Онлайн», так и в «умных» устройствах, показанных компанией, и телевизорах Honor.
Устройства
Впервые российская технологическая компания представила «умный» экран SberPortal. Он объединяет в себе акустическую систему Harman Kardon и 4К-камеру, с помощью которой вы можете совершать видеозвонки через Telegram.
С помощью SberPortal вы можете узнать рецепт во время готовки, погоду, свежие новости и управлять «умным» домом.
SberBox
Первое устройство, которое появится в продаже. Это приставка, которая сделает ваш телевизор умнее. Тут есть кинотеатр Okko, игры, которыми вы управляете со своего смартфона, музыкальный сервис «СберЗвук» и «умный» ассистент «Салют» со всеми упомянутыми выше плюшками.
С помощью SberBox вы сможете миррорить изображение со смартфона на экран телевизора.
А ещё вместе с приставкой в комплекте идут два джойстика для вашего смартфона. Они без проблем прикрепляются к экрану благодаря присоскам. С их помощью играть станет гораздо удобнее.
SberBox будет доступен уже с сегодняшнего дня. Стартовая промоцена до 15 октября — 2990 рублей. Далее — 3550 рублей. Но если вы разом оформите подписку на «Okko оптимум» на два года за 6490 рублей, то ТВ-приставка не будет стоить ни копейки.
Сервисы
Smart Market
Платформа навыков «Сбера», которые вы можете установить во все «умные» устройства компании.
Навыки — это мини-приложения, интегрированные в «Салют». С их помощью голосовой ассистент умеет, например, подсказывать рецепты, скажет, какая одежда на актрисе, закажет такси или купит билет на самолёт S7.
Список навыков будет постоянно пополняться. «Сбер» обещает платить по 2,5 млн рублей в месяц за лучший из навыков, разрабатывать которые, кстати, очень просто.
«СберДиск»
«Сбер» представил облачное хранилище, доступное всем пользователям. Регистрируйтесь, и вам сразу же дадут 15 ГБ. Нужно больше? 100 ГБ обойдётся в 83 рубля в месяц, а 1 ТБ — в 249 рублей. Можно оплатить бонусами «СберСпасибо»!
«СберПрайм»
Единая подписка на все сервисы предоставляет скидки и эксклюзивные условия на многие сервисы. Например, подписчики «СберПрайма» получат разом 30 ГБ на «СберДиске» и скидку в 20 % на покупку дополнительного места.
Помимо этого, подписчики «СберПрайма» получат скидку в 10 % на заказы в Delivery Club и в такси «Ситимобил», а также скидку в 15 % на тарифы «СберМобайл». К тому же в рамках подписки вы получите доступ к подписке «Okko лайт» и «СберЗвук», а также к бесплатной доставке в «СберМаркете».
Сколько стоит?
Ежемесячная стоимость составит 199 рублей. До конца года вы сможете оформить подписку на год за 999 рублей. Подписку уже сейчас можно оформить в приложении «Сбербанк Online» на iOS, с конца сентября в приложении для Android, а с октября — в отделениях «Сбера».
Текст подготовлен при поддержке компании «Сбер».
Сбер. Голосовые помощники Салют: Сбер, Алина и Джой. Как пользоваться? Какие у них возможности?
В 2020 году Сбербанк изменил свое название, теперь он называется «Сбер» и специализируется не только на банковских услугах. Сегодня «Сбер» – это высокотехнологичная компания с новым логотипом, обновленным списком услуг и мобильными офисами. Ключевым обновлением стало создание семьи из 3 виртуальных помощников-ассистентов «Салют».
«Сбер Салют» — голосовой помощник
«Салют» состоит из харизматичных роботов, со своим стилем общения и голосами: Сбер, Афина и Джой.
Исключительность идеи состоит в самостоятельном выборе пользователя близкого по духу ассистента, каждый из которых не просто отвечает на вопросы, но и может дать совет. Это позволяет лучше узнать своего хозяина и использовать эту информацию в дальнейшем общении.
Отличие «Сбер Салюта» от подобных проектов конкурентов заключается не только в большем количестве персонажей, но и в человечности взаимодействия: они распознают жесты, интонацию голоса и эмоциональность речи, могут помочь оформить доставку еды на дом, беспечно поговорить или обсудить серьезные темы. Для этого пользователю достаточно сказать «Салют!», которое запустет работу роботов.
Сбер, Афина и Джой не продают товаров и не проводят финансовых консультаций, поэтому разработчики назвали их ассистентами первого плана.
Вскоре начнется разработка персонажей второго плана, которые будут отвечать за продажу услуг.
Сбер – интеллигентный помощник с мужским голосом в виде зеленого шара. С ним приятно провести время за разговорами о современных технологиях и новинках. Сбер уважительно относится к пользователю, поэтому всегда обращается к нему на «Вы», при этом может и ненавязчиво пошутить. Голос персонажу подарил Даниил Щебланов. Российский зритель знаком с ним, благодаря озвучке персонажей в различных фильмах.
Афина
Афина – голубой шар, говорящий умиротворяющим женским голосом. Для нее важна собранность, продуктивность и деловитость хозяина. С Афиной можно поговорить о кино, особенно артхаусном, классической литературе и послушать музыку мировых исполнителей. Ассистента озвучила Анастасия Чернобровина, голос которой многим придется по вкусу.
Джой – еще один шар, но оранжевого цвета. От Афины его отличает открытость и дружелюбие. Джой эмоциональный персонаж, который с пользователями на «ты». Но, несмотря на это не позволяет себе глупых шуток и уважительно относится к личным границам каждого. Ассистент помогает в решении жизненных вопросов, отвлекает от наскучившей реальности интересными и непринужденными разговорами и поднимает настроение. Делает это голосом Татьяны Ермиловой.
Как скачать «Сбер Салют»?
Скачать помощников-ассистентов можно в приложении «Сбербанк Онлайн» со всех смартфонов, а также с платформы «Сбер Салют». Умные ассистенты уже встроены в новые смарт-устройства от «Сбера» – SberBox и SberPortal.
Как подключить?
После скачивания приложения «Сбер Салют», происходит автоматическое подключение ассистентов. Для общения желательно иметь хороший динамик. Также есть возможность дополнительно установить специальное приложение с регулярно обновляемыми командами для ассистентов. С его помощью всегда рядом будут актуальные команды и запросы для виртуальных помощников.
Узнайте о программе лояльности Сбер Бонусы «Спасибо» 2021.
Как пользоваться?
Взаимодействие происходит путем ответов на вопросы, команд либо переписок.
Для того чтобы активировать ассистента, достаточно сказать «Салют!», имя конкретного помощника, с которым хочется поговорить или доверить какую-либо задачу. Виртуальные друзья могут выполнять не только для всех привычные команды по типу завести будильник или таймер, показать прогноз погоды на неделю или набрать номер.
Современные роботы умеют гораздо больше:
Основные команды и возможности “Салют”
Задавать вопросы или давать команды системе можно следующим образом:
По данной аналогии выбранный робот расскажет о новостях, включит фильм, поставит альбом исполнителя и подскажет число.
Читайте больше информации о новинках и ребрендинге Сбербанка.
Моё знакомство с виртуальными ассистентами Салют, а также с платформой SmartMarket и SmartApp
Предыстория
В сентябре 2020 года Сбер анонсировал семейство виртуальных ассистентов:
Сбер — мужской голос. Общается официально, к пользователю обращается на «Вы»;
Афина — женский голос. Общается официально, к пользователю обращается на «Вы»;
Джой — женский голос. Общается неофициально, к пользователю обращается на «Ты»;
SmartApp (смартап или в простонародии навык) — это приложение, которое расширяет возможности виртуального ассистента и может дать пользователю не только красивый интерфейс, но и множество способов взаимодействия с ним: голосом, касанием, текстовым вводом, пультом и даже виртуальным геймпадом.
В SmartApp Studio собраны инструменты для создания смартапа:
Graph — это визуальный конструктор для создания смартапов. Полезен тем разработчикам у которых нет опыта в программировании;
Code — среда разработки на языках SmartApp DSL и JavaScript. Для тех кто уже имеет опыт в программировании;
API — возможность вынести свой навык за пределы платформы;
24 сентября для сторонних разработчиков Сбером была запущена группа в ТГ @smartmarket_community. 3-го октября я сам присоединился к этой группе.
Прочитав, к тому моменту, совсем скудную документацию всё же решил попробовать развернуть свой Chat App на SmartApp API.
Хоть я по профессии не программист, но у меня уже были свои навыки на другой платформе и API обеих платформ имеет сходство.
Мои навыки работают как раз по API, так как он даёт большую гибкость, ведь всё в твоих руках.
Что сразу понравилось
Не стану описывать процесс портирования навыка, так как это уже даже в документации есть (плюс можете посмотреть вот этот пример), а лишь опишу некоторые вещи, которые я тогда для себя отметил:
Голос выбирает ПОЛЬЗОВАТЕЛЬ, а не разработчик. Моё мнение как раз такое же, что выбор должен быть за пользователем. Ведь это он взаимодействует с ассистентом и навыком и ему лучше знать какой голос ему комфортнее слушать. Более того, голос ассистента можно сменить налету (даже внутри смартапа) просто позвав нужного вам ассистента. Для этого нужно сказать «позови » и всё. Узнать какой голос используется пользователем можно из объекта character.
У каждого ассистента не только свой голос, но и своя цветовая гамма.
Отдельные типы сообщений при входе (RUN_APP) и при выходе (CLOSE_APP) пользователя из смартапа, а также сообщить платформе об ошибке (ERROR).
Возможность разбивать текст на экране на несколько блоков (bubble) для улучшения визуализации информации.
Для тестирования смартапов можно использовать приложение Сбер Салют (App Store, Google Play) на смартфоне или тестировать смартапы прямо на устройствах SberBox и SberPortal.
Даже если смартап ещё не прошел модерацию, то всегда есть возможность запустить его на том устройстве где вход выполнен под тем же Сбер ID, который использовался при создании навыка в SmartApp Studio. Также относительно недавно появилась возможность давать доступ к неопубликованному смартапу и другим людям. Для этого нужно просто скинуть им сгенерированную ссылку.
Chat App
Выбор chat app был обусловлен тем, что на момент запуска платформы сanvas app ещё не был доступен для сторонних разработчиков.
Как сейчас пока ещё недоступен Native App (но уже скоро должен и он быть в доступе).
Не мало времени пришлось потратить на фразы смартапа, которые озвучивает ассистент. Ведь голос ассистента, а значит его пол, выбирается пользователем, а не разработчиком. Плюс к этом обращения на «Вы/Ты» тоже заняло некоторое время, но вот уже 12.10.2020 мой первый chat app прошёл модерацию, а затем был добавлен в каталог приложений.
chat app
Но, на тот момент у chat app не было возможности проигрывать звуки или показывать картинки. Поэтому я очень ждал запуска и возможности использовать canvas app, так как там такой проблемы не существовало. И вот уже в конце октября canvas app стал доступен для сторонних разработчиков.
Что такое Canvas App?
Canvas App – это web-приложение (среда исполнения браузер), управление которым реализуется через assistant-client.
Canvas App открывается внутри WebView (Android, iOS). HTML, CSS и JS (это frontend) загружается непосредственно в WebView на клиенте (SberBox, SberPortal, мобильное приложение Сбер Салют).
Чтобы не рисовать и не дублировать картинку-схему я взял её из этой статьи:
Простыми словами как это работает:
пользователь запускает смартап;
его запрос через платформу прилетает в webhook смартапа (который был указан в настройках SmartApp Studio) в виде текста;
параллельно этому устройство пользователя загружает страницу (которая также была указан в настройках SmartApp Studio — Frontend Endpoint);
webhook и frontend между собой «общаются» посредством assistant-client;
frontend, реагируя на команды от webhook, меняет что-то на экране пользователя, а также сам может передать что-то на webhook, если пользователь совершит некое действие на странице;
Вот так выглядит создание canvas app (с использованием API) в SmartApp Studio:
Что внутри у canvas app?
Webhook может передать данные в frontend с помощью объекта command:
Данные, которые указаны значении ключа smart_app_data, будут переданы на frontend. Порекомендую обмениваться именно объектами, а не строками.
версия для ReactJS (пример использования можно увидеть тут)
версия для подключения на странице через script (пример можно увидеть тут)
Если ReactJS Вам не знаком, то самый быстрый способ подключить и попробовать assistant-client на frontend это использовать script:
Такой способ подключения тоже был добавлен позднее запуска canvas app и Вы можете о нём не знать, но теперь он есть.
В этом примере подключение ReactJS нужно для работы самого assistant-client.
Как было сказано ранее assistant-client это «мост» между webhook и frontend и он не только обеспечивает работу canvas app, но и даёт нам возможность локального тестирования своих canvas app прямо в браузере на своём компьютере без использования SberBox, SberPortal или приложения Сбер Салют.Assistant-client как бы эмулирует конечное устройство пользователя в вашем браузере.
Добавим на страницу в body:
Благодаря assistant.createSmartappDebugger мы и получаем возможность использовать эту страницу локально и тестировать используя реального ассистента.
Открываем своим браузером URL (где расположена страница) и указываем параметр devel. Например: https://example.ru/frontend.html?devel=true
И если Вы всё сделали правильно, то открывшись страница запустит «мост» с платформой и Ваш смартап.
Ваш webhook получив запрос отправит smart_app_data и Вы увидите его содержимое на своём экране в div с id «command»:
Вместо «покажи что-нибудь» можно ввести любой текст и он отправится на webhook точно так же если бы мы сказали это голосом.
ac.on(‘start’. ) используется только на старте смартапа. Там мы получаем начальные данные. Например, какой ассистент используется пользователем и smart_app_data от нашего webhook.
Далее всё будет приходить в ac.on(‘data’. ).
ВАЖНО:
Помните, что assistant.createSmartappDebugger используется ТОЛЬКО для тестирования. Во всех остальных случаях должен использоваться assistant.createAssistant.
Так наша страница стала реагировать на данные, которые получены от webhook в ac.on(‘data’. ) и в функции processData вы можете их обрабатывать и менять что-то на странице в зависимости от пришедших данных. Например проиграть звук (с помощью Audio()) или отобразить картинку/видео.
Теперь нужно сделать обратную связь от frontend к webhook. Нужно это для того, чтобы мы смогли обработать какое-то действие пользователя на этой странице.
Например нажатие на кнопку. В приложении Сбер Салют и на Sberportal пользователь может нажать на кнопку пальцем (touch), а на SberBox пультом.
Добавляем кнопку в body страницы:
В script делаем обработчик по нажатию этой кнопки с отправкой на webhook команды (для примера) в виде названия id элемента кнопки:
Если пользователь нажмёт на такую кнопку, то согласно коду выше в webhook придет сообщение с типом SERVER_ACTION:
И таким образом можно обработать это сообщение на webhook согласно логике смартапа и webhook отправит на frontend свой ответ на эту команду.
В canvas app ограничений практически нет (на сегодняшний день известно лишь об ограничениях на использование localstorage, а также камеры и микрофона устройства).
Для одного из своих canvas app я даже применил websocket и это работает. Проблем с созданием многопользовательских сетевых canvas app у Вас не должно возникать.
Поле для вашего творчества практически безгранично.
Исходный код примера, который описан мной выше, можно скачать на github.
Отмечу, что благодаря существованию github pages Ваш frontend может быть размещён на github.
Так я создал canvas версию для своего chat app и при этом webhook у них один и тот же.
canvas app
Очевидно, что canvas app уже совсем другой уровень взаимодействия с пользователем и делает смартап более реалистичным.
Помните, что смартапы типа canvas app должны корректно отображаться на разных устройствах (SberBox, SberPortal и другие). Для этого необходимо проверять смартап на следующих разрешениях: 559×568, 768×400, 959×400, 1920×1080.
Настроить и протестировать эти разрешения можно в Chrome на вкладке Devices.
Планы
Мои дальнейшие планы это не только создать ещё несколько canvas app, но попробовать монетизировать смартап. SmartMarket предоставляет возможность встроить в смартап приём платежей от пользователей посредством API.
Заключение
В заключении хочу сказать несколько вещей:
при отладке canvas app не забывайте посматривать в консоль браузера (F12);
клиенты (устройства) кешируют страницу и поэтому рекомендую всегда выводить на экран номер версии;
на данный момент canvas app нельзя запустить только в приложении СберБанк Онлайн, но вскоре эта возможность появится и там;
стали появляться первые видео уроки от Сбера;
есть система тикетов где Вы можете заявить о проблеме или сделать запрос на новый функционал;
есть Community roadmap где можно посмотреть статусы тикетов;
Хочу сказать спасибо команде SberDevices за открытость (особенно за общие встречи с сообществом в zoom) и конечно за то, что прислушиваетесь к мнению сообщества. Это безусловно ваше преимущество перед другими.
Также хочу поблагодарить пользователей моего смартапа, благодаря которым я смог выиграть в первом этапе конкурса. Спасибо, что оценили мои старания.
