Встроенный помощник Bixby на смартфонах компании Samsung отличается от ассистентов Apple Siri, Amazon Alexa, Microsoft Cortana или ассистента Google. Samsung пытается предугадать желания пользователей и выдаёт контекстные напоминания. Bixby умеет редактировать фотографии, отправлять сообщения, составлять электронные письма. Всё, что вы делаете на смартфоне при помощи прикосновения, Bixby позволяет сделать голосом. Можно управлять умными бытовыми устройствами и устройствами интернета вещей. Это могут быть холодильники, телевизоры, различные другие устройства Samsung.
Давайте узнаем, как настроить Bixby, что здесь нового и что ассистент умеет.
Новые улучшения
Ассистент Bixby далёк от идеального, но постепенно он становится лучше. Bixby Voice имеет ограниченную языковую поддержку: английский, корейский и упрощенный китайский языки. Samsung обещает, что в будущем этих языков станет больше. Если вы говорите на одном из этих языков, приложение доступно в 200 странах.
Способность Bixby понимать голосовые команды за последний год заметно улучшилась. Интеграция со сторонними приложениями позволяет Bixby лучше предугадывать желания пользователей и выполнять их при помощи простых голосовых команд. Bixby не дотягивает до ассистента Google или Amazon, но улучшения есть.
Bixby расширяется и на другие продукты. Можно найти его поддержку на некоторых умных телевизорах Samsung, холодильниках Family Hub, других умных продуктах корейского производителя. Скоро появится умный динамик на Galaxy Home.
Запуск смартфона Galaxy S9 принёс в Bixby Vision интересные новшества. Например, новая категория Makeup позволяет при помощи дополненной реальности проверять различную косметику и как она выглядит на вас.
Bixby Vision (камера с искусственным интеллектом)
Bixby Vision использует машинное обучение и базы данных, чтобы камера стала полезнее. Можно распознавать объекты нескольких категорий: места, текст, изображения, пища, QR-коды, вино и магазины. Запуск происходит нажатием на кнопку Bixby в приложении камеры смартфонов Samsung или на иконку Bixby Vision с левой стороны. Также Bixby Vision есть в приложении Галерея.
Как Google Lens или Amazon Flow, поиск изображений Bixby Vision пытается распознать, что находится в кадре. Происходит это при помощи инструмента Pinterest Lens. Если распознавание прошло успешно, вы получите информацию об этом объекте.
По умолчанию Bixby Vision открывается в текстовом режиме, где можно переводить текст с одного языка на другой. Поддерживается множество языков. Выровняйте переводимый текст в поле на экране, и перевод будет выполнен мгновенно. Иногда могут быть баги, но в конечном счете всё должно сработать.
Новая категория называется Makeup. Тут можно пробовать различные косметические продукты от компании Sephora. Когда вы подберёте идеальный для себя образ, можно сделать фотографию, и Bixby Vision даст информацию и ссылки на покупку этих продуктов. В будущем появится поддержка продуктов фирмы Cover Girl.
Функция “Места” использует приложение Foursquare для определения различных мест, вроде ресторанов, магазинов, памятников и т.д., куда вы направите камеру. Инструмент “Пища” позволяет направить камеру на еду и увидеть информацию о калорийности, которую можно добавить в приложение Samsung Health. Правда, одну пищу аппарат вообще не распознаёт, а у другой очень неточно определяет калорийность.
Что касается шопинга, если направить камеру на туфли, одежду или другие продукты, Bixby попытается найти их в магазинах Amazon, Nordstrom и других, но вряд ли это актуально для России.
В разделе “Вино” используется база данных Vivino, позволяя сканировать этикетки бутылки для поиска информации о ней. Это работает точнее, чем распознавание пищи.
В общем, Bixby Vision улучшается, но есть ещё к чему стремиться в будущем.
Начало работы с Bixby и Bixby Voice
Запустить Bixby и Bixby Voice очень легко. На смартфонах Galaxy S9, Galaxy S9+, Galaxy Note 9, Galaxy S8 и Galaxy Note 8 на корпусе с левой стороны есть кнопка для запуска ассистента, рядом с регулятором громкости. Нажатие на кнопку открывает основной экран Bixby Home.
Если вы на домашнем экране Galaxy S9, можно открыть Bixby жестом вправо. Когда Bixby открывается в первый раз, нужно согласиться с условиями обслуживания и дать ассистенту доступ ко всем данным. Нажмите “Принять всё” после прочтения условий, затем нажмите “Разрешить”, чтобы ассистент получил доступ к данным.
Чтобы открыть настройки, нажмите на иконку шестерёнки в верхнем правом углу Bixby Home. Дальше нажмите на выпадающее меню настроек. Вы увидите опции для карточек Bixby Home, список поддерживаемых приложений и другие.
Bixby состоит не только из одного приложения или экрана. Galaxy S9 и S9+ содержат три варианта ассистента Samsung: Bixby Home, Bixby Vision и Bixby Voice. Если вы не хотите работать с Bixby, кнопку можно отключить.
Bixby Voice
Bixby Voice представляет собой более мощный аналог ассистента Apple Siri. Он умеет даже оскорблять Siri на корейском языке. Также ассистент умеет повторять вашу манеру речи. Ассистент способен понимать вопросы вроде “Покажи сегодняшнюю погоду”, “Какая сегодня погода”, “Какой прогноз погоды на сегодня?”. Всё это разные варианты одной команды.
Когда вы установили программное обеспечение и завершили настройки Bixby Voice, можно в любой момент вызывать ассистент. Его можно активировать фразой “Эй, Bixby” или удерживая кнопку Bixby во время разговора. Если вы не хотите, чтобы вас видели говорящим со смартфоном, можно поднести аппарат к уху, как во время телефонного разговора. Ассистент позволяет отправлять текстовые сообщения в приложении Messages и отвечать на простые вопросы о погоде, назначенных встречах, результатах спортивных соревнований и времени показа кино.
Это только верхушка айсберга. Bixby умеет работать в номеронабирателе, системном меню, камере, списке контактов и галерее.
Кроме основ, Bixby умеет обрабатывать более сложные задачи, вроде открытия приложений в режиме разделения экрана, выравнивания фотографии, может напоминать о месте парковки автомобиля, воспроизводить видео на ближайшем телевизоре и писать электронные письма. Bixby может собрать все ваши фотографии с прошлой недели в новый альбом и поделиться им с друзьями или сделать селфи и отправить кому-то с подписью. Также ассистент умеет выполнять двухэтапные действиям вроде “Открой приложение Uber и поставь моему водителю 5 звёзд” или “Открой Инстаграм и опубликуй мою последнюю фотографию”.
Есть возможность работать с ассистентом без рук. Можно попросить Bixby прочитать последние сообщения, и вы услышите поступившие к вам электронные письма или текстовые сообщения, если используются приложения Samsung. В общем, голосом можно выполнять базовые задачи работы со смартфоном.
Bixby Voice можно настраивать. Можно менять пол голоса ассистента, есть поддержка быстрых действий. Можно сократить длинные команды, которые вы используете чаще всего, назначив на них одно слово или фразу.
Bixby поддерживается более 3000 команд, включая специфичные для приложений вроде Facebook, Instagram, YouTube, Uber, Gmail, карт Google и другие. Компания постоянно улучшает свой ассистент и добавляет поддержку сторонних приложений и больше команд.
Bixby Home
Samsung называет Bixby Home “домашним приемником” для вашего устройства. Это унифицированный карточный интерфейс с напоминаниями, контекстной информацией и обновлениями социальных сетей, нечто вроде Google Now и HTC BlinkFeed.
Bixby Home также можно настраивать. Можно отклонять, закреплять или насовсем скрывать карточки, нажав на иконку шестерёнки в правом верхнем углу каждой вкладки Bixby Home. Также можно настраивать быстрые команды. Например, можно заставить ассистент отключать свет и устанавливать будильник, когда сказать команду “Я иду спать”.
Большая часть содержимого приходит в Bixby Home из приложений Samsung. Здесь можно видеть прогноз погоды в месте вашего проживания, статистику активности в приложении Samsung Здоровье, управлять музыкальными файлами.
Список поддерживаемых Bixby сторонних приложений постоянно растёт. Spotify предоставляет доступ по одному нажатию к воспроизведению музыки, CNN и Flipboard показывают последние новости из интернета. Facebook, Foursquare и Twitter показывают обновления из социальных сетей. Uber отобразит ваши последние поездки на такси.
Samsung говорит, что в итоге Bixby Home сможет изучить ваш распорядок дня и сможет лучше предугадывать ваши потребности. Ассистент умеет работать с приложением Samsung SmartThings и управлять умным освещением и замками дверей, давать быстрый доступ к наиболее востребованным приложениям, причём разным в разное время дня, в разных местах и с учётом других факторов.
Напоминания
Напоминания Bixby чуть полезнее, чем в ассистенте Google или Siri. Они встроены в нативные приложения Galaxy S9 и позволяют прикреплять видео, веб-сайты, фотографии и сообщения.
Можно установить определённое время или место, когда вы хотите видеть напоминание. Когда условия соблюдены, напоминание появится в форме уведомления. Его можно отклонить или прочитать.