Перейти к содержимому

Bixby vision samsung что это

  • автор:

Волшебная камера Bixby Vision — скрытые возможности смартфона Samsung Galaxy

Некоторые технологии облегчают нашу повседневную жизнь, но бывают такие функции в смартфоне, которыми пользуешься изредка. По первости заглянешь в меню, изучишь беглым взглядом, что предлагают, и оставишь на потом. Понимания, что нужно открывать именно это приложение, чтобы решить какие-то задачи, не возникает вовсе. И так зачастую происходит с Bixby Vision, очень часто владельцы флагманов Samsung Galaxy не подозревают, какое чудо спрятано в их устройствах.

Интеллектуальная камера умеет сканировать вывески и читать тексты, искать товары и подбирать похожие картинки, но не ограничивается этим. Пользуюсь приложением более пяти лет и могу сказать, что оно стало надежным помощником в повседневных делах. Например, я читаю книгу Дэвида Эдмондса “Убили бы вы толстяка?”, захотел найти другие книги этого автора. Обычный путь для решения этой задачи выглядит так: вы ищете внутри книги имя автора на английском языке, вбиваете в поиск и получаете результат. С Bixby Vision я просто навожу на обложку камеру и получаю висящий в воздухе подстрочник как для названия, так и для имени автора. Тут же можно поискать его в сети.

Для предметов, которые не имеют никаких обозначений, можно осуществлять ровно такой же поиск, просто фотографируете, и далее у вас есть возможность увидеть картинки с аналогичными вещами. Допустим, что я не знаю, как называется чехол для Galaxy S22, яркий и молодежный. Фото, а дальше поиск мне подсказывает, для каких моделей он существует и где его можно найти.

И таких примеров можно привести десятки, вы получаете возможность искать с помощью картинок то, что привлекает ваше внимание. Также задействуется Pinterest, что позволяет быстро найти подборки сходных вещей или графических идей! Для людей творческих это незаменимая штука.

Но давайте вернемся к переводу с одного языка на другой, в памяти телефона их десятки, тут полное раздолье. Вы можете сфотографировать страницу книги и тут же получить перевод.

Мой приятель хорошо говорит и пишет на английском языке. При общении с англичанами он ленится цитировать книги, так как его перевод всегда далек от оригинала и выдает то, что его сделал иностранец. Он говорит об этом следующее: “Меня стали раздражать похвалы о том, насколько хорошо я знаю язык, от британца это звучит обычно как издевка, показывающая, насколько я далек от правильного использования оборотов и идиом”. Используя Bixby Vision, он экономит время, за считанные секунды “сканирует” камерой нужный кусочек книги, распознает его и тут же переводит. А так как задействованы большие данные, перевод зачастую берется из оригинала, либо он максимально близок к нему. Попробуйте как-нибудь перевести Шекспира, возьмите любое произведение. Вы удивитесь, что алгоритм не просто переводит текст, как любой иной, а ищет оригинал и подставляет правильные строки, написанные великим автором. Для таких произведений это оправданно, но перевод художеств вашего бухгалтера, конечно же, будет идти по другим алгоритмам, что вполне объяснимо.

В магазине вы можете сканировать вино, даже если у вас нет аккаунта Vivino и вы не хотите его заводить, но главное, что вы можете получить подсказку, сделать выбор, о котором, скорее всего, не пожалеете.

Для людей с ограниченными возможностями есть раздел специальных настроек. В нем можно включить описание того, что камера видит перед собой. Поставил чашку на книгу, сделал фотографию, через несколько секунд Bixby Vision говорит: “Чашка на книге”. Большинство привычных предметов определяются безо всяких проблем.

Можно не делать фотографию, а просто включить такой режим, и тогда камера начнет говорить обо всем, что попадет в ее поле зрения. Вы крутите телефон в разные стороны, а он озвучивает предметы вслух.

Так даже можно читать тексты! Открываете книгу, на ощупь наводите камеру, и она начинает зачитывать написанное. Минус только в том, что голос не очень приятный, читает робот. Он зачитывает все, что увидел перед собой. Но в целом можно сказать, что распознавание работает хорошо и можно приспособиться к такому режиму работы, особенно находясь где-то в городе, когда человеку нужно “посмотреть” на разные книги на полках.

И ровно так же можно определять цвета вокруг себя, наводите камеру, и она озвучивает, какие цвета на предметах видит, но сами предметы не описывает. Думаю, в будущем можно будет получать подсказку о том, что перед вами книга с красной обложкой, чашка синего цвета и так далее. Очевидно, что развитие идет в этом направлении.

В настройках есть возможность убрать те или иные пункты, они не будут отображаться в меню, если вам не нужны, что удобно.

Для меня как человека, постоянно работающего с различными текстами, их распознавание в Bixby Vision, возможность тут же получить электронную копию и отправить куда-то становятся палочкой-выручалочкой. Отличная опция, которую сложно переоценить. То, что когда-то предполагало много времени, потраченного на набор на клавиатуре, теперь делается в пару кликов.

По отдельности функции Bixby-камеры, возможно, не нужны. Кто-то не интересуется вином, кто-то не ищет по фотографиям предметы, а кто-то сиднем сидит дома и никуда носа не высовывает. Но все вместе дает инструмент, который пригодится современному и активному человеку. Думаю, что именно такие люди в массе своей пользуются флагманами от Samsung, ведь это осознанная покупка. Приятно, что в Samsung не стали пытаться изобрести велосипед и сделали интеграцию Bixby Vision с уже существующими, популярными социальными сетями и сервисами, увязали в одной оболочке все то, что нравится людям. Отличная камера от Samsung плюс популярные сервисы – это беспроигрышная связка.

В моем окружении много тех, кто приобрел флагманы от Samsung и пользуется камерой в повседневных делах, но крайне немного тех, кто освоил Bixby. Причина в том, что люди просто не добираются до этого пункта, оставляют на потом. Но когда показываешь, как это работает, или люди видят, что ты делаешь на телефоне, они моментально погружаются и начинают пользоваться камерой Bixby. Причина? Она банальна – это удобно и просто, а главное, полезно. Советую и вам попробовать, чтобы у вас сложилось собственное мнение о камере Bixby и о том, что она умеет. Отличный инструмент, дополняющий стандартные возможности смартфонов Samsung Galaxy.

Настроит смартфон и поможет с переводом: что умеет Bixby?

Умный ассистент Bixby от Samsung не разговаривает на русском языке, однако он имеет множество полезных функций, способных изменить привычное взаимодействие со смартфоном. Одна из самых интересных — сценарии для запуска приложений и изменения настроек гаджетов в указанное время или в нужном месте. А камера Bixby поможет определить, что находится перед вами. Рассказываем, как это работает.

Что умеет Bixby?

Что такое сценарии Bixby?

Это способ упростить и автоматизировать многие рутинные задачи на своём гаджете. Принцип простой: владелец смартфона должен указать, какие условия (или набор условий) должны выполняться, чтобы система запустила определённую команду.

Функцию поддерживает большинство актуальных смартфонов Samsung, а также ряд планшетов и аксессуаров компании. Чтобы включить сценарии Bixby, надо зайти в «Настройки», выбрать «Дополнительные возможности» и перейти в соответствующий раздел. Также можно зайти в панель быстрых настроек и выбрать соответствующую иконку.

Во время выполнения сценария на экране смартфона будет отображаться уведомление — это позволяет при необходимости остановить автоматизацию одним кликом.

Что умеет Bixby?

Глубокая персонализация смартфона

На главном экране настроек сценариев Bixby доступно несколько вариантов под различные события. Самый очевидный — автоматизация после утреннего подъёма на работу. Пользователь задаёт время, после которого включаются разные функции. К примеру, в семь утра начинает играть любимый плейлист, увеличивается яркость экрана, включается Always-on-Display и запускается приложение погоды.

Если в квартире есть устройства умного дома, которые подключены к системе SmartThings, их тоже можно отрегулировать. Допустим, после звонка будильника в комнате включится свет, на кухне начнёт работать телевизор и запустится увлажнитель воздуха.

Что умеет Bixby?

Другой популярный сценарий связан с отходом ко сну. После полуночи смартфон уменьшит яркость экрана, активирует режим комфорта для глаз, а уведомления будут приходить без звука. Можно добавить статус состояния зарядки — если гаджет не подключён к розетке ночью, система автоматически включит режим энергосбережения, чтобы утром батарея не оказалась разряженной.

Наиболее интересные автоматизации связаны с определением геолокации. В сценариях Bixby нужно указать точку на карте и радиус, выбрать вариант «Прибытие» или «Отбытие» по отношению к этому месту и задать различные действия.

Допустим, владелец смартфона приходит на работу. Его гаджет при этом переходит в беззвучный режим, отключает Wi-Fi и Bluetooth, активируя синхронизацию с почтовым сервисом.

Что умеет Bixby?

Любители слушать музыку в наушниках с ANC в общественном транспорте могут настроить сценарии, при которых не надо делать лишние нажатия. К примеру, указать на карте расположение станции метро, при подходе к которой система запустит активное шумоподавление. Добавляем координаты другой станции и очерчиваем радиус — после выхода из него шумодав будет выключен. Таким образом при ежедневных поездках в подземке будут отсекаться лишние шумы. А на улице гарнитура продолжит воспроизводить треки в обычном режиме, чтобы не изолироваться полностью от внешнего мира.

Тем, кто часто ездит на машине, понравятся автомобильные сценарии. В Bixby можно добавить автоматизацию, при которой смартфон подключается к бортовой мультимедийной системе и запускает ряд действий. Самые очевидные варианты — отключение уведомлений, которые порой мешают вождению, активация чтения уведомлений вслух и увеличение шрифта, чтобы проще было отслеживать информацию с экрана гаджета. Сюда же стоит добавить запуск навигатора и проигрывание любимого плейлиста.

Что умеет Bixby?

Ещё одна полезная опция — запуск автоматизации при занятиях спортом. В сценариях Bixby можно выбрать, при каких тренировках включатся те или иные опции. Во время утренней пробежки в парке запустится музыкальный плейлист, а на теннисном корте активируется беззвучный режим, Wi-Fi и Bluetooth будут отключены для экономии заряда батареи.

Камера Bixby Vision

Bixby Vision — это опция, встроенная в ряд смартфонов Samsung. Она дополняет камеру гаджетов искусственным интеллектом. Можно навести объектив устройства на любой предмет, чтобы получить о нём информацию. Для запуска функции достаточно зайти в приложение для съёмки, затем в раздел «Ещё» и выбрать ярлык «Камера Bixby».

Что умеет Bixby?

У Bixby Vision есть множество полезных возможностей. Функция может работать как сканер для распознавания слов — достаточно навести камеру на любой текст, и умный софт позволит скопировать выбранные предложения в буфер обмена. Так что тратить время на перепечатывание необходимой информации больше не надо. Другая опция позволяет в режиме реального времени переводить надписи на иностранных языках — перевод накладывается поверх зарубежных слов на экране гаджета.

Если навести камеру смартфона на здание или любой предмет, камера Bixby найдёт все данные о нём в интернете — от названия объекта до результатов поиска по изображению. Понравилась какая-то вещь и хочется её купить? Можно воспользоваться инструментом для поиска товаров: сканируем предмет камерой и умная система показывает, где его выгоднее приобрести. Точно так же работает поиск вина — после того, как этикетка на бутылке попадает в объектив, опция выдаёт всю информацию о напитке.

Что умеет Bixby?

Разработчики уделили большое внимание тому, чтобы сделать смартфон полезнее для пользователей с нарушениями зрения. Камера Bixby с помощью искусственного интеллекта умеет описывать происходящее перед ней. Например, телефон голосом проговаривает, что в объектив попала девушка, которая сидит на стуле и держит чашку. В другом случае она «понимает», что младенец лежит в кровати с игрушкой или собака сидит на газоне.

Функция может рассказывать, как называются предметы в кадре: например, кружка, ножницы, коробка и так далее. Также камера умеет читать вслух текст и определять цвет объектов. Точность распознавания во всех режимах приятно удивляет — ошибок в бытовых вещах практически нет.

Что умеет Bixby?

Ассистент Bixby — помощник в смартфонах Samsung, делающий жизнь комфортнее. После настройки сценариев под пользовательские привычки гаджет начнёт автоматически запускать необходимые параметры и софт. В дальнейшем это сэкономит много времени — достаточно один раз потратить несколько минут на регулировки. А камера Bixby заменит одновременно сканер текста, синхронный переводчик с иностранных языков и даже гида.

What is Bixby & How it’s Different From Others?

Siddhant Pandey

Well you’ve heard a lot about Bixby right after the launch of Samsung Galaxy S8. So here’s my take on Bixby that what is this and How it’s different from others in the competition?

What is Bixby?

Bixby is an AI system that’s designed to make device interaction easier, specifically designed to avoid the complexity of increasingly fully-featured devices. It was launched in Samsung Galaxy S8 for the first time but is designed to work across a range of Samsung products.

Features

Bixby is a complete solution: it is designed to let you carry out a full range of interactions, rather than launching an app for example, or carrying out a single task.

Samsung says that Bixby will be able to do just about everything you can do with an app using touch. Bixby is contextually aware: this is one of the buzzwords of AI, demonstrated by Google Assistant, for example. This will mean that Bixby can recognise the state that the app is in and take the right actions based on your requests, also letting you mix voice or touch.Bixby understands natural language: this means that you don’t need to use set phrases, but you can give incomplete information and Bixby can interpret and take action. Natural language recognition has been key to the rise of Alexa, for example, and is now a key element of modern AI.

How you can find Bixby?

On the Samsung Galaxy S8 and S8+ there is a Bixby button on the left-hand side of the phone. This is used to open the Bixby agent so that you can speak a command. However I am not sure about the exact voice command that is used to wake this AI up. It could be “Hi bixby” or something else.

The Competition

Bixby has a tough competition from Google’s Ai, Apple’s Siri, Amazon’s Alexa and Hound but believe me it’s a little bit different from all of them while Google, Apple, Amazon and Hound can only work if you are connected to network (Online) Bixby is only one that can be used online and offline both but some features will only work if you are online.

It also has some nifty features that none of them will offer such as Device Control, Samsung vision and so on.

What Bixby can do for you?

If you are wondering the same then here are the things Samsung’s Bixby can do for you:

Device control

One of the main aims of Bixby according to Samsung, is to deal with increasingly complicated devices. Not only did Samsung say that in its blog post, but it repeated exactly the same thing when demoing Bixby to us, saying that devices are now very complicated and a smart AI can save you having to look through the settings.

On saying "show this on my TV", the Galaxy S8 screen was mirrored on a Samsung KS7000. On saying "use this as my wallpaper" the S8 saved the onscreen image as the wallpaper for the phone.Placing a call instantly.

Simple functions, but Bixby saved the need dig those things out, instead only needing a press of the side button and a spoken command.

Bixby Vision

Bixby Vision offers a range of functions that take advantage of the camera on the phone. Working in a similar way to Google Goggles or the Amazon shopping app you can either ask Bixby what something is, or open the camera app and hit the Bixby Vision button. This is a great feature, but one we've used plenty of times before in other apps.

Bixby Vision will essentially identify whatever the camera is pointed at, with options presented depending on what it sees, offering to identify an image, place, text or go to shopping options. These then lead into more information, once the device has been identified.

Identify The Shard in London and suggest local restaurantsRecognise a box of Lindt Lindor (strawberries and cream flavour) and suggest shopping optionsSpot a bottle of Casillero di Diablo and offer details on the wine

The best bit about Bixby Vision is that it's not dependent on the full Bixby voice service, with direct access through the camera, so even those who don't get the full Bixby service will get Bixby Vision.

Samsung and third-party app integration

Samsung has confirmed that Bixby will be integrated with a number of apps, detailing that it would support 10 native Samsung apps at launch. This is where Bixby will hit rougher ground, because of the variety of apps that you'll have on your phone.Samsung hasn't detailed what those apps will be, but it's confirmed to work with:

Phone, Messages, Internet, Gallery, Camera, Contacts, Settings, BixbyReminder, Weather

Exactly what Bixby does with Bixby, I don’t know.

Samsung has also said that it plans to support third-party apps through an SDK, but the big question is surrounding Google apps.

Samsung relies on some core Google apps for the experience it offers — like Play Music and Google Maps, apps that definitely need integration.

Samsung has said that the supported apps will quickly increase, but there's plenty of question here still to be answered.

Bixby Home

There's another side to Bixby. For those not diving into the full voice service — or those who can't get it because it's not supported in their country — then there's Bixby Home.

In the UK this integrates the Upday new service (accessed via a left-swipe on the screen) or Flipboard for those elsewhere and pulls in cards from supported apps. We've seen it serving up weather and S Health steps as well as news highlights.

Samsung also showcased Bixby Home learning from your routine, updating to reflect how you use your phone throughout the day. It also showed an Uber card in Bixby home, suggesting that Uber will be on the list of supported apps. We can imaging "Bixby, call me an Uber" working nicely.

In essence, Bixby Home looks a lot like Google Now, or the evolved Google Search pages you get that serve up information cards based on your interests and so on.

Home appliances and other devices

Injong Rhee, executive VP and head of R&D software and services at Samsung has said:

"Bixby will be gradually applied to all our appliances. In the future you would be able to control your air conditioner or TV through Bixby."

Rhee goes on to say that because Bixby is a cloud service, all you need is an internet connection and a mic and Bixby could be set to task.

We've also seen some very clever demos with Samsung's 2017 televisions, which also offer full voice control. In a similar demo, we saw a voice command to change the contrast demonstrating the same sort of functionality. There was no mention of Bixby at this demo, but we've asked Samsung if it's part of the same system.

Bixby Pay

Samsung could include technology that will allow you to process payments through voice commands. The feature is supposedly being developed under the name Bixby Pay, according to Samsung Mobile, but there’s no confirmation of this yet.

When will Bixby Launch?

Bixby was officially confirmed on 20 March via a blog post from Samsung. It has been confirmed that Bixby will be on the Samsung Galaxy S8, which was announced on 29 March, going on sale around 20 April onwards. The date differs in different territories.

The Conclusion

Samsung’s Bixby is a whole new incarnation of S-Voice which was launched in galaxy s3 for the first time and the last time also ��. At that time S-Voice was not just more than a thrashcan but Bixby is not what the S-Voice was, it packs a lot of things that will definitely grab the attention of people who want an assistant which is very close to IronMan’s Jarvis, it can do almost anything that you can do by touching the screen of your smartphone. So it’s a great assistant which you can use on your smartphone but if you don’t use Samsung smartphone then you missed the chance.

Hope you enjoyed reading this content and if you did then please don’t forget to like and share this content. You can also tweet me @thegiziot for anything to ask.

Bixby vision — что это

Bixby – это особенность новых смартфонов от компании Samsung. Фактически, голосовой помощник, который есть у всех крупных игроков на рынке: Apple (Siri) Google (Assistant), Amazon (Alexa) и др. Однако свою систему Самсунг выпустили довольно поздно, из-за чего особой популярности она не отыскала, и большая часть пользователей до сих пор не знают о том, что такая функция вообще есть на их телефоне. А те, кто знают задаются вопросами: как настроить и как работать с этой опцией.

Функции Биксби

Самая главная функция голосового помощника – это как раз управление голосов. Система Биксби будет выполнять все действия, которые ей даёт пользователь (если, конечно, они входят в список её возможностей).

А именно, Bixby может отвечать на заданные ей вопросы, частично управлять интерфейсом телефона и подключаться к другим девайсам в доме. Однако, область её применения всё ещё очень ограничена. Так как все голосовые ассистенты используют для обучения искусственный интеллект, который постоянно обучается, Биксби пока сильно отстаёт от своих конкурентов. Всё дело в распространённости этой системы – чем меньше пользователей используют помощника, тем дольше он будет обучаться.

Также, данная функция позволяет взаимодействовать с другими приложениями, которые сильно расширяют потенциал ассистента. Например, Самсунг смогли реализовать работу с фотографиями с помощью нейросетей, используя Bixby. Яркий пример: расшифровка текста и переработка его в текстовый файл. Но даже так программа пока ещё сильно ограничена и просто не может сравниться с функционалом с Google.

Более подробно о всех функциях голосового помощника Bixby можно из видео ниже:

Как работает Биксби

Сама по себе Bixby состоит из нескольких больших «программ», каждая из которых работает обособленно и выполняет свой ряд глобальных функций и сценариев.

Bixby Voice

Основная механика ассистента – это голосовой помощник. Для его вызова достаточно нажать и долго держать кнопку «Домой» и тогда Bixby Voice откроется. Данный собеседник может выполнять ряд стандартный действий, таких как поиск информации в интернете, озвучивание погоды, наличие новых сообщений и так далее. Также с помощью Биксби можно связываться с другими людьми как через сообщения и телефон, так и с помощью сторонних приложений. Вот список программ, с которыми ассистент может взаимодействовать: Facebook*, YouTube, Instagram*, Uber, Google Maps и Gmail.

Samsung отключит одну из важных функций в своих смартфонах для тех, кто не обновился до последней

«Держать связь» с помощником можно как голосом, так и с помощью текста. При этом, на случай голоса у программы есть два режима: основной и «публичный». Последний переключает весь звук на верхний динамик, как это было, если бы человек говорил по телефону.

Если сравнивать Биксби с другими популярными помощниками, то разница видна сразу – они банально умнее. Продукт от Самсунга может выполнять ограниченный круг заданий, который нужно чётко проговаривать, так как большой вариативности в памяти системы нет. Это скорее не «минус», а особенность системы, так как она пока что учится воспринимать речи.

Bixby Vision

Интересная функция, из-за которой этот голосовой помощник получил хоть какую-то популярность. Основная цель – это определение объектов, на которые направлена камера пользователя при соответствующем запросе от человека.

При запуске Bixby Vision сразу открывается камера, в которой есть несколько пунктов меню, например: еда, напитки, товары и др. Если пользователю нужно определить блюдо, то он выбирает соответствующий пункт в меню и направляет камеру на тарелку. С определённой вероятностью помощник сравнит полученное изображение с готовой базой и определит, что человек ему показывает. Высветится название, калорийность и дополнительная информация.

https://smartphonus.com/wp-content/uploads/2019/02/021519_0927_SamsungBixb3.png

Также, помощник может сканировать QR коды, что бывает очень удобно, а иногда и необходимо.

Получите ваше точное местоположение — Если вам нужно сориентироваться в незнакомом месте, например, в торговом центре или на рынке в городе, просто откройте Bixby, перейдите в Bixby AR и наведите камеру на землю. Затем Bixby Vision определит ваше точное местоположение на основе того, что видит; это тоже безумно точное. Обязательно покрутите его в следующий раз, когда заблудитесь.

Это же точное местоположение всего парой кликов можно отправить любому контакту за пару секунд.

Интересно в Samsung справились с переводом. При выходе в соответствующий пункт меню, пользователь может направить камеру на текст и если он иностранный – Bixby постарается перевести его на русский язык. Далее текст может быть отформатирован в текстовый формат для более удобной работы.

По этому же принципу работает и просто сканирование текста с изображения.

What Is Bixby Vision and What Does It Do?

Более подробно о том, как пользоваться камерой через ассистента от Samsung рассказано в видео ниже:

Bixby Home

Основной пункт в Bixby, который фактически является центром управления всей системы. Попасть в это меню можно «смахнув» главный экран влево.

В этом случае пользователю откроется основной интерфейс, который будет включать новостную ленту и панель управления. Также, все элементы можно менять и настраивать под себя. Из интересно можно выделить быстрый прогноз погоды, который составляется в зависимости от местоположения пользователя (однако иногда возникают баги и ошибки в определении) и фитнес-активность. Сейчас все смартфоны от Samsung имеют встроенное приложение «Здоровье», с которым как раз Биксби синхронизируется.

Bixby Home | AIアシスタントアプリ - Galaxy公式(日本)

Также, владелец телефона может выбирать не только карточки на выбор, но и создавать свои. Например, добавить на главный экран главные новостные сводки. На данный момент это можно сделать с такими приложениями, как Spotify, CNN и Flipboard.

Bixby Reminder

Также, с помощью Биксби можно ставить напоминания и будильники в любой удобной форме. Допустим, достаточно сказать «Привет, Биксби, поставь уведомление помыть завтра машину в 17:00». Не самая интересная функция, которая при этом реализована и у других компаний. Однако, этот виджет выделен в отдельную категорию на рабочем столе, а значит вскоре, возможно, получит расширение функций.

Bixby Reminder | Apps - The Official Samsung Galaxy Site

Как скачать и включить

Голосовой помощник Биксби не требует установки, так как он уже встроен в систему и всей новые устройства от Samsung. Даже больше, для его включения требуется лишь нажать и держать кнопку «Домой» и затем подтвердить доступ к камере и микрофону – это и есть «включение».

Добавить комментарий

Ваш адрес email не будет опубликован. Обязательные поля помечены *