умная камера в яндекс появилась приложении яндекс
Умная камера Яндекса научилась распознавать еду, машины и уравнения
Интернет, 29 сентября 2021 года. Яндекс объявил о масштабном обновлении умной камеры. Теперь с её помощью можно узнать, сколько белков, жиров и углеводов в чипсах, что за необычный автомобиль припаркован у дома или как решить квадратное уравнение — для этого достаточно навести на них камеру или сфотографировать. В основе новых возможностей лежат поисковые технологии и компьютерное зрение.
«Визуальный поиск — это принципиально иной способ искать информацию. Вам даже не нужно формулировать вопрос, вы просто наводите камеру на объект и узнаёте о нём всё. Мы верим, что за визуальным поиском будущее, и смотрим, как люди реагируют на умную камеру, что им нравится, а что нет. Это помогает нам понять, куда двигаться дальше, чтобы камера становилась более удобной, функциональной и полезной для пользователей», — рассказывает Елена Бондарь, руководитель умной камеры Яндекса.
Поиск продуктов
Умная камера улучшила поиск по продуктам питания. Теперь она не только находит их в интернете, но и даёт подробное описание. Стоит навести камеру на пакетик сока или плавленый сырок, и она покажет их состав: количество жиров, белков и углеводов; наличие сахара и ГМО; содержание микроэлементов. А также — сколько в продукте калорий и как долго нужно плыть или бежать, чтобы их израсходовать.
Поиск автомобилей
Если навести камеру на автомобиль, она покажет его описание: марку, модель и технические характеристики. Человек сможет понять, что за машина перед ним, какая у неё мощность, скорость и расход топлива. Технические характеристики снабжены коротким и ёмким пояснением: например, «разгоняется как спринтер» или «вместительная, как сундук».
Решение задач
Умная камера подскажет порядок действий для решения линейных и квадратных уравнений. Для этого достаточно перейти в режим «Решения» и сфотографировать задание. Кроме того, камера поможет найти обучающие видео, которые подробно объясняют решение задач такого типа.
Новые функции
Пользоваться камерой стало удобнее. Если интерес вызвало что-то мелкое, теперь можно приблизить изображение с помощью зума. Появилась возможность сфокусировать камеру на интересующем объекте. А если его нет перед глазами, можно загрузить фото из галереи. Кроме того, появилась фронтальная камера. Она позволяет показать камере самого себя — например, чтобы она нашла стихотворение (поиск стихов по изображению работает в режиме «Поэзия»).
Умная камера была запущена весной этого года. Она умеет также сканировать документы, переводить текст и распознавать предметы. Например, она подскажет название цветка, породу собаки или магазин, где можно купить понравившуюся вещь. Камера доступна в приложении Яндекс для iOS и Android. Чтобы её включить, нужно нажать на иконку камеры в поисковой строке.
В приложении Яндекса на Android и iOS появилась умная камера — да-да, новая
Наверное, многие из нас переводили тексты с помощью камеры в переводчике Яндекса и искали что-то по картинкам (например, именно с помощью такого поиска в Яндексе мне удалось найти части коллекционного сервиза — ни Avito, ни ручной поиск не справились). Но Яндекс пошёл дальше, развил функциональность и выкатил новый релиз — с непередаваемыми нотками коммерции.
Камера реализована на стыке технологий перевода, поиска и компьютерного зрения — теперь она может делать несколько важных и нужных вещей:
Проверяем поиск товаров и их цены. Возьмём что-то местное. Всё отлично: цена адекватная (очевидно, за упаковку 6 шт.), ссылка на очевидный Яндекс.Маркет. Но вот что мне непонятно уже сейчас: эта бутылка точно есть в Яндекс.Лавке (и там куплена) — почему приложение не даёт ссылку на Лавку, в которой гораздо логичнее купить бутылку минералки, чем на Маркете?
Проверим на парфюме без коробочки. Итак, флакон с чёткой надписью камера распознала и цену нашла, а вот старый Shalimar с нечёткой надписью, но очень характерной уникальной формой флакона камера смогла найти только по поиску, без сделанного фото (то есть в режиме наведения) парфюм она не обработала. Ну и опять удивление: почему выбран не топовый сетевой магазин, а какая-то не внушающая особого доверия площадка?
Ещё интересное наблюдение: проверим схожие товары, например, творог 200 грамм, 9% и 12%. Камера в обоих случаях распознаёт товар, но не угадывает, ни вес, ни жирность (точнее, в первом случае угадывает жирность, во втором — вес). И опять же, ссылка на не самый популярный магазин (интересно, со временем будут подкидывать похожие товары из своих и партнёрских маркетов?).
Растения наведением камера не распознаёт, только по фото:
Сканер документов аккуратный, отображает и цветной, и чёрно-белый формат (кстати, иногда просят именно ч/б скан, а не фото и приходилось креативить в фотошопе).
Ну и напоследок перевод — он стал гораздо приятнее и удобнее, чем был у Яндекса раньше: больше нет дурацких жёлтых рамок и блоков. Однако сам перевод и работа с некоторыми фактурами упаковки — такое себе. Пока искала пример для перевода, камера при наведении перевела клавиатуру — так и оставим.
Что можно сказать об умной камере от Яндекса? Хороший, удобный инструмент, кейсов использования и коммерческих вариантов работы с ней — море. Вот мелочь, а хочется, чтобы Яндекс довёл идею до конца, потому что именно из таких приятных мелочей складываются пользовательские впечатления.
В приложении «Яндекса» появилась умная камера
В приложении «Яндекс» теперь появилась умная камера, включающая в себя технологии компьютерного зрения, машинного перевода и поиска, с помощью которых может искать и распознавать предметы, а также переводить тексты, сообщила пресс-служба компании.
«Стоит навести на что-нибудь камеру, и она отметит объекты, которые смогла распознать. Про многие из них можно узнать, что это и где продаётся. Скажем, если понравился чей-то рюкзак, легко посмотреть, где купить такой же или похожий. Точно так же можно выяснить, как называется растение, порода собаки или, например, памятник архитектуры», — пояснили в компании.
Приложение может помочь перевести надпись на незнакомом языке, в том числе на этикетке или указателе: необходимо направить на эту надпись камеру, и перевод будет осуществлен с помощью «Яндекс.Переводчика». Распознание происходит с помощью технологий компьютерного зрения, встроенных в камеру, которые также могут распознавать отдельные объекты. Кроме того, по данным компании, в приложении также есть сканер, который позволяет сделать цифровую копию любого документа.
Рассылки «Ведомостей» — получайте главные деловые новости на почту
Отвлекает реклама? С подпиской вы не увидите её на сайте
Наши проекты
Контакты
Рассылки «Ведомостей» — получайте главные деловые новости на почту
Ведомости в Facebook
Ведомости в Twitter
Ведомости в Telegram
Ведомости в Instagram
Ведомости в Flipboard
Решение Федеральной службы по надзору в сфере связи, информационных технологий и массовых коммуникаций (Роскомнадзор) от 27 ноября 2020 г. ЭЛ № ФС 77-79546
Учредитель: АО «Бизнес Ньюс Медиа»
И.о. главного редактора: Казьмина Ирина Сергеевна
Рекламно-информационное приложение к газете «Ведомости». Зарегистрировано Федеральной службой по надзору в сфере связи, информационных технологий и массовых коммуникаций (Роскомнадзор) за номером ПИ № ФС 77 – 77720 от 17 января 2020 г.
Любое использование материалов допускается только при соблюдении правил перепечатки и при наличии гиперссылки на vedomosti.ru
Новости, аналитика, прогнозы и другие материалы, представленные на данном сайте, не являются офертой или рекомендацией к покупке или продаже каких-либо активов.
Сайт использует IP адреса, cookie и данные геолокации Пользователей сайта, условия использования содержатся в Политике по защите персональных данных
Все права защищены © АО Бизнес Ньюс Медиа, 1999—2021
Любое использование материалов допускается только при соблюдении правил перепечатки и при наличии гиперссылки на vedomosti.ru
Новости, аналитика, прогнозы и другие материалы, представленные на данном сайте, не являются офертой или рекомендацией к покупке или продаже каких-либо активов.
Все права защищены © АО Бизнес Ньюс Медиа, 1999—2021
Решение Федеральной службы по надзору в сфере связи, информационных технологий и массовых коммуникаций (Роскомнадзор) от 27 ноября 2020 г. ЭЛ № ФС 77-79546
Учредитель: АО «Бизнес Ньюс Медиа»
И.о. главного редактора: Казьмина Ирина Сергеевна
Рекламно-информационное приложение к газете «Ведомости». Зарегистрировано Федеральной службой по надзору в сфере связи, информационных технологий и массовых коммуникаций (Роскомнадзор) за номером ПИ № ФС 77 – 77720 от 17 января 2020 г.
Сайт использует IP адреса, cookie и данные геолокации Пользователей сайта, условия использования содержатся в Политике по защите персональных данных
В приложении «Яндекс» появилась «умная» камера — она расскажет, что за объект в объективе, и где его можно купить
В мобильном приложении «Яндекс» появилась «умная» камера. Об этом сообщает информационное агентство ТАСС со ссылкой на пресс-службу российской компании.
Новая камера способна переводить тексты и распознавать объекты в режиме реального времени. Ее работа основана на нескольких технологиях: компьютерное зрение, машинный перевод и поиск.
В компании «Яндекс» заверяют, если навести камеру на какие-нибудь объекты, она подпишет те, что смогла распознать. Пользователь может получить информацию о том, что за объект попал в объектив, и где он продается. Можно узнать, что за растение или памятник архитектуры в кадре.
Если навести камеру на иностранное слово, оно будет переведено силами Яндекс.Переводчика. Перевод появится поверх оригинала. Разработчики уверены — такой инструмент будет очень полезен и удобен, когда надо перевести текст на этикетке или указателе. Сейчас «умная» камера доступна в приложении «Яндекс» для операционных систем iOS и Android.
Умная камера «Яндекса» мгновенно переводит текст и распознаёт предметы
Разработчики «Яндекса» добавили в официальное приложение функцию умной камеры. С её помощью пользователи могут эффективно использовать технологии компьютерного зрения, машинного перевода и поиска.
В режиме реального времени «Яндекс» распознаёт и ищет предметы, которые попадают в объектив смартфона. Кроме того, всего в один тап пользователи могут переводить фрагменты текста с отсканированных документов. Для этого достаточно навести камеру смартфона на любой документ.
Примечательно, что при поиске предметов приложение «Яндекс» включает в поисковую выдачу информацию об их стоимости, а также приводит магазины, в которых они продаются. Новая функция особенно полезна для поиска предметов и аксессуаров, имя или модель которых неизвестны. С помощью приложения также можно узнать точное имя памятника архитектуры.
В основе умной камеры лежат технологии компьютерного зрения. С их помощью камера выделяет на изображении отдельные объекты и распознаёт, что перед ней — стол, стул или комнатное растение. Для этого используются нейронные сети, обученные на огромном числе примеров. Также технологии компьютерного зрения позволяют найти и распознать надпись на картинке, которую нужно перевести.
Умная камера доступна в приложении «Яндекс» для iOS и Android. Чтобы её включить, нужно нажать на иконку камеры в поисковой строке.