Смотрим, как работает распознавание объектов в приложении «Яндекс»

Автор Василий Шкодник 20:00 04.06.2021
- 0 +  9 223 3
Смотрим, как работает распознавание объектов в приложении «Яндекс»

«Яндекс» сегодня — это не только поиск! Но именно поиск остаётся для компании приоритетом: его алгоритмы постоянно улучшаются, а у привычных функций появляются новые фишки.

Так, у умной камеры в фирменном приложении теперь есть возможность определения предметов в реальном времени.

Предлагаем вместе посмотреть, как это работает, но для начала давайте разберёмся, как работает компьютерное зрение.

Что такое компьютерное зрение, и как оно работает

Люди довольно легко определяют различные предметы и отличают их друг от друга за счёт приобретённого опыта. Мы знаем, что коробка — это не только прямоугольник, но и предмет, который можно открыть за одну из сторон и поместить что-то внутрь.

То есть, главные свойства — внутри объект должен быть полым и иметь стенки. А как вы думаете, что можно назвать стулом? Самое очевидное, что приходит в голову: четыре ножки, спинка и доска, на которую можно сесть. А как вам такое:

Технически, это тоже стул. Основное свойство — это возможность на нём сидеть. Получается, чтобы обучить компьютер распознавать стул, необходимо, чтобы он понял, что «стул — это то, на чём можно сидеть», при этом необходимо, чтобы нейросеть также отличала его от кресел и диванов. Как раз этим и занимаются разработчики, обучая нейросети распознавать, что изображено на фотографиях.

Судя по тому, что сделали «Яндекс», у компании опыт и прогресс в этом огромный, так что давайте разберём на примерах, как хорошо работает их компьютерное зрение, и в каких сценариях оно может быть полезно.

Ухаживаем за растениями

Ситуация: вам дарят на день рождения какой-то комнатный цветок, за которым вы не знаете, как ухаживать, сколько раз поливать, и как он вообще называется. Открываем приложение «Яндекс». Ищем в поисковой строке значок умной камеры и нажимаем на него.

Наводим камеру, и оказывается, что это Аихризон, который ещё называют «деревом любви»!

Здесь же, в поисковой выдаче, можем найти подходящий сайт, на котором мы можем узнать, как правильно ухаживать за этой красотой. Но это ещё не всё.

Покупаем всё, что можем

Допустим, вы увидели в кафе или в гостях какой-то классный предмет интерьера, и вы сразу хотите его себе купить. Снова открываем приложение и наводим камеру. Отмечу, что компьютерное зрение «Яндекса» отлично справляется с анализом почти всех предметов окружения и помечает их точками.

Отдельно можно открыть раздел со списком товаров и магазинов, после чего перейти к покупке. Ну и к поиску в сети, конечно. Аналогично можно поступить с одеждой, кроссовками и косметикой.

Можете взять и попробовать самостоятельно, технология из будущего — не иначе! Я так, наверное, час бегал по квартире и сканировал всё, что только можно.

Определение объектов работает не только на товарах, но ещё на животных (можно определить породу кошки или собаки) и на шедеврах живописи (приходите в музей, наводите камеру на статую или картину и узнаёте что-то новое).

Сканируем и переводим

Чтобы отсканировать печатный документ, наводим на него камеру в «Яндексе», предварительно включив режим «сканер» с помощью свайпа. 

Уже через несколько секунд алгоритм вырежет документ, выровняет его по перспективе и сохранит в память устройства. Хотя, при желании, вы можете его сохранить на «Яндекс.Диск» или поделиться в других сервисах.

Помимо сканера документов и определения объектов можно переводить текст по фото, причём не только на русский язык. В режиме дополненной реальности переведённый текст накладывается на источник. Функция будет очень полезна в поездках за рубеж.

Милая история

Когда я готовил материал, в Facebook нашлась очень милая история от женщины, дочь которой во время поездки в Стамбул потеряла свой любимый рюкзак, подаренный бабушкой с дедушкой. Когда семья приехала домой, во время уборки женщина нашла детский рисунок, на котором был изображён тот самый рюкзак.

При помощи функции умной камеры в приложении «Яндекс» женщине удалось найти точно такой же рюкзак в интернете, купить его и порадовать свою дочь. Уверен, что таких случаев масса! Здорово, что современные технологии идут нам на пользу и делают жизнь проще, лучше и удобнее.

Подписывайтесь на Rozetked в Telegram, во «ВКонтакте» и обязательно в YouTube.

14.05.2024
Google I/O 2024
21.05.2024
Microsoft Build 2024
Нет событий
04.04.2025
«Форсаж 11»
Все события





Реклама на сайте



Комментарии

  1. Ну надо же, Яндекс наконец-то смог скопировать очередной сервис Google, существующий уже фиг знает сколько, и выдает его за свой...? как обычно.
    Задолбал этот тындэкс тырить всё у Гугла. Гнилая контора, никогда не использую их сервисы, из-за указанных выше причин, а ещё из-за того что если на телефоне появляется хоть один их сервис, телефон начинает жрать батарею, подлинник что всё что от Яндекса, сразу работы лезть везде и требовать права на всё, а ещё пытаться работать в фоне далее если это запрещено настройками. Фтопку.
    - 1 +
    1. Хочется внести собственное мнение относительно вашего комментария, тенденция тырить всё до чего русские в жизни не додумаются у нас действительно есть и это мерзко, проявляется сильнее всего в русском телевидение, но, когда дело доходит до it сферы я бы не сказал, что кто-то украл идею, например гугл создали гугл карты, а яндекс создал яндекс карты - мы не можем сказать что идея украдена ибо идея создания карт принадлежит всем... та же аналогия и с этим приложением, это машинное зрение, его нельзя украсть, оно нужно всем. По поводу сервисов Яндекса в целом - мне они очень нравятся, некоторые работают и особенно выглядят гораздо лучше чем у Гугла, те же карты, такое ощущение что гугл карты создавала 1000 человек и между собой они не общались + убогий функционал, только яндекс смог внедрить отслеживание автобусов и любой техники в реальном времени на картах и сделали они это в такой малоразвитой стране как наша. Если честно многими приложениями Гугла противно пользоваться, это очень большая компания и от того медленная и не поворотливая, когда все браузеры были уже красивые и округлые в поисковике Гугла были ромбики какие-то вместо вкладок. Работают приложения так же хорошо, не видел чтобы они куда-то лезли. Вот приложения Сбера конченные
      - 0 +
  2. (Яндекс развивается, сделал так же автоматический перевод видео на русский).
    - 0 +
14.05.2024
Google I/O 2024
21.05.2024
Microsoft Build 2024
Нет событий
04.04.2025
«Форсаж 11»
Все события





Реклама на сайте