Смотрим, как работает распознавание объектов в приложении «Яндекс»

Автор Василий Шкодник 20:00 04.06.2021
- 0 +  5 313 3
Смотрим, как работает распознавание объектов в приложении «Яндекс»

«Яндекс» сегодня — это не только поиск! Но именно поиск остаётся для компании приоритетом: его алгоритмы постоянно улучшаются, а у привычных функций появляются новые фишки.

Так, у умной камеры в фирменном приложении теперь есть возможность определения предметов в реальном времени.

Предлагаем вместе посмотреть, как это работает, но для начала давайте разберёмся, как работает компьютерное зрение.

Что такое компьютерное зрение, и как оно работает

Люди довольно легко определяют различные предметы и отличают их друг от друга за счёт приобретённого опыта. Мы знаем, что коробка — это не только прямоугольник, но и предмет, который можно открыть за одну из сторон и поместить что-то внутрь.

То есть, главные свойства — внутри объект должен быть полым и иметь стенки. А как вы думаете, что можно назвать стулом? Самое очевидное, что приходит в голову: четыре ножки, спинка и доска, на которую можно сесть. А как вам такое:

Технически, это тоже стул. Основное свойство — это возможность на нём сидеть. Получается, чтобы обучить компьютер распознавать стул, необходимо, чтобы он понял, что «стул — это то, на чём можно сидеть», при этом необходимо, чтобы нейросеть также отличала его от кресел и диванов. Как раз этим и занимаются разработчики, обучая нейросети распознавать, что изображено на фотографиях.

Судя по тому, что сделали «Яндекс», у компании опыт и прогресс в этом огромный, так что давайте разберём на примерах, как хорошо работает их компьютерное зрение, и в каких сценариях оно может быть полезно.

Ухаживаем за растениями

Ситуация: вам дарят на день рождения какой-то комнатный цветок, за которым вы не знаете, как ухаживать, сколько раз поливать, и как он вообще называется. Открываем приложение «Яндекс». Ищем в поисковой строке значок умной камеры и нажимаем на него.

Наводим камеру, и оказывается, что это Аихризон, который ещё называют «деревом любви»!

Здесь же, в поисковой выдаче, можем найти подходящий сайт, на котором мы можем узнать, как правильно ухаживать за этой красотой. Но это ещё не всё.

Покупаем всё, что можем

Допустим, вы увидели в кафе или в гостях какой-то классный предмет интерьера, и вы сразу хотите его себе купить. Снова открываем приложение и наводим камеру. Отмечу, что компьютерное зрение «Яндекса» отлично справляется с анализом почти всех предметов окружения и помечает их точками.

Отдельно можно открыть раздел со списком товаров и магазинов, после чего перейти к покупке. Ну и к поиску в сети, конечно. Аналогично можно поступить с одеждой, кроссовками и косметикой.

Можете взять и попробовать самостоятельно, технология из будущего — не иначе! Я так, наверное, час бегал по квартире и сканировал всё, что только можно.

Определение объектов работает не только на товарах, но ещё на животных (можно определить породу кошки или собаки) и на шедеврах живописи (приходите в музей, наводите камеру на статую или картину и узнаёте что-то новое).

Сканируем и переводим

Чтобы отсканировать печатный документ, наводим на него камеру в «Яндексе», предварительно включив режим «сканер» с помощью свайпа. 

Уже через несколько секунд алгоритм вырежет документ, выровняет его по перспективе и сохранит в память устройства. Хотя, при желании, вы можете его сохранить на «Яндекс.Диск» или поделиться в других сервисах.

Помимо сканера документов и определения объектов можно переводить текст по фото, причём не только на русский язык. В режиме дополненной реальности переведённый текст накладывается на источник. Функция будет очень полезна в поездках за рубеж.

Милая история

Когда я готовил материал, в Facebook нашлась очень милая история от женщины, дочь которой во время поездки в Стамбул потеряла свой любимый рюкзак, подаренный бабушкой с дедушкой. Когда семья приехала домой, во время уборки женщина нашла детский рисунок, на котором был изображён тот самый рюкзак.

При помощи функции умной камеры в приложении «Яндекс» женщине удалось найти точно такой же рюкзак в интернете, купить его и порадовать свою дочь. Уверен, что таких случаев масса! Здорово, что современные технологии идут нам на пользу и делают жизнь проще, лучше и удобнее.

Подписывайтесь на Rozetked в Telegram, во «ВКонтакте» и обязательно в YouTube.

19.10.2021
Презентация realme GT Neo 2T
19.10.2021
Российская презентация Xiaomi 11T
21.10.2021
RazerCon
26.10.2021
Конференция для разработчиков SDC21
26.10.2021
Adobe MAX
26.10.2021
Презентация Sony Xperia
28.10.2021
Релиз Riders Republic
09.11.2021
Релиз Forza Horizon 5
15.01.2022
Релиз Rainbow Six Extraction
16.12.2021
Премьера «Аватар 2»
11.02.2022
Премьера «Неизведанное: Удача Дрейка»
27.05.2022
Премьера «Топ Ган: Мэверик»
07.04.2023
Премьера «Форсаж 10»
Все события


Реклама на сайте



Комментарии

  1. Ну надо же, Яндекс наконец-то смог скопировать очередной сервис Google, существующий уже фиг знает сколько, и выдает его за свой...? как обычно.
    Задолбал этот тындэкс тырить всё у Гугла. Гнилая контора, никогда не использую их сервисы, из-за указанных выше причин, а ещё из-за того что если на телефоне появляется хоть один их сервис, телефон начинает жрать батарею, подлинник что всё что от Яндекса, сразу работы лезть везде и требовать права на всё, а ещё пытаться работать в фоне далее если это запрещено настройками. Фтопку.
    - 1 +
    1. Хочется внести собственное мнение относительно вашего комментария, тенденция тырить всё до чего русские в жизни не додумаются у нас действительно есть и это мерзко, проявляется сильнее всего в русском телевидение, но, когда дело доходит до it сферы я бы не сказал, что кто-то украл идею, например гугл создали гугл карты, а яндекс создал яндекс карты - мы не можем сказать что идея украдена ибо идея создания карт принадлежит всем... та же аналогия и с этим приложением, это машинное зрение, его нельзя украсть, оно нужно всем. По поводу сервисов Яндекса в целом - мне они очень нравятся, некоторые работают и особенно выглядят гораздо лучше чем у Гугла, те же карты, такое ощущение что гугл карты создавала 1000 человек и между собой они не общались + убогий функционал, только яндекс смог внедрить отслеживание автобусов и любой техники в реальном времени на картах и сделали они это в такой малоразвитой стране как наша. Если честно многими приложениями Гугла противно пользоваться, это очень большая компания и от того медленная и не поворотливая, когда все браузеры были уже красивые и округлые в поисковике Гугла были ромбики какие-то вместо вкладок. Работают приложения так же хорошо, не видел чтобы они куда-то лезли. Вот приложения Сбера конченные
      - 0 +
  2. (Яндекс развивается, сделал так же автоматический перевод видео на русский).
    - 0 +
19.10.2021
Презентация realme GT Neo 2T
19.10.2021
Российская презентация Xiaomi 11T
21.10.2021
RazerCon
26.10.2021
Конференция для разработчиков SDC21
26.10.2021
Adobe MAX
26.10.2021
Презентация Sony Xperia
28.10.2021
Релиз Riders Republic
09.11.2021
Релиз Forza Horizon 5
15.01.2022
Релиз Rainbow Six Extraction
16.12.2021
Премьера «Аватар 2»
11.02.2022
Премьера «Неизведанное: Удача Дрейка»
27.05.2022
Премьера «Топ Ган: Мэверик»
07.04.2023
Премьера «Форсаж 10»
Все события


Реклама на сайте