Google научился объединять поиск по картинке и текстовому запросу
Для этого используется Google Lens.
Google представила функцию «мультипоиска», которая объединяет запрос по изображению и тексту. Новинка работает в виде бета-теста для пользователей из США и только на английском языке.
Как работает «мультипоиск»: при помощи сервиса Google Lens в приложении Google для iOS или Android выбирается изображение из памяти или камеры смартфона. Затем нужно свайпнуть вверх и добавить примечание в виде текста.
Получается, что поиск по изображению комбинируется с текстовым дополнением. В примере Google демонстрируется поиск жёлтого платья на фотографии, но с примечанием «зелёное». На выходе — похожие по стилю на фотографии платья, но зелёного цвета.
В Google рассказали, что «мультипоиск» использует «последние достижения в области искусственного интеллекта». Компания также изучает, как использовать нововведение в сочетании с новой ИИ-моделью Multitask Unified Model (MUM), которая уже используется в обычном поиске.