Мультимодальный поиск — это ничего нового для Google Lens. Компания представила его еще в 2022 году: С тех пор вы можете искать изображения и текст с помощью Lens — например, искать фотографию определенной машины, а затем добавлять «красный», чтобы указать тип цвета, который вы хотите найти.
Теперь Google выпускает обновление для Lens, которое использует новые инструменты искусственного интеллекта компании, чтобы сделать опыт более информативным. Google использует следующий мысленный эксперимент, чтобы продемонстрировать новые возможности Lens: представьте, что вы просматриваете гаражную распродажу и находите интересную настольную игру без коробки или инструкций для идентификации. Вместо того, чтобы бесцельно гуглить то, что вы видите, Google предлагает сделать фотографию игры, а затем задавать вопросы Lens, например: «Что это за игра и как ее играть?» Аналогично тому, как работает визуальный поиск с помощью чего-то вроде ChatGPT, Lens будет искать в Интернете информацию о игре на основе вашей фотографии.
Я представляю, что у этого инструмента есть множество потенциальных применений. Вы можете сделать фотографию блюда в ресторане и попросить Lens рассказать вам, как его приготовить; вы можете сделать фотографию здания в городе, который вы посещаете, и попросить Lens рассказать его историю и значение; вы даже можете сделать снимок торговой карточки и спросить, из какого набора она, и является ли она редкой или ценной. Такой тип инструмента может использоваться для образования, питания или общих покупок — при условии, конечно, что он работает, как заявлено.
Как опробовать новые возможности искусственного интеллекта Google Lens?
Эта новая функция Lens уже доступна: Google выпустил ее в среду, 17 января. Если вы знаете, как использовать Lens, то уже на правильном пути. Запустите приложение Google на Android или iOS, затем нажмите на значок Lens в строке поиска. Вы можете либо использовать кнопку поиска/затвора, чтобы сделать фото в самом Lens, либо использовать кнопку слева, чтобы загрузить изображение с телефона. В любом случае, после того, как Lens проанализирует ваше фото, вы можете нажать «Добавить к вашему поиску» и включить расширенные вопросы.
Я только что попробовал это на орхидее, которая находится рядом с моим столом. Я сделал фотографию в Ленсе, а затем спросил: «это ядовито для собак?» Гугл подумал минуту, а затем вернул ответ с помощью генеративного искусственного интеллекта. (Коротко говоря: нет, орхидеи не являются ядовитыми для собак или кошек.) Но здорово, что вам даже не нужно указывать, что находится на фотографии, когда спрашиваете об этом. Мне не нужно спрашивать «это ядовитая орхидея?» Я могу просто сказать «это ядовито», как будто спрашиваю кого-то в комнате со мной. Это довольно круто. (Теперь, надеюсь, ответ будет полезным, правильным и по теме, но это уже другой вопрос.)
