Скоро вы сможете использовать Gemini для поиска ваших фотографий Google.

neto

На I/O 2024, Google объявила о великой новой функции искусственного интеллекта для Google Photos, просто называемой Ask Photos. С помощью Ask Photos вы можете обращаться к приложению как к чатботу, скажем, Gemini или ChatGPT: вы можете запросить конкретное фото из вашей библиотеки или задать приложению общий вопрос о ваших фотографиях, и искусственный интеллект просмотрит всю вашу библиотеку, чтобы найти как фотографии, так и ответы на ваши запросы.

Как работает Ask Photos?

Когда вы задаете вопрос Ask Photos, бот будет делать подробный поиск в вашей библиотеке от вашего имени: сначала он определяет соответствующие ключевые слова в вашем запросе, такие как местоположения, люди и даты, а также более длинные фразы, например «летний поход в Мэн».

После этого Ask Photos изучит результаты поиска и решит, какие из них наиболее соответствуют вашему первоначальному запросу. Мультимодальные возможности Gemini позволяют ему обрабатывать элементы каждого фото, включая текст, объекты и действия, что помогает ему определить, является ли это изображение соответствующим для поиска. Когда Ask Photos выберет подходящие фото и видео для вашего запроса, он объединит их в полезный ответ.

Гугл говорит, что ваша личная информация в Google Фото никогда не используется для рекламы, и люди, проверяющие данные, не будут видеть конверсии и личную информацию в Ask Фото, за исключением «редких случаев, чтобы предотвратить злоупотребления или вред.» Компания также заявила, что не обучает свои другие продукты искусственного интеллекта с помощью данных из Google Фото, включая другие модели и сервисы Gemini.

Что вы можете сделать с Ask Photos?

Конечно, Ask Photos — идеальный способ быстро найти конкретные фотографии, которые вы ищете. Вы можете спросить: «Покажи мне лучшие фотографии с моей поездки в Испанию в прошлом году», и Google Photos покажет все ваши фотографии с этого отпуска, а также текстовое описание результатов. Вы можете использовать эту функцию, чтобы организовать эти фотографии в новый альбом или сгенерировать подписи для публикации в социальных сетях.

Однако, более интересное применение здесь — это поиск ответов на вопросы, содержащиеся в ваших фотографиях, без необходимости прокручивать их самостоятельно. Google поделилась отличным примером во время своей презентации: если вы спросите приложение: «Какой у меня номер лицензионного номера?», оно определит ваш автомобиль среди всех фотографий автомобилей в вашей библиотеке. Оно не только вернет фотографию вашего автомобиля с номером, но и ответит на исходный вопрос. Если вы даете совет другу о лучших ресторанах, которые стоит попробовать в городе, в котором вы уже были, вы можете спросить: «В какие рестораны мы ходили в Нью-Йорке в прошлом году?» и Ask Photos вернет как изображения ресторанов из вашей библиотеки, так и список, который вы можете поделиться.

Когда будет доступен Ask Photos?

Google говорит, что экспериментальная функция будет запущена в ближайшие месяцы, но конкретные сроки не были указаны.