Поиск по картинке или фотографии с телефона, определяем фото и предметы на нем при помощи нейросети


В предыдущей версии статьи мы использовали разные ухищрения, чтобы найти картинку в интернете (например, идентифицировать какой-либо предмет на фото). Теперь это стало намного проще. На сегодняшний день в мобильных версиях поисковых систем уже предусмотрен поиск по фото.

Небольшая ремарка. Современный поиск по фото ищет не просто совпадение, а анализирует содержимое фото или картинки и выдает результат о том, что там изображено.

Поиск по картинке в Google

Чтобы выполнить поиск по фото, откройте стартовую страницу Google в мобильном браузере (аналогично работает и приложение Google):

Далее жмете на эту кнопку и загружаете в Гугл картинку с телефона. Выглядит это вот так:

Таким образом вы можете найти похожее фото и узнать, что на нем изображено. Например, вы в Телеграм увидели на картинке незнакомый предмет или вас спросили: что это? Сохраняете в телефон и находите о нем информацию с помощью Google.

Так же можно запустить поиск по картинкам через Google Объектив с любого сайта через мобильный браузер Google Chrome. Находите картинку на сайте, долгое нажатие и в контекстной менюшке выбираете "найти через Google Объектив":

Google Объектив (Google Lens) — это технология компьютерного зрения и искусственного интеллекта, которая позволяет смартфону или компьютеру "видеть" и понимать мир через камеру.

Поиск по картинке в Яндекс

С Яндексом ровно такая же история. В поисковой строке Яндекса нужно нажать на пиктограму:

И загрузить туда картинку с телефона:

На наш взгляд Яндекс более информативен. Он определяет и то, что изображено на картинке и одновременно находит дубль картинки. Но вот качество распознавания выше у Google. Например, если вы хотите определить монету или непонятную вещь, то Google это сделает несколько лучше или быстрее. И это резонно - у Гугла больше база (весь мир), хотя в локальных вопросах Яндекс может оказаться полезнее.

Попробуем на практике определить предмет на этой фотографии (5копеек Российской Империи):

Первым монету определять будет Google (мы пробовали через приложение Google Объектив и это одно и тоже):

Google выдал похожие результаты и на этом его участие закончилось.

Вторая попытка у Яндекса:

Яндекс, как уже было сказано выше, еще и сообщает, что это за предмет. В данном случае он распознал, что это монета царской России и медная монета, а так же вывел листинг картинок похожих "пятачков".

Из доступных в России нейросетей мы попробовали сначала в Google Gemini (через VPN):

Результат, как можно увидеть на скриншотах, просто шикарен. Нейросеть Gemini распознала монету и дала впечатляющее описание.

Следующим была китайская нейросеть DeepSeek. Но удобоваримого результата добиться не удалось. Дело в том, что данный ИИ не разрешает загружать фото, и загруженное на популярные фотохостинги фото с монетой DeepSeek распознавать не захотел, не смотря на использование прямых ссылок.

Следующий в нашем тесте - отечественная нейросеть Gigachat от Сбер:

Увы, но Гигачат не смог похвастаться правильным результатом.

Переходим к Алиса AI от Яндекса. Эта нейросеть должна показать хоть какой-то правдоподобный результат. И она показала:

В целом, это неплохой результат. Алиса распознала царскую монету и ее номинал.

Сравним полученные результаты с Chat GPT:

Chat GPT мы запускали на компьютерн (из-за ограничений в отношении РФ на мобильном телефоне обойти их очень сложно). Данный результат можно считать эталонным.

В заключение можно сказать, что все эти сервисы по-разному справляются со своими задачами, но западные пока опережают российские. В любом случае, когда пытаетесь найти по фото какую-то редку вещь - используйте все возможности.