Фотоальбомы в галерее

Альбомы помогают найти фотографии, которые нужны прямо сейчас. Выбираешь, где пообедать — смотришь, как выглядят блюда и какого размера порции. Ищешь уютный бар для встречи с друзьями — любуешься интерьером. Уже приехал в ресторан и нужно найти вход — найдёшь его по фотографиям снаружи.

Сейчас фотоальбомы есть только в заведениях из рубрики «Поесть». Сортируем снимки по источнику: от владельца и от пользователей. Ещё есть альбомы про содержание самих фото: еда и напитки, интерьер, вид снаружи и вывески, меню, посетители и атмосфера.

А последняя фотография в альбоме «Снаружи» — это снимок здания. Так пользователь сможет заранее посмотреть не только вывеску и вход в заведение, но и как выглядит дом, в котором оно находится.

Как работает

Что изображено на фотографии определяет нейросеть, которая классифицирует снимки. Почти всегда самая сложная часть в задачах компьютерного зрения — собрать хороший датасет. Мы собираем его на crowdsource-сервисе. На таких сервисах люди размечают данные по заданной инструкции.

Важно подмечать, какие фото сложно даются нейросети — их точно надо добавить в датасет. Обычно для этого мы делаем простенький веб-интерфейс, в котором можно прогнать модель по любой организации, а каждый человек из команды может отметить, где она наврала. Это позволяет всей команде лучше понимать слабые места модели и датасета, а когда алгоритм выходит на приемлемый уровень — бесстрашно его релизить.

Сейчас модель постоянно дообучается на новых фотографиях и на жалобах об ошибке от пользователей. Этот процесс очень похож на тот, что мы используем для автомодерации пользовательских фото.

Что дальше

Альбомы уже есть в онлайн-версии и в приложении для Android. На iOS и в Личном кабинете для бизнеса они почти готовы и ждут релиза ближе к концу лета.

Параллельно мы начнём расширять рубрики, в которых появятся альбомы. Как вы поняли, проработка набора альбомов для сферы — отдельная задача. В ближайшее время возьмёмся за карточки из рубрики «Пожить» — это гостиницы, отели, базы отдыха.