Маркетплейс Мегамаркет объявил о запуске новой функции.
Теперь все пользователи могут искать одежду, обувь и аксессуары по фотографии. Поиск работает на основе технологии компьютерного зрения на базе платформы Layer (прим. сервис для распознавания актёров, одежды и локаций в кадре фильма) от Сбера. Нейросеть обучалась более полутора лет — за это время через нее прошли миллионы фотографий из модных журналов, с дизайнерских показов и фотосессий.
Можно сказать, что поиск по фото становится своеобразным стандартом в категории Fashion. С его помощью можно найти как отдельные предметы гардероба, так и собрать полноценный лук — например, по примеру популярного стиля, образа любимой звезды или конкретной модели с показа. Так, можно взять фотографию из модного журнала и за несколько мгновений подобрать максимально похожие товары, — положить их в корзину и заказать. Точность у технологии очень высокая — согласно данным тестирования, точность достигает 98%.
Так как нейросеть тренировалась на самых разных фотографиях, фон не имеет значения — это может быть даже простой снимок, где человек на улице или среди разнообразных атрибутов для фотосессии. Стоит учесть, что, если нужно найти какой-то конкретный аксессуар, например, очки или сумку, то лучше выбирать фотографии, где они полностью в кадре и крупным планом, иначе нейросеть в качестве рекомендаций будет подбирать сразу все вещи со снимка.
— Игорь Рожков, директор по маркетингу Мегамаркета
Технология, используемая в маркетплейсе, способна определить не только одежду, но и пол с возрастом человека на фото. За последнее отвечает нейросеть MiVOLO с открытым исходным кодом. Она упрощает поиск и позволяет давать более точные рекомендации.
Загружаешь и получаешь несколько вариантов розовых пиджаков с комплектом джинсов
Видеопример:
То есть, например, «нейронка» не будет предлагать взрослым людям детскую одежду. Она предположит возраст даже в том случае, если в кадре нет лица или модель стоит спиной к камере.
Загрузить в поиск можно изображения фото в разрешениях jpg, jpeg и png, при этом нет ограничений в размере фотографии. Выдача происходит по наибольшему совпадению. Все товары при этом можно отфильтровать по категориям.
5 комментариев