Классификация товаровЯндекс.Маркета

АзановЕгорРуководительгруппыразработкиkrondix@yandex‐team.ru

www.rit2007.ru

Яндекс.Маркет

• 1500магазинов• 2.5миллионапредложений• 1300категорийтоваров

www.rit2007.ru

Все плохо

• КатегориимагазинавручнуюотображаютсянакатегорииМаркета

• Унекоторыхмагазиновстоитпоучитьсяправильнойклассификациитоваров

• АунекоторыхLCD‐мониторылежатвкатегории“Садовыестулья”

www.rit2007.ru

Цель

• Автоматическаяклассификациянаосноветекстатоварногопредложения

• Удобныйпроцессдляконтроляинастройкиполучившегося“черногоящика”

www.rit2007.ru

Проблемы

• Существующиеалгоритмыклассификациимедленноинекачественноработают,если

‐ категориймного‐ категориисильноразличаютсяпоразмеру‐ укатегорийнеплоскаяструктура

• Обучающаявыборканизкогокачества,многоошибокинеточностей

www.rit2007.ru

Классификация

www.rit2007.ru

Классификация

www.rit2007.ru

Классификация

?

?

?

www.rit2007.ru

Классификация

?

?

?

www.rit2007.ru

Классификация

www.rit2007.ru

Классификация

www.rit2007.ru

Классификация

www.rit2007.ru

Multiword Features

• Многиекатегориисостоятиз,практически,одногоитогоженабораслов,напримерсотовыетелефоныиаксессуарыкним

• Спасение:“длясотовых”,“длятелефонов”

• Вычислятьвсевозможныепарысловвовсехпредложенияхнеобязательно

www.rit2007.ru

Обучение

• Какулучшитькачествообучающейвыборки?

• Кластеризациясмежныхкатегорий

• Поискпредложенийвызвавшихошибку

www.rit2007.ru

Контроль

• Какисправлятьошибки?Какнаходитьихпричины?

• Длякаждогопредложенияможнонайтипохожиенанего

‐ изтекущегоиндекса⇒ошибки

‐ изобучающейвыборки⇒причины

www.rit2007.ru

Итого

• Предложенияклассифицируются• Качествообучающейвыборкиповышается• Качествоклассификацииповышается

www.rit2007.ru

Куда дальше

• “Правильное”деревокатегорий• Автоматическоевыявлениеродственныхсвязеймеждукатегориямиииспользованиеэтойинформации