Функционал качества
Для каждого объявления
точность распознавания категории
рассчитывается как взвешенная сумма совпадений оценок категории с истинными ответами на каждом уровне:



где
, если категория
-го уровня угадана верно, иначе 0.


Таким образом,
только в том случае, если категория указана верно вплоть до последнего уровня.

Общее качество алгоритма рассчитывается как средняя точность распознавания категории всех объявлений:
,
где
— количество объявлений.

