Аудиозапись технического собеседованияТехническое собеседованиеДата не указана
БЕЛЫЕ САДЫ 29: ROC-AUC и метрики модерации
Audio-only ML-screen с задачей про ROC-AUC после равномерного дублирования положительных и отрицательных объектов, а также discussion по порогам модерации.
Аудио и материалы
Аудио собеседования
0:00 / 20:48
Выводы и как готовиться
- ROC-AUC как pairwise ranking metric не меняется при равномерном дублировании всех positive и negative объектов.
- Для moderation threshold нужно разделять auto-reject и ручную проверку: цена false positive и false negative разная.
- Версия задачи с раннером фиксирует pairwise AUC с tie = 0.5 и показывает, почему множители классов сокращаются.