Выбор метрики
Банкротства — редкий класс. Пропустить такое событие может быть дороже, чем поднять ложную тревогу. Чтобы изучить этот компромисс, я также использовал F3 — метрику, которая придаёт полноте больший вес, чем точности.

Университетский проект, начавшийся с вопроса: какую полезную информацию о риске банкротства я могу извлечь из данных компаний?
Банкротства — редкий класс. Пропустить такое событие может быть дороже, чем поднять ложную тревогу. Чтобы изучить этот компромисс, я также использовал F3 — метрику, которая придаёт полноте больший вес, чем точности.
Я сравнивал модели и пороговые значения, чтобы понять, как меняются число выявленных случаев и число ложных срабатываний, а также изучал важность признаков с помощью Random Forest.
От данных к интерпретации: этапы проекта.
Этот проект научил меня оценивать метрику вместе с ошибками, которые за ней стоят. Изменение метрики или порога меняет набор выявляемых случаев. Я хочу, чтобы этот компромисс был понятен при каждом сравнении моделей.
Исследовательский учебный проект. Графики отражают запуски, сохранённые в ноутбуке. Для проверки выводов потребовалась бы независимая оценка на новых данных.
Расскажите, что вы хотите создать или улучшить, кто будет этим пользоваться и какие у вас ограничения. Я свяжусь с вами, чтобы вместе определить, с чего начать.