TwiddleLab / Искусственный интеллект / Учимся на данных

Где провести черту: точность и полнота

Урок 6 из 11 · 7 мин · Бесплатно, без аккаунта

Что ты узнаешь

• Модель даёт каждому примеру оценку. Порог решает, кого отметить.
• Точность (precision): сколько из отмеченных верны. Полнота (recall): сколько настоящих случаев поймано.
• Сдвиг порога меняет пропуски на ложные тревоги. Какая ошибка хуже, зависит от задачи.

Начать урок

Как идёт урок

1. Пожарная сигнализация, которая никогда не срабатывает зря, может проспать настоящий пожар. Где её настроить?

   Тяни фиолетовую линию: сигнализация пищит, когда дым до неё доходит. Потом «Проверить».

2. Неделя на настоящей кухне.

   Нажми «Пуск». Тосты, пар, барбекю и два настоящих пожара. Твоя линия из шага 1 решает, когда пищать.

3. Снова светлячковая оспа: теперь модель даёт каждой зверушке оценку.

   Каждая зверушка правее линии отмечается. Тяни линию и смотри на два измерителя.

4. При линии 60 отмечены семь зверушек. Нажми на каждую ложную тревогу.

   Нажми на отмеченные точки, которые на самом деле здоровы, и «Проверить».

5. Два числа говорят, насколько хороша линия.

   Нажми, чтобы открыть.

   Число модели для каждой зверушки это оценка. Линия, которую ты рисуешь, это порог.

   Точность (precision): из отмеченных зверушек сколько по-настоящему больны? Здесь 4 из 7.

   Полнота (recall): из по-настоящему больных сколько отмечено? Здесь 4 из 5.

   Опусти порог, и полнота растёт, а точность обычно падает. Подними, и наоборот.

6. Три дома, три сигнализации.

   У каждого дома своя неделя дыма. Тяни каждую линию так, чтобы ни один пожар не был пропущен, а зря она пищала не больше одного раза.

7. При линии 60 модель отмечает 7 зверушек. 4 из них по-настоящему больны.

   Какая у неё точность, в процентах? Округли до целого.

8. Математика: точность и полнота это две дроби.

   Собери обе из чисел при линии 60. Перетащи плашки в ячейки и нажми «Проверить». (Условная вероятность, из мостика по вероятности.)

9. Что важнее для каждой задачи: точность или полнота?

   Перетащи каждое приложение на сторону или нажми на него, потом на сторону. Потом «Проверить».

10. Заводская настройка против твоих трёх линий.

    Каждая сигнализация ушла с завода с настройкой 50. Нажми кнопку, чтобы поставить твои линии из «Трёх домов».

Предыдущий урок: Точность может врать · Следующий урок: Масштабируй признаки · Часть курса: Учимся на данных

Уроки интерактивные и работают на JavaScript. Включи его, чтобы играть.