TwiddleLab / Искусственный интеллект / Учимся на данных

Кривые данные, кривая машина

Урок 9 из 11 · 7 мин · Бесплатно, без аккаунта

Что ты узнаешь

• Смещение данных: если группа редка в обучающих данных, модель мало о ней узнаёт и чаще на ней ошибается.
• Смещение выборки часто идёт от удобства: кого проще достать, те и заполняют набор данных.
• Проверяй точность по группам. Общая оценка может выглядеть нормально, хотя одну группу модель подводит.

Начать урок

Как идёт урок

1. Фильтр для лица отлично работает на твоих друзьях, но глючит на двоюродном брате. То же приложение, тот же телефон. Почему?

   Та же идея со зверушками. Приложение училось в основном на лесных зверушках. Перетащи метку: насколько хорошо оно справится с горными? Потом «Проверить».

2. Собери обучающие данные своими руками.

   Нажми «Старт». Зверушки проходят мимо твоей сети по одной. Жми «Ловить», когда зверушка внутри сети. 12 мест.

3. Обучи на своём наборе. Проверь на обеих группах.

   Нажми «Обучить и проверить». Контрольную пишут 20 новых лесных и 20 новых горных зверушек.

4. А если бы в данных было больше горных зверушек?

   Двигай, сколько из 20 обучающих зверушек приходят с гор. Смотри на обе группы.

5. Имена для того, что случилось.

   Нажми, чтобы открыть.

   Смещение данных: обучающие данные не представляют всех, кого встретит модель.

   Смещение выборки одна из причин: некоторые группы проще собрать, и они заполняют данные.

   Точность по группам проверяет каждую группу отдельно. Общая оценка может скрыть группу, на которой модель проваливается.

6. Бюджет экспедиции.

   У тебя 30 монет. Лесная зверушка стоит 1, поездка в горы 3. Собери обучающую выборку, где обе группы набирают 85% или больше.

7. Парк должен выбрать одно из двух приложений.

   Открой оба приложения по группам. Потом нажми на то, которое стоит взять парку, и «Проверить».

8. Математика: где спрашиваешь, то и слышишь.

   Город спрашивает 1000 человек, какой парк строить. Перетащи планшет туда, где проводить опрос. Попробуй несколько мест и нажми «Проверить» с самым честным.

9. Где это фотоприложение будет ошибаться?

   Нажми на группу, на которой оно скорее всего ошибётся, и «Проверить».

10. Сделай честную карточку данных для приложения про зверушек.

    Перетащи каждую наклейку на её строку. Результат экспедиции уже вписан. Потом «Проверить».

Предыдущий урок: Ищем группы: кластеризация · Следующий урок: Как лента выбирает: рекомендации · Часть курса: Учимся на данных

Уроки интерактивные и работают на JavaScript. Включи его, чтобы играть.