Что важно знать
- Сначала — как собирались данные и что значит строка.
- Пропуски: случайные или нет; выбросы: ошибка или реальность.
- Корреляция не означает причинность.
- Хороший график отвечает на один вопрос.
Этап 3 из 14 · ≈ 10 ч
Разведочный анализ и визуализация
Основа с Junior
Качество данных, распределения, связи, выбросы и графики, которые помогают принять решение.
Критерии освоения
Junior ≈ 10 ч
- Проводит EDA нового датасета — структура, пропуски, выбросы, распределения, связи
- Строит понятные графики в matplotlib или seaborn
Практика. Провести EDA открытого датасета и оформить ноутбук с 10 выводами и графиками.
Middle ≈ 6 ч
- Находит проблемы сбора данных и потенциальные утечки на этапе EDA
- Представляет выводы заказчику графиками, ведущими к решению
Практика. Подготовить для заказчика 5-слайдовую презентацию выводов из EDA с рекомендациями.
Проверка знаний
Войдите, чтобы пройти тест: сданный тест отмечает тему пройденной на карте и в ИПР.
Вопросы с собеседований
Смотреть всеКак вы проводите разведочный анализ данных (EDA)?Junior
Цель EDA — понять данные до модели: структура (строки, столбцы, типы, единицы, что такое одна строка), качество (пропуски, дубли, выбросы, ошибки ввода), распределения признаков и целевой переменной, связи между признаками и с целевой, время (тренды…
Полный разборКак работать с пропущенными значениями в данных?Junior
Сначала понять, почему значение пропущено: технический сбой, «не применимо» (нет второго адреса), пользователь не захотел указывать. Пропуск часто несёт информацию. Варианты: исключить строки (если пропусков мало и они случайны), заполнить (медианой…
Полный разборКак обнаруживать и обрабатывать выбросы в данных?Junior
Сначала понять природу выброса: ошибка данных (тестовый заказ, бот, сбой трекинга, неверные единицы) — исправить или исключить; реальное редкое значение (оптовый клиент) — часть распределения, удалять нельзя, но можно ограничить влияние: медиана, логарифм…
Полный разборЧем корреляция отличается от причинно-следственной связи?Junior
Корреляция — совместное изменение величин; причинность — изменение одной вызывает изменение другой. Корреляция возникает и без причинности: общая причина (конфаундер), обратная причинность, отбор данных, случайность. Причинность надёжно устанавливает…
Полный разборКак спроектировать дашборд, которым будут пользоваться?Junior
Начинать с вопросов и решений, которые дашборд должен поддерживать, и с аудитории: руководителю — несколько ключевых метрик с динамикой и сравнением с планом, команде — детализация и разрезы. Каждой метрике — определение, сравнение (с прошлым периодом…
Полный разбор
Партнёр платформы
Разбор собеседования
Разбор собеседования с sotto
После собеседования sotto разбирает разговор: оценка, каждый вопрос — хорошо, частично или слабо, чего не хватило в ответе и над чем поработать к следующему разу. Первые 30 минут бесплатно.