Случайные величины, распределения, условная вероятность и теорема Байеса.
Практика. Смоделировать распределения в NumPy и сравнить выборочные характеристики с теоретическими.
Практика. Вывести кросс-энтропию из правдоподобия бинарной модели и объяснить на примере.
Войдите, чтобы пройти тест: сданный тест отмечает тему пройденной на карте и в ИПР.
Бернулли и биномиальное — успех/неуспех и число успехов из n попыток (конверсия). Пуассона — число редких событий за интервал (заказы в минуту, ошибки в час). Нормальное — суммы многих независимых факторов, распределение средних по ЦПТ. Логнормальное и…
Полный разборТеорема Байеса пересчитывает вероятность гипотезы после наблюдения: P(H|D) = P(D|H)P(H) / P(D). Классическая ловушка — забыть базовую частоту P(H): при редком событии даже очень точный тест даёт больше ложных срабатываний, чем верных.
Полный разборСреднее — сумма, делённая на количество; чувствительно к выбросам. Медиана — значение посередине упорядоченного ряда; устойчива к выбросам. Мода — самое частое значение; для категорий и дискретных данных. При правосторонней асимметрии (доходы, чеки) среднее…
Полный разборКорреляция — совместное изменение величин; причинность — изменение одной вызывает изменение другой. Корреляция возникает и без причинности: общая причина (конфаундер), обратная причинность, отбор данных, случайность. Причинность надёжно устанавливает…
Полный разборЦПТ: среднее большой выборки распределено примерно нормально со стандартным отклонением σ/√n (стандартная ошибка), даже если сами данные не нормальны. На этом построены интервалы и тесты. 95% доверительный интервал — процедура, которая в 95% повторений…
Полный разборСначала понять природу выброса: ошибка данных (тестовый заказ, бот, сбой трекинга, неверные единицы) — исправить или исключить; реальное редкое значение (оптовый клиент) — часть распределения, удалять нельзя, но можно ограничить влияние: медиана, логарифм…
Полный разборУсловная вероятность P(A|B) — вероятность A, если известно, что произошло B: P(A|B) = P(A и B) / P(B). События независимы, если знание одного не меняет вероятность другого: P(A|B) = P(A), и тогда P(A и B) = P(A)P(B). Несовместные события не могут произойти…
Полный разборПосле собеседования sotto разбирает разговор: оценка, каждый вопрос — хорошо, частично или слабо, чего не хватило в ответе и над чем поработать к следующему разу. Первые 30 минут бесплатно.