Перейти к содержимому

Мета-распределение p-значений

Недавно прочитал книгу Нассима Талеба Статистические последствия жирных хвостов. Книга о математике, лежащей в основе историй Талеба, рассказанных в его предыдущих эссе. Некоторые вопросы меня заинтересовали, и я решил остановиться на них подробнее. В этой серии ранее опубликовал Среднеквадратичное отклонение и среднее абсолютное отклонение, Моделирование сходимости центральной предельной теоремы. В настоящей заметке рассматривается мета-распределение p-значений, относящееся к распределениям с жирными хвостами.

Рис. 1. Распределение вероятностей однохвостого p-значения при математическом ожидании 0,11, сгенерированное как методом Монте-Карло (гистограмма), так и аналитически (график непрерывной линией). Грубая асимметрия распределения делает среднее значение существенно выше большинства наблюдений, создавая многочисленные иллюзии статистической значимости.

Подробнее »Мета-распределение p-значений

Моделирование сходимости центральной предельной теоремы

Недавно прочитал книгу Нассима Талеба Статистические последствия жирных хвостов. Книга о математике, лежащей в основе историй Талеба, рассказанных в его предыдущих эссе. Некоторые вопросы меня заинтересовали, и я решил остановиться на них подробнее. В этой серии уже опубликовал Среднеквадратичное отклонение и среднее абсолютное отклонение. Настоящая заметка посвящена экспериментам со сходимостью центральной предельной теоремы (ЦПТ).

Рис. 1. Самая быстрая ЦПТ: равномерное распределение сходится к гауссову за несколько шагов

Подробнее »Моделирование сходимости центральной предельной теоремы

Среднеквадратичное отклонение и среднее абсолютное отклонение

Недавно прочитал книгу Нассима Талеба Статистические последствия жирных хвостов. Книга о математике, лежащей в основе историй Талеба, рассказанных в его предыдущих эссе. Некоторые вопросы меня заинтересовали, и я решил остановиться на них подробнее. Заметка представляет собой смесь текста Талеба, моих моделей в Excel и кратких замечаний.

Начнем со среднеквадратического отклонения и дисперсии, как свойств высших моментов (точнее, вторых). Есть различие между среднеквадратическим отклонением и средним абсолютным отклонением, и это различие усиливается в случае жирных хвостов.

Рис. 1. Сравним поведение взвешивающих функций корень(K + x2) и K +|x|. При жирном хвосте среднеквадратическое отклонение расходится со средним абсолютным отклонением при больших значениях случайной величины х

Подробнее »Среднеквадратичное отклонение и среднее абсолютное отклонение

Нассим Николас Талеб. Статистические последствия жирных хвостов

Новая книга Нассима Николаса Талеба посвящена статистическим распределениям, от которых можно ждать экстремальных событий. Книга математическая, и её выход в неспециализированном издательстве тиражом 4000 экз. вызывает удивление. Наверное, издатель решил, что под впечатлением от предыдущих книг Талеба и эту раскупят. Моих знаний математики явно недостаточно, и я ограничился чтением нетехнических разделов и моделированием в Excel некоторых представленных закономерностей. Мои комментарии набраны с отступом.

Нассим Николас Талеб. Статистические последствия жирных хвостов. – М.: КоЛибри, Азбука-Аттикус, 2023. – 480 с.

Подробнее »Нассим Николас Талеб. Статистические последствия жирных хвостов

Итан Мескита, Энтони Фаулер. Статистика без подвоха

Увлекательное введение в науку о данных, в котором упор делается на критическое мышление, а не на статистические методы. Введение в науку о данных или статистику не должно начинаться с доказательства сложных теорем или запоминания терминов и формул, но именно так устроены многие учебники по статистике. В книге показано, как инструменты критического анализа применяются к проблемам в самых разных областях, включая выборы, гражданские конфликты, преступность, терроризм, финансовые кризисы, здравоохранение, спорт, музыка и космические путешествия.

Итан Мескита, Энтони Фаулер. Статистика без подвоха. Методы критического анализа данных и причинного вывода. М.: ДМК Пресс, 2023. – 454 с.

Подробнее »Итан Мескита, Энтони Фаулер. Статистика без подвоха

Fantasy Premier League. Участие в игре травмированных

Не знаю, как вы, но я подметил, игроки с небольшой травмой реже выходят в старте, чем указанные для них проценты. Чтобы подтвердить наблюдения, я выполнил анализ. Данные о статусе игроков доступны на сайте fplstatistics в разделе Player Status Changes.

Рис. 1. Исторические данные о статусе игроков с сайта fplstatistics

Подробнее »Fantasy Premier League. Участие в игре травмированных

Колин Брайар и Билл Карр. Стратегия Amazon

Книга написана бывшими топ-менеджерами Amazon, и содержит целый ряд любопытных идей управления. Мне особенно понравилась критика использования PowerPoint как инструмента для обсуждения сложных тем. Вместо этого предлагается шестистраничный текстовый документ. Английское название книги Working Backwards, и «работе наоборот» посвящена отдельная глава. Начните с клиентского опыта и, думая о выпуске нового продукта, напишите пресс-релиз. Проработав его, вы многое узнаете о том, каким должен быть новый продукт. Нанимайте людей, которые повысят средний уровень вашей команды. Сосредоточьтесь на входных показателях бизнеса. Прибылью и дивидендами на акцию напрямую управлять нельзя.

Колин Брайар и Билл Карр. Стратегия Amazon. – М.: Эксмо, 2022. – 352 с.

Подробнее »Колин Брайар и Билл Карр. Стратегия Amazon

Fantasy Premier League. Премиальные игроки в сезоне 2023/24

Отобрав элитных игроков перед стартом сезона 2023/24, я теперь могу изучать различные аспекты их поведения. Перед GW8 я решил заиграть WC, и главным для меня был вопрос, сколько брать премиальных игроков. К таковым я отношу Холанна и Салаха. Два премиальных оставляют мало средств для иных позиций. А хорошую игру и высокие результаты показывает ряд игроков ARS, TOT, NEW, AVL, BHA. После изучения всей доступной информации и долгих колебаний я решил взять лишь Салаха. Это было рискованно, и не в тренде, но в двух следующих турах мне везло. Всегда приятно анализировать решение, которое стало удачным))

Рис. 1. GW8. Состав команды на WC

Подробнее »Fantasy Premier League. Премиальные игроки в сезоне 2023/24

Написание сложных формул на языке DAX Power Pivot с использованием ChatGPT

Я увлекаюсь игрой Fantasy Premier League. Помимо спортивного азарта соперничества с 10М игроков по всему миру, игра создаёт почву для серьёзных статистических исследований. Особенно после того, как я открыл для себя мир API. Большие данные, получаемые с помощью API, я помещаю в Excel, в модель данных Power Pivot. Дальнейший анализ веду с использованием формул на языке DAX (Data Analysis Expressions). Я только осваиваю этот язык, а практические задачи требуют продвинутых навыков. На помощь приходит ChatGPT.

Я взял итоги выступления игроков в сезоне 2022/23, поместил их в модель данных и вывел на лист Excel в виде сводной таблицы. Ниже показан фрагмент таких данных:

Рис. 1. Фрагмент сводной таблицы

Подробнее »Написание сложных формул на языке DAX Power Pivot с использованием ChatGPT

Андре Кукла. Ментальные ловушки

Книга о ментальных ловушках – накатанных и привычных путях, по которым мучительно и безрезультатно движется наша мысль, сжигая невероятные объемы нашего времени, высасывая энергию и не создавая никаких ценностей ни для нас самих, ни для кого бы то ни было. О том, почему мы преждевременно тревожимся или медлим в нерешительности, строим планы, которые вскоре опрокинет жизнь, или оттягиваем дело, которое давно пора начать.

Андре Кукла. Ментальные ловушки: Глупости, которые делают разумные люди, чтобы испортить себе жизнь. – М: Альпина Паблишер, 2023. – 208 с. (покетбук)

Подробнее »Андре Кукла. Ментальные ловушки