При рассмотрении нескольких гипотез возникает проблема множественности : чем больше гипотез проверяется, тем выше вероятность получения ошибок типа I ( ложноположительных результатов ). Метод Холма–Бонферрони является одним из многих подходов для контроля FWER, т. е. вероятности того, что произойдет одна или несколько ошибок типа I, путем корректировки критерия отклонения для каждой из отдельных гипотез. [ необходима цитата ]
Формулировка
Метод следующий:
Предположим, у вас есть p-значения , отсортированные в порядке от наименьшего к наибольшему , и соответствующие им гипотезы (нулевые гипотезы). Вы хотите, чтобы FWER не превышал определенного заранее заданного уровня значимости .
Если да , отклонить и перейти к следующему шагу, в противном случае ВЫЙТИ.
Если да , то также отклонить и перейти к следующему шагу, в противном случае ВЫЙТИ.
И так далее: для каждого значения P проверить, является ли . Если да, отклонить и продолжить проверку больших значений P, в противном случае ВЫЙТИ.
Этот метод гарантирует, что FWER не превышает , в сильном смысле.
Обоснование
Простая поправка Бонферрони отклоняет только нулевые гипотезы со значением p, меньшим или равным , чтобы гарантировать, что FWER, т. е. риск отклонения одной или нескольких истинных нулевых гипотез (т. е. совершения одной или нескольких ошибок типа I), не превышает . Цена этой защиты от ошибок типа I — повышенный риск не отклонения одной или нескольких ложных нулевых гипотез (т. е. совершения одной или нескольких ошибок типа II).
Метод Холма–Бонферрони также контролирует FWER при , но с меньшим увеличением риска ошибки типа II, чем классический метод Бонферрони. Метод Холма–Бонферрони сортирует p -значения от наименьшего к наибольшему и сравнивает их с номинальными альфа-уровнями от до (соответственно), а именно значениями .
Индекс определяет первое значение p , которое недостаточно низко для подтверждения отклонения. Таким образом, нулевые гипотезы отклоняются, в то время как нулевые гипотезы не отклоняются.
Если ни одно p -значение не оказалось достаточно низким для отклонения, то ни одна нулевая гипотеза не отклоняется.
Если такой индекс не найден, то все p -значения достаточно низки для отклонения, поэтому все нулевые гипотезы отклоняются (ни одна не принимается).
Доказательство
Пусть — семейство гипотез, отсортированное по их p-значениям . Пусть — множество индексов, соответствующих (неизвестным) истинным нулевым гипотезам, имеющее членов.
Утверждение : Если мы ошибочно отвергаем некоторую истинную гипотезу, то существует истинная гипотеза , для которой не более .
Сначала отметим, что в этом случае существует по крайней мере одна истинная гипотеза, поэтому . Пусть будет таким, что — первая отвергнутая истинная гипотеза. Тогда — все отвергнутые ложные гипотезы. Отсюда следует, что и, следовательно, (1). Поскольку отвергается, то должно быть по определению процедуры тестирования. Используя (1), заключаем, что , как и требовалось.
Итак, давайте определим случайное событие . Обратите внимание, что для , поскольку — истинная нулевая гипотеза, то имеем, что . Субаддитивность меры вероятности подразумевает, что . Следовательно, вероятность отвергнуть истинную гипотезу не превышает .
Альтернативное доказательство
Метод Холма–Бонферрони можно рассматривать как закрытую процедуру тестирования [2] с поправкой Бонферрони, применяемой локально на каждом из пересечений нулевых гипотез.
Принцип замыкания гласит, что гипотеза в семействе гипотез отвергается — при контроле FWER на уровне — тогда и только тогда, когда все подсемейства пересечений с отвергаются на уровне .
Метод Холма–Бонферрони является сокращенной процедурой , поскольку он делает или меньше сравнений, в то время как число всех пересечений нулевых гипотез, которые должны быть проверены, имеет порядок . Он контролирует FWER в сильном смысле.
В процедуре Холма–Бонферрони мы сначала проверяем . Если он не отвергается, то пересечение всех нулевых гипотез также не отвергается, так что существует по крайней мере одна гипотеза пересечения для каждой из элементарных гипотез , которая не отвергается, таким образом, мы не отвергаем ни одну из элементарных гипотез.
Если отвергается на уровне , то все подсемейства пересечений, которые его содержат, также отвергаются, таким образом, отвергается. Это происходит потому, что является наименьшим в каждом из подсемейств пересечений, а размер подсемейств не превышает , так что порог Бонферрони больше .
То же самое обоснование применимо к . Однако, поскольку уже отклонено, достаточно отклонить все подсемейства пересечений без . Как только выполняется, все пересечения, содержащие , отклоняются.
То же самое относится к каждому .
Пример
Рассмотрим четыре нулевые гипотезы с нескорректированными p-значениями , и , которые необходимо проверить на уровне значимости . Поскольку процедура является пошаговой, мы сначала проверяем , которая имеет наименьшее p-значение . P-значение сравнивается с , нулевая гипотеза отклоняется, и мы переходим к следующей. Поскольку мы также отклоняем и продолжаем. Следующая гипотеза не отклоняется, поскольку . Мы прекращаем проверку и приходим к выводу, что и отклоняются и и не отклоняются, контролируя при этом частоту ошибок по семейству на уровне . Обратите внимание, что даже если применяется, не отклоняется. Это связано с тем, что процедура тестирования останавливается, как только происходит отказ от отклонения.
Расширения
Метод Хольма–Шидака
Если проверки гипотез не являются отрицательно зависимыми, можно заменить на:
в результате тест получился немного более мощным.
Утяжеленная версия
Пусть будут упорядоченными нескорректированными p-значениями. Пусть , соответствуют . Отклонить до тех пор, пока
Скорректированоп-ценности
Скорректированные p -значения для метода Холма–Бонферрони составляют:
В предыдущем примере скорректированные p -значения равны , и . Только гипотезы и отклоняются на уровне .
Аналогичные скорректированные p -значения для метода Холма-Шидака можно определить рекурсивно как , где . Из-за неравенства для метод Холма-Шидака будет более мощным, чем метод Холма-Бонферрони.
Гипотеза отклоняется на уровне α тогда и только тогда, когда ее скорректированное p -значение меньше α. В предыдущем примере с использованием равных весов скорректированные p -значения составляют 0,03, 0,06, 0,06 и 0,02. Это еще один способ увидеть, что при использовании α = 0,05 только гипотезы один и четыре отклоняются этой процедурой.
Альтернативы и использование
Метод Холма–Бонферрони «равномерно» более эффективен, чем классическая поправка Бонферрони , то есть он всегда по крайней мере столь же эффективен.
Существуют и другие методы управления FWER, которые являются более мощными, чем процедура Холма–Бонферрони. Например, в процедуре Хохберга отклонение производится после нахождения максимального индекса, такого что . Таким образом, процедура Хохберга равномерно более мощна, чем процедура Холма. Однако процедура Хохберга требует, чтобы гипотезы были независимыми или находились под определенными формами положительной зависимости, тогда как процедура Холма–Бонферрони может применяться без таких предположений. Аналогичная процедура повышения уровня — это процедура Хоммеля, которая равномерно более мощна, чем процедура Хохберга. [3]
Нейминг
Карло Эмилио Бонферрони не принимал участия в изобретении метода, описанного здесь. Первоначально Холм назвал метод «последовательно отвергающим тестом Бонферрони», и только спустя некоторое время он стал известен как тест Холма–Бонферрони. Мотивы, по которым Холм назвал свой метод в честь Бонферрони, объясняются в оригинальной статье: «Использование неравенства Буля в теории множественного вывода обычно называют методом Бонферрони, и по этой причине мы будем называть наш тест последовательно отвергающим тестом Бонферрони».
Ссылки
^ Холм, С. (1979). «Простая последовательно отклоняющая множественная процедура тестирования». Scandinavian Journal of Statistics . 6 (2): 65–70 . JSTOR 4615733. MR 0538597.
^ Маркус, Р.; Периц, Э.; Габриэль, К. Р. (1976). «О закрытых процедурах тестирования с особым упором на упорядоченный дисперсионный анализ». Biometrika . 63 (3): 655– 660. doi :10.1093/biomet/63.3.655.
^ Хоммель, Г. (1988). «Поэтапная процедура множественного теста с отклонением, основанная на модифицированном тесте Бонферрони». Biometrika . 75 (2): 383–386 . doi :10.1093/biomet/75.2.383. hdl : 2027.42/149272 . ISSN 0006-3444.