FWER

Материал из MachineLearning.

(Различия между версиями)

Версия 19:10, 16 сентября 2010

FWER (familywise error rate, групповая вероятность ошибки (первого рода)) — одна из мер, обобщающих ошибку первого рода, рассматриваемую при проверке статистических гипотез, на многомерный случай задачи множественной проверки гипотез. Величина определена как вероятность совершить хотя бы одну ошибку первого рода.

Содержание

1 Обозначения
2 Методы контроля FWER
3 Контроль FWER для иерархических семейств гипотез
4 Связь с другими мерами ошибки первого рода
5 Ссылки

Обозначения

Пусть $H = \{H_i\}, \: i=1,\ldots,m$ — множество нулевых гипотез, проверяемых против альтернатив общего вида $H_{Ai} = \bar{H}_i, \: i=1,\ldots,m$ . Если нулевая гипотеза верна, будем писать $H_i=0$ , и $H_i=1$ в противном случае.

За $p =\{p_1,\ldots,p_m\}$ обозначим множество пи-величин, полученных при проверке соответствующих гипотез $H_i$ подходящими статистическими критериями.

Пусть $M_0=\{i:\:H_i=0\}$ и $M_1=\{i:\:H_i=1\}$ — неизвестные множества индексов верных и неверных нулевых гипотез, $m_0=\left|M_0\right|$ , $m_1=\left|M_1\right|$ , $\left|M_0\cup M_1\right|=m$ . Количество отклонённых нулевых гипотез $R$ и количество принятых $W = m-R$ — наблюдаемые случайные величины, в то время как величины $S$ , $T$ , $U$ и $V$ из приведённой ниже таблицы являются ненаблюдаемыми.

	Число принятых гипотез	Число отвергнутых гипотез	Всего
Число верных гипотез	$U$	$V$	$m_0$
Число неверных гипотез	$T$	$S$	$m_1$
Всего	$W$	$R$	$m$

Задача состоит в том, чтобы выбрать метод, допускающий минимальное число ложных отклонений гипотез $V$ и ложных принятий $T$ .

По определению $\operator{FWER}=\operator{P}\left(V\geq 1\right)$ . Контроль над $\operator{FWER}$ на фиксированном уровне $\alpha$ означает, что выполняется неравенство $\operator{FWER}\leq\alpha$ .

Методы контроля FWER

Поправка Бонферрони

Метод Бонферрони, самый известный способ решения задачи множественной проверки гипотез, утверждает, что для контроля над $\operator{FWER}$ на уровне $\alpha$ достаточно, чтобы отвергались те и только те гипотезы $H_i$ , для которых $p_i \leq \alpha/m$ . Соответствующие модифицированные достигаемые уровни значимости вычисляются по формуле

$\tilde{p}_i=\min\left(mp_i,\,1\right)$ .

Контроль над $\operator{FWER}$ обеспечивается по неравенству Буля:

$\operator{FWER} \:=\: \operator{P}\left(V\geq 1\right) \:\leq\: \operator{P}\left(\bigcup_{i=1}^{m_0} \left\{ \tilde{P}_i \leq \alpha \right\} \right) \:\leq\: \sum_{i=1}^{m_0}\operator{P}\left( \tilde{P}_i \leq \alpha \right) \:\leq\: \sum_{i=1}^{m_0} \alpha/m \:=\: m_0\alpha/m \:\leq\: \alpha.$

Данное неравенство выполняется при любых $p_i$ , безо всяких ограничений на характер зависимости между ними.

Хотя данная процедура позволяет ограничить вероятность ошибки первого рода, мощность её невелика, поскольку каждая из гипотез проверяется на уровне значимости $\alpha/m$ . При достаточно больших $m$ этот уровень настолько низок, что гипотезы будут отвергаться крайне неохотно.

Метод Холма

Пусть $p_{(1)}\leq \ldots \leq p_{(m)}$ — уровни значимости $p_i$ , упорядоченные по неубыванию, $H_{(1)}, \ldots, H_{(m)}$ — соответствующие $p_{(i)}$ гипотезы. Процедура Холма определена следующим образом.

Шаг 1. Если $p_{(1)}\geq\alpha/m$ , принять гипотезы $H_{(1)}, \ldots, H_{(m)}$ и остановиться. Иначе, если $p_{(1)}>\alpha/m$ , отвергнуть гипотезу $H_{(1)}$ и продолжить проверку оставшихся гипотез на уровне значимости $\alpha/(m-1)$ .

Шаг 2. Если $p_{(2)}\geq\alpha/(m-1)$ , принять гипотезы $H_{(2)}, \ldots, H_{(m)}$ и остановиться. Иначе, если $p_{(2)}>\alpha/(m-1)$ , отвергнуть гипотезу $H_{(2)}$ и продолжить проверку оставшихся гипотез на уровне значимости $\alpha/(m-2)$ .

И т.д.

Метод Хохберга

Метод Шидака

minP

Перестановочные методы

Метод Хоммеля

Последовательная проверка

Контроль FWER для иерархических семейств гипотез

Связь с другими мерами ошибки первого рода

Ссылки

Familywise error rate — статья из английской Википедии.

Это незавершённая статья. Вы поможете проекту, исправив и дополнив её.

Источник — «http://machinelearning.ru/wiki/index.php?title=FWER»

Категории: Прикладная статистика | Множественная проверка гипотез | Незавершённые статьи

@@ Строка 37: / Строка 37: @@
 ===Поправка Бонферрони===
 Метод Бонферрони, самый известный способ решения задачи множественной проверки гипотез, утверждает, что для контроля над <tex>\operator{FWER}</tex> на уровне <tex>\alpha</tex> достаточно, чтобы отвергались те и только те гипотезы <tex>H_i</tex>, для которых <tex> p_i \leq \alpha/m</tex>. Соответствующие модифицированные достигаемые уровни значимости вычисляются по формуле
-::<tex>\tilde{p}_i=\min\left(mp_i,1\right)</tex>.
+::<tex>\tilde{p}_i=\min\left(mp_i,\,1\right)</tex>.
 Контроль над <tex>\operator{FWER}</tex> обеспечивается по неравенству Буля:
 :: <tex>\operator{FWER} \:=\: \operator{P}\left(V\geq 1\right) \:\leq\: \operator{P}\left(\bigcup_{i=1}^{m_0} \left\{ \tilde{P}_i \leq \alpha \right\} \right) \:\leq\: \sum_{i=1}^{m_0}\operator{P}\left( \tilde{P}_i \leq \alpha \right) \:\leq\: \sum_{i=1}^{m_0} \alpha/m \:=\: m_0\alpha/m \:\leq\: \alpha.</tex>