Статистические методы анализа информации

Дисперсионный анализ. Дисперсионный анализ (от латинского Dispersio – рассеивание / на английском Analysis Of Variance - ANOVA) применяется для исследования влияния одной или нескольких качественных переменных (факторов) на одну зависимую количественную переменную (отклик). В основе дисперсионного анализа лежит предположение о том, что одни переменные могут рассматриваться как причины (факторы, независимые переменные), а другие как следствия (зависимые переменные). Независимые переменные называют иногда регулируемыми факторами именно потому, что в эксперименте исследователь имеет возможность варьировать ими и анализировать получающийся результат.

Основной целью дисперсионного анализа (ANOVA) является исследование значимости различия между средними с помощью сравнения (анализа) дисперсий. Разделение общей дисперсии на несколько источников, позволяет сравнить дисперсию, вызванную различием между группами, с дисперсией, вызванной внутригрупповой изменчивостью. При истинности нулевой гипотезы (о равенстве средних в нескольких группах наблюдений, выбранных из генеральной совокупности), оценка дисперсии, связанной с внутригрупповой изменчивостью, должна быть близкой к оценке межгрупповой дисперсии. Если вы просто сравниваете средние в двух выборках, дисперсионный анализ даст тот же результат, что и обычный t-критерий для независимых выборок (если сравниваются две независимые группы объектов или наблюдений) или t-критерий для зависимых выборок (если сравниваются две переменные на одном и том же множестве объектов или наблюдений).

Сущность дисперсионного анализа заключается в расчленении общей дисперсии изучаемого признака на отдельные компоненты, обусловленные влиянием конкретных факторов, и проверке гипотез о значимости влияния этих факторов на исследуемый признак. Сравнивая компоненты дисперсии, друг с другом посредством F-критерия Фишера, можно определить, какая доля общей вариативности результативного признака обусловлена действием регулируемых факторов.

Исходным материалом для дисперсионного анализа служат данные исследования трех и более выборок, которые могут быть как равными, так и неравными по численности, как связными, так и несвязными. По количеству выявляемых регулируемых факторов дисперсионный анализ может быть однофакторным (при этом изучается влияние одного фактора на результаты эксперимента), двухфакторным (при изучении влияния двух факторов) и многофакторным (позволяет оценить не только влияние каждого из факторов в отдельности, но и их взаимодействие).

Дисперсионный анализ относится к группе параметрических методов и поэтому его следует применять только тогда, когда доказано, что распределение является нормальным.

Дисперсионный анализ используют, если зависимая переменная измеряется в шкале отношений, интервалов или порядка, а влияющие переменные имеют нечисловую природу (шкала наименований).

Пример: В течение недели в трех разных местах работало несколько аптечных киосков. В дальнейшем мы можем оставить только один. Необходимо определить, существует ли статистически значимое отличие между объемами реализации препаратов в киосках. Если да, мы выберем киоск с наибольшим среднесуточным объемом реализации. Если же разница объема реализации окажется статистически незначимой, то основанием для выбора киоска должны быть другие показатели.

Ковариационный анализ часто применяют перед дисперсионным анализом, чтобы проверить гомогенность (однородность, представительность) выборки наблюдений X,Y по всем сопутствующим факторам.

Пример: Пусть у нас имеется 3 метода обучения арифметики и группа студентов. Группа разбивается случайным образом на 3 подгруппы для обучения одним из методов. В конце курса обучения студенты проходят общий тест, по результатам которого выставляются оценки. Также для каждого студента имеется одна или несколько характеристик (количественных) их общей образованности.

Требуется проверить гипотезу об одинаковой эффективности методик обучения.

Постановка задачи

Основные теоретические и прикладные проблемы ковариационного анализа относятся к линейным моделям. В частности, если анализируются n наблюдений Статистические методы анализа информации - №1 - открытая онлайн библиотека с p сопутствующими переменными Статистические методы анализа информации - №2 - открытая онлайн библиотека , k возможными типами условий эксперимента Статистические методы анализа информации - №3 - открытая онлайн библиотека , то линейная модель соответствующего ковариационного анализа задается уравнением:

Статистические методы анализа информации - №4 - открытая онлайн библиотека

где Статистические методы анализа информации - №5 - открытая онлайн библиотека , индикаторные переменные Статистические методы анализа информации - №6 - открытая онлайн библиотека равны 1, если Статистические методы анализа информации - №7 - открытая онлайн библиотека -е условие эксперимента имело место при наблюдении Статистические методы анализа информации - №8 - открытая онлайн библиотека , и равны 0 в противном случае. Коэффициенты Статистические методы анализа информации - №9 - открытая онлайн библиотека определяют эффект влияния Статистические методы анализа информации - №7 - открытая онлайн библиотека -го условия, Статистические методы анализа информации - №11 - открытая онлайн библиотека - значение сопутствующей переменной Статистические методы анализа информации - №12 - открытая онлайн библиотека , при котором получено наблюдение Статистические методы анализа информации - №8 - открытая онлайн библиотека , Статистические методы анализа информации - №14 - открытая онлайн библиотека - значения соответствующих коэффициентов регрессии Статистические методы анализа информации - №15 - открытая онлайн библиотека по Статистические методы анализа информации - №12 - открытая онлайн библиотека , Статистические методы анализа информации - №17 - открытая онлайн библиотека - независимые случайные ошибки с нулевым математическим ожиданием.

Приведённая формула задаёт линейную модель однофакторного ковариационного анализа с Статистические методы анализа информации - №18 - открытая онлайн библиотека независимыми переменными и Статистические методы анализа информации - №19 - открытая онлайн библиотека уровнями фактора. При включении в модель дополнительных факторов в правой части уравнения появятся слагаемые, отвечающие за эффекты уровней вновь введённых в модель факторов.

Основное назначение ковариационного анализа - использование в построении статистических оценок Статистические методы анализа информации - №20 - открытая онлайн библиотека ; Статистические методы анализа информации - №21 - открытая онлайн библиотека и статистических критериев для проверки различных гипотез относительно значений этих параметров. Если в модели постулировать априори Статистические методы анализа информации - №22 - открытая онлайн библиотека , то получится модель дисперсионного анализа, если же исключить влияние неколичественных факторов (положить Статистические методы анализа информации - №23 - открытая онлайн библиотека ), то получится модель регрессионного анализа.