Проверка качества уравнения регрессии. F-критерий Фишера

Оценка качества полученного уравнения регрессии основывается на мето-дах дисперсионного анализа.

Наблюдаемые значения результативного признака y_i можно представить в виде суммы двух составляющих ŷ_i и е_i

Величина ŷ_i=а+ b·х_i представляет собой расчетное значение переменной у в наблюдении i. Остаток е_i есть расхождение между наблюдаемым и расчетны-ми значениями переменной у, или необъясненная с помощью уравнения рег-рессии часть переменной у.

Из (2.21) следует следующее соотношение между дисперсиями наблюдае-мых значений переменной D(y), ее расчетных значений D(ŷ) и остатков D(е)

i 1

называют коэффициентом детерминации и используют для характеристики качества уравнения регрессии или соответствующей модели связи.

Соотношение (2.23) можно представить в альтернативном виде

i 1

Коэффициент детерминации R² принимает значения в диапазоне от нуля до

единицы

0 ≤R²≤ 1.

Коэффициент детерминации R² показывает, какая часть дисперсии резуль-тативного признака y объяснена уравнением регрессии. Например, значение R²= 0,56говорит о том,что соответствующее уравнение регрессии объясняет56 % дисперсии результативного признака.

Чем больше R², тем большая часть дисперсии результативного признака y объясняется уравнением регрессии и тем лучше уравнение регрессии описывает исходные данные. При отсутствии зависимости между у и x коэффициент детер-минации R² будет близок к нулю. Таким образом, коэффициент детерминации R² может применяться для оценки качества (точности) уравнения регрессии.

Возникает вопрос, при каких значениях R² уравнение регрессии следует считать статистически незначимым, что делает необоснованным его использо-вание в анализе. Ответ на этот вопрос дает F-критерий Фишера.

Введем следующие обозначения:

n k 1

где k число независимых переменных в уравнении регрессии (для парной рег-рессии k= 1), в случае нормально распределенной ошибки ε_i является F-статис-тикой Фишера (случайная величина, распределенная по закону Фишера) с чис-лом степеней свободы k₁=k,k₂=n k1.

Согласно F-критерию Фишера, выдвигается « нулевая» гипотеза H₀ о ста-тистической незначимости уравнения регрессии (т. е. о статистически незначи-мом отличии величины F от нуля). Эта гипотеза отвергается при выполнении условия F>F_крит, где F_крит определяется по таблицам F-критерия Фишера (П3,

П4) при числе степеней свободы k₁=k, k₂=n k1 и заданному уровню зна-чимости α.

Уровнем значимости (обозначаетсяα)в статистических гипотезах называ-ется вероятность отвергнуть верную гипотезу (это, так называемая, ошибка первого рода). Уровень значимости α обычно принимает значения 0,05 и 0,01, что соответствует вероятности совершения ошибки первого рода 5 % и 1 %.

Используя соотношение (2.24), величину F можно выразить через коэффи-циент детерминации R²

Например, по данным 30 наблюдений было получено уравнение регрессии y = 50,5 + 3,2x и R²= 0,60.

Необходимо проверить его значимость при уровне значимости α = 0,05. Определим величину F-статистики, учитывая, что k= 1

По таблицам F-критерия Фишера при

k₁= k = 1, k₂= n k 1 = 30 – 1 – 1 = 28иα= 0,05

находим F_крит= 4,20. Так как F= 42 >F_крит= 4,20 , то делаем вывод о статисти-ческой значимости уравнения регрессии.