2.6.1
Коэффициент детерминации.
Для оценки качества построенной модели
регрессии можно использовать коэффициент
детерминации
.
Коэффициент детерминации может быть
вычислен по формуле:
.
С другой стороны,
для парной линейной регрессии верно
равенство:
.
При
близости значения коэффициента
детерминации к 1 говорят, что уравнение
регрессии статистически значимо и
фактор
оказывает сильное воздействие на
результирующий признак.
При анализе модели
парной линейной регрессии по значению
коэффициента детерминации можно сделать
следующие предварительные выводы о
качестве модели:
-
Если
,
то будем считать, что использование
регрессионной модели для аппроксимации
зависимости между переменнымиистатистически необоснованно. -
Если
,
то использование регрессионной модели
возможно, но после оценивания параметров
модель подлежит дальнейшему многостороннему
статистическому анализу. -
Если
,
то будем. считать, что у нас есть основания
для использования регрессионной модели
при анализе поведения переменной.
2.6.2 Средняя ошибка аппроксимации.
Другой
показатель качества построенной модели
–– среднее относительное отклонение
расчетных значений от фактических или
средняя
ошибка аппроксимации:
.
Построенное
уравнение регрессии считается
удовлетворительным, если значение
не превышает 10% – 12% .
3. Пример.
По
21 региону страны изучается зависимость
розничной продажи телевизоров ()
от среднедушевого денежного дохода в
месяц ().
Номер региона |
Среднедушевой |
Объем |
1 |
2 |
28 |
2 |
2,4 |
21,3 |
3 |
2,1 |
21 |
4 |
2,6 |
23,3 |
5 |
1,7 |
15,8 |
6 |
2,5 |
21,9 |
7 |
2,4 |
20 |
8 |
2,6 |
22 |
9 |
2,8 |
23,9 |
10 |
2,6 |
26 |
11 |
2,6 |
24,6 |
12 |
2,5 |
21 |
13 |
2,9 |
27 |
14 |
2,6 |
21 |
15 |
2,2 |
24 |
16 |
2,6 |
24 |
17 |
3,3 |
31,9 |
18 |
3,9 |
33 |
19 |
4 |
35,4 |
20 |
3,7 |
34 |
21 |
3,4 |
31 |
Необходимо
найти зависимость, наилучшим образом
отражающую связь между переменными
и
.
Рассмотрим вопрос
применения модели линейной регрессии
в этой задаче.
Построим
поле корреляции, т.е. нанесем исходные
данные на координатную плоскость. Для
этого воспользуемся, например,
возможностями MS
Excel
2003.
Подготовим таблицу
исходных данных.
Нанесем на
координатную плоскость исходные данные:
Характер
расположения точек на графике дает нам
основание предположить, что искомая
функция регрессии линейная:
.
Для оценки коэффициентов уравнения
регрессии необходимо составить и решить
систему нормальных уравнений ( ).
По исходным данным
рассчитываем необходимые суммы:
Номер региона |
|
|
|
|
|
1 |
2 |
28 |
56 |
4 |
784 |
2 |
2,4 |
21,3 |
51,12 |
5,76 |
453,69 |
3 |
2,1 |
21 |
44,1 |
4,41 |
441 |
4 |
2,6 |
23,3 |
60,58 |
6,76 |
542,89 |
5 |
1,7 |
15,8 |
26,86 |
2,89 |
249,64 |
6 |
2,5 |
21,9 |
54,75 |
6,25 |
479,61 |
7 |
2,4 |
20 |
48 |
5,76 |
400 |
8 |
2,6 |
22 |
57,2 |
6,76 |
484 |
9 |
2,8 |
23,9 |
66,92 |
7,84 |
571,21 |
10 |
2,6 |
26 |
67,6 |
6,76 |
676 |
11 |
2,6 |
24,6 |
63,96 |
6,76 |
605,16 |
12 |
2,5 |
21 |
52,5 |
6,25 |
441 |
13 |
2,9 |
27 |
78,3 |
8,41 |
729 |
14 |
2,6 |
21 |
54,6 |
6,76 |
441 |
15 |
2,2 |
24 |
52,8 |
4,84 |
576 |
16 |
2,6 |
24 |
62,4 |
6,76 |
576 |
17 |
3,3 |
31,9 |
105,27 |
10,89 |
1017,61 |
18 |
3,9 |
33 |
128,7 |
15,21 |
1089 |
19 |
4 |
35,4 |
141,6 |
16 |
1253,16 |
20 |
3,7 |
34 |
125,8 |
13,69 |
1156 |
21 |
3,4 |
31 |
105,4 |
11,56 |
961 |
Сумма |
57,4 |
530,1 |
1504,46 |
164,32 |
13926,97 |
Составляем систему
уравнений:
Имеем систему
линейных алгебраических уравнений,
которая может быть решена, например, по
формулам Крамера. Для этого вычислим
следующие определители:
Тогда, согласно
теореме Крамера,
Получаем уравнение
регрессии:
Величина
коэффициента регрессии
означает, что увеличение среднедушевого
месячного дохода на 1 тыс. руб. приведет
к увеличение объема розничной продажи
в среднем на 7 540 телевизоров. Коэффициентв данном случае не имеет содержательной
интерпретации.
Оценим тесноту
линейной связи между переменными и
качество построенной модели в целом.
Для оценки тесноты
линейной зависимости рассчитаем
коэффициент детерминации. Для этого
необходимо провести ряд дополнительных
вычислений.
Прежде
всего, найдем выборочное
среднее
по формуле:
.
Для рассматриваемого
примера имеем:
Теперь произведем
расчет остальных вспомогательных
величин:
Номер региона |
|
|
|
|
|
|
|
1 |
2 |
28 |
19,76 |
8,24 |
67,89 |
2,76 |
7,60 |
2 |
2,4 |
21,3 |
22,75 |
-1,45 |
2,11 |
-3,94 |
15,55 |
3 |
2,1 |
21 |
20,51 |
0,49 |
0,24 |
-4,24 |
18,00 |
4 |
2,6 |
23,3 |
24,25 |
-0,95 |
0,90 |
-1,94 |
3,77 |
5 |
1,7 |
15,8 |
17,52 |
-1,72 |
2,95 |
-9,44 |
89,17 |
6 |
2,5 |
21,9 |
23,50 |
-1,60 |
2,56 |
-3,34 |
11,17 |
7 |
2,4 |
20 |
22,75 |
-2,75 |
7,57 |
-5,24 |
27,49 |
8 |
2,6 |
22 |
24,25 |
-2,25 |
5,04 |
-3,24 |
10,52 |
9 |
2,8 |
23,9 |
25,74 |
-1,84 |
3,39 |
-1,34 |
1,80 |
10 |
2,6 |
26 |
24,25 |
1,75 |
3,08 |
0,76 |
0,57 |
11 |
2,6 |
24,6 |
24,25 |
0,35 |
0,13 |
-0,64 |
0,41 |
12 |
2,5 |
21 |
23,50 |
-2,50 |
6,24 |
-4,24 |
18,00 |
13 |
2,9 |
27 |
26,49 |
0,51 |
0,26 |
1,76 |
3,09 |
14 |
2,6 |
21 |
24,25 |
-3,25 |
10,54 |
-4,24 |
18,00 |
15 |
2,2 |
24 |
21,26 |
2,74 |
7,53 |
-1,24 |
1,54 |
16 |
2,6 |
24 |
24,25 |
-0,25 |
0,06 |
-1,24 |
1,54 |
17 |
3,3 |
31,9 |
29,48 |
2,42 |
5,86 |
6,66 |
44,32 |
18 |
3,9 |
33 |
33,96 |
-0,96 |
0,93 |
7,76 |
60,17 |
19 |
4 |
35,4 |
34,71 |
0,69 |
0,47 |
10,16 |
103,17 |
20 |
3,7 |
34 |
32,47 |
1,53 |
2,34 |
8,76 |
76,69 |
21 |
3,4 |
31 |
30,23 |
0,77 |
0,60 |
5,76 |
33,14 |
Сумма |
57,4 |
530,1 |
130,68 |
545,73 |
Здесь
столбец «»
– это значения,рассчитанные с помощью построенного
уравнения регрессии, столбцы «»
и– это столбцы, так называемых, «остатков»:
разностей между исходными значениями,и рассчитанными с помощью уравнения
регрессии,
а также их квадратов, а в последних двух
столбцах – разности между исходными
значениями,
выборочным средним,
а также их квадраты.
Для
вычисления коэффициента детерминации
воспользуемся формулой ( ):
Значение
коэффициента детерминации позволяет
сделать предварительный вывод о том,
что у нас имеются основания использовать
модель линейной регрессии в данной
задаче, поскольку
.
Построим
линию регрессии на корреляционном поле,
для чего добавим на координатной
плоскости точки, соответствующие
уравнению регрессии ().
Нанесем
теперь уравнение регрессии на диаграмму,
используя специальные средства Excel.
Для этого необходимо выделить правой
кнопкой мыши исходные точки и выбрать
опцию Добавить
линию тренда.
В
открывшемся меню Параметры
линии тренда
выбрать Линейную
аппроксимацию.
Далее поставить флажок напротив полей
Показывать
уравнение на диаграмме
и Поместить
на диаграмму величину достоверности
аппроксимации .
Нажав
на ОК, получаем еще одну прямую на
диаграмме, которая совпадает с построенными
ранее точками линии регрессии:
Сплошная
черная линия на диаграмме – это линия
регрессии, рассчитанная средствами
Excel.
Линия регрессии, построенная нами ранее,
совпала с данной линией регрессии.
Нетрудно убедиться, что уравнение
регрессии и коэффициент детерминации
тоже совпадают с полученными ранее
вручную.
Найдем
теперь среднюю ошибку аппроксимации
для оценки погрешности модели. Для этого
нам потребуется вычислить еще ряд
промежуточных величин:
Номер региона |
|
|
|
|
|
1 |
2 |
28 |
19,76 |
8,24 |
0,29 |
2 |
2,4 |
21,3 |
22,75 |
-1,45 |
0,07 |
3 |
2,1 |
21 |
20,51 |
0,49 |
0,02 |
4 |
2,6 |
23,3 |
24,25 |
-0,95 |
0,04 |
5 |
1,7 |
15,8 |
17,52 |
-1,72 |
0,11 |
6 |
2,5 |
21,9 |
23,50 |
-1,60 |
0,07 |
7 |
2,4 |
20 |
22,75 |
-2,75 |
0,14 |
8 |
2,6 |
22 |
24,25 |
-2,25 |
0,10 |
9 |
2,8 |
23,9 |
25,74 |
-1,84 |
0,08 |
10 |
2,6 |
26 |
24,25 |
1,75 |
0,07 |
11 |
2,6 |
24,6 |
24,25 |
0,35 |
0,01 |
12 |
2,5 |
21 |
23,50 |
-2,50 |
0,12 |
13 |
2,9 |
27 |
26,49 |
0,51 |
0,02 |
14 |
2,6 |
21 |
24,25 |
-3,25 |
0,15 |
15 |
2,2 |
24 |
21,26 |
2,74 |
0,11 |
16 |
2,6 |
24 |
24,25 |
-0,25 |
0,01 |
17 |
3,3 |
31,9 |
29,48 |
2,42 |
0,08 |
18 |
3,9 |
33 |
33,96 |
-0,97 |
0,03 |
19 |
4 |
35,4 |
34,71 |
0,69 |
0,02 |
20 |
3,7 |
34 |
32,47 |
1,53 |
0,05 |
21 |
3,4 |
31 |
30,23 |
0,77 |
0,02 |
Здесь
столбец «»
– это значения,рассчитанные с помощью построенного
уравнения регрессии, столбец «»
– это столбец так называемых «остатков»:
разностей между исходными значениями,
и рассчитанными с помощью уравнения
регрессии,и, наконец, последний столбец «»
– это вспомогательный столбец для
вычисления элементов суммы по формуле
( ). Просуммируем теперь элементы
последнего столбца и разделим полученную
сумму на 21 – общее количество исходных
данных:
.
Переведем это
число в проценты и запишем окончательное
выражение для средней ошибки аппроксимации:
.
Итак,
средняя ошибка аппроксимации оказалась
около 8%, что говорит о небольшой
погрешности построенной модели. Данную
модель, с учетом неплохих характеристик
ее качества, вполне можно использовать
для прогноза – одной из основных целей
эконометрического анализа. Предположим,
что среднедушевой месячный доход в
одном из регионов составит 4,1 тыс. руб.
Оценим, каков будет уровень продаж
телевизоров в этом регионе согласно
построенной модели? Для этого необходимо
выбранное значение фактора
подставить в уравнение регрессии (
):
(тыс.
руб.),
т.е. при таком
уровне дохода, розничная продажа
телевизоров составит, в среднем, 35 480
телевизоров.
Соседние файлы в предмете [НЕСОРТИРОВАННОЕ]
- #
- #
- #
- #
- #
- #
- #
- #
- #
- #
- #
Рисунок 4 Результат вычисления функции ЛИНЕЙН
Получили уровнение регрессии:
Делаем вывод: С увеличением среднедушевого прожиточного минимума на 1 руб. среднедневная заработная плата возрастает в среднем на 0,92 руб.
Означает, что 52% вариации заработной платы (у) объясняется вариацией фактора х — среднедушевого прожиточного минимума, а 48% — действием других факторов, не включённых в модель.
По вычисленному коэффициенту детерминации можно рассчитать коэффициент корреляции: .
Связь оценивается как тесная.
4. С помощью среднего (общего) коэффициента эластичности определим силу влияния фактора на результат.
Для уравнения прямой средний (общий) коэффициент эластичности определим по формуле:
Средние значения найдём, выделив область ячеек со значениями х, и выберем Формулы / Автосумма / Среднее , и то же самое произведём со значениями у.
Рисунок 5 Расчёт средних значений функции и аргумент
Таким образом, при изменении среднедушевого прожиточного минимума на 1% от своего среднего значения среднедневная заработная плата изменится в среднем на 0,51%.
С помощью инструмента анализа данных Регрессия можно получить:
— результаты регрессионной статистики,
— результаты дисперсионного анализа,
— результаты доверительных интервалов,
— остатки и графики подбора линии регрессии,
— остатки и нормальную вероятность.
Порядок действий следующий:
1) проверьте доступ к Пакету анализа . В главном меню последовательно выберите: Файл/Параметры/Надстройки .
2) В раскрывающемся списке Управление выберите пункт Надстройки Excel и нажмите кнопку Перейти.
3) В окне Надстройки установите флажок Пакет анализа , а затем нажмите кнопку ОК .
Если Пакет анализа отсутствует в списке поля Доступные надстройки , нажмите кнопку Обзор , чтобы выполнить поиск.
Если выводится сообщение о том, что пакет анализа не установлен на компьютере, нажмите кнопку Да , чтобы установить его.
4) В главном меню последовательно выберите: Данные / Анализ данных / Инструменты анализа / Регрессия , а затем нажмите кнопку ОК .
5) Заполните диалоговое окно ввода данных и параметров вывода:
Входной интервал Y — диапазон, содержащий данные результативного признака;
Входной интервал X — диапазон, содержащий данные факторного признака;
Метки — флажок, который указывает, содержит ли первая строка названия столбцов или нет;
Константа — ноль — флажок, указывающий на наличие или отсутствие свободного члена в уравнении;
Выходной интервал — достаточно указать левую верхнюю ячейку будущего диапазона;
6) Новый рабочий лист — можно задать произвольное имя нового листа.
Затем нажмите кнопку ОК .
Рисунок 6 Диалоговое окно ввода параметров инструмента Регрессия
Результаты регрессионного анализа для данных задачи представлены на рисунке 7.
Рисунок 7 Результат применения инструмента регрессия
5. Оценим с помощью средней ошибки аппроксимации качество уравнений. Воспользуемся результатами регрессионного анализа представленного на Рисунке 8.
Рисунок 8 Результат применения инструмента регрессия «Вывод остатка»
Составим новую таблицу как показано на рисунке 9. В графе С рассчитаем относительную ошибку аппроксимации по формуле:
Рисунок 9 Расчёт средней ошибки аппроксимации
Средняя ошибка аппроксимации рассчитывается по формуле:
Качество построенной модели оценивается как хорошее, так как не превышает 8 — 10%.
6. Из таблицы с регрессионной статистикой (Рисунок 4) выпишем фактическое значение F-критерия Фишера:
Поскольку при 5%-ном уровне значимости, то можно сделать вывод о значимости уравнения регрессии (связь доказана).
8. Оценку статистической значимости параметров регрессии проведём с помощью t-статистики Стьюдента и путём расчёта доверительного интервала каждого из показателей.
Выдвигаем гипотезу Н 0 о статистически незначимом отличии показателей от нуля:
.
для числа степеней свободы
На рисунке 7 имеются фактические значения t-статистики:
t-критерий для коэффициента корреляции можно рассчитать двумя способами:
где — случайная ошибка коэффициента корреляции.
Данные для расчёта возьмём из таблицы на Рисунке 7.
Фактические значения t-статистики превосходят табличные значения:
Поэтому гипотеза Н 0 отклоняется, то есть параметры регрессии и коэффициент корреляции не случайно отличаются от нуля, а статистически значимы.
Доверительный интервал для параметра a определяется как
Для параметра a 95%-ные границы как показано на рисунке 7 составили:
Доверительный интервал для коэффициента регрессии определяется как
Для коэффициента регрессии b 95%-ные границы как показано на рисунке 7 составили:
Анализ верхней и нижней границ доверительных интервалов приводит к выводу о том, что с вероятностью параметры a и b, находясь в указанных границах, не принимают нулевых значений, т.е. не являются статистически незначимыми и существенно отличны от нуля.
7. Полученные оценки уравнения регрессии позволяют использовать его для прогноза. Если прогнозное значение прожиточного минимума составит:
Тогда прогнозное значение прожиточного минимума составит:
Ошибку прогноза рассчитаем по формуле:
где
Дисперсию посчитаем также с помощью ППП Excel. Для этого:
1) Активизируйте Мастер функций : в главном меню выберете Формулы / Вставить функцию .
3) Заполните диапазон, содержащий числовые данные факторного признака. Нажмите ОК .
Рисунок 10 Расчёт дисперсии
Получили значение дисперсии
Для подсчёта остаточной дисперсии на одну степень свободы воспользуемся результатами дисперсионного анализа как показано на Рисунке 7.
Доверительные интервалы прогноза индивидуальных значений у при с вероятностью 0,95 определяются выражением:
Интервал достаточно широк, прежде всего, за счёт малого объёма наблюдений. В целом выполненный прогноз среднемесячной заработной платы оказался надёжным.
Условие задачи взято из: Практикум по эконометрике: Учеб. пособие / И.И. Елисеева, С.В. Курышева, Н.М. Гордеенко и др.; Под ред. И.И. Елисеевой. — М.: Финансы и статистика, 2003. — 192 с.: ил.
Для общей оценки качества построенной эконометрической определяются такие характеристики как коэффициент детерминации, индекс корреляции, средняя относительная ошибка аппроксимации, а также проверяется значимость уравнения регрессии с помощью F -критерия Фишера. Перечисленные характеристики являются достаточно универсальными и могут применяться как для линейных, так и для нелинейных моделей, а также моделей с двумя и более факторными переменными. Определяющее значение при вычислении всех перечисленных характеристик качества играет ряд остатков ε i , который вычисляется путем вычитания из фактических (полученных по наблюдениям) значений исследуемого признака y i значений, рассчитанных по уравнению модели y рi .
показывает, какая доля изменения исследуемого признака учтена в модели. Другими словами коэффициент детерминации показывает, какая часть изменения исследуемой переменной может быть вычислена, исходя из изменений включённых в модель факторных переменных с помощью выбранного типа функции, связывающей факторные переменные и исследуемый признак в уравнении модели.
Коэффициент детерминации R 2 может принимать значения от 0 до 1. Чем ближе коэффициент детерминации R 2 к единице, тем лучше качество модели.
Индекс корреляции можно легко вычислить, зная коэффициент детерминации:
Индекс корреляции R характеризует тесноту выбранного при построении модели типа связи между учтёнными в модели факторами и исследуемой переменной. В случае линейной парной регрессии его значение по абсолютной величине совпадает с коэффициентом парной корреляции r (x, y) , который мы рассмотрели ранее, и характеризует тесноту линейной связи между x и y . Значения индекса корреляции, очевидно, также лежат в интервале от 0 до 1. Чем ближе величина R к единице, тем теснее выбранный вид функции связывает между собой факторные переменные и исследуемый признак, тем лучше качество модели.
(2.11)
выражается в процентах и характеризует точность модели. Приемлимая точность модели при решении практических задач может определяться, исходя из соображений экономической целесообразности с учётом конкретной ситуации. Широко применяется критерий, в соответствии с которым точность считается удовлетворительной, если средняя относительная погрешность меньше 15%. Если E отн.ср. меньше 5%, то говорят, что модель имеет высокую точность. Не рекомендуется применять для анализа и прогноза модели с неудовлетворительной точностью, то есть, когда E отн.ср. больше 15%.
F-критерий Фишера используется для оценки значимости уравнения регрессии. Расчётное значение F-критерия определяется из соотношения:
. (2.12)
Критическое значение F -критерия определяется по таблицам при заданном уровне значимости α и степенях свободы (можно использовать функцию FРАСПОБР в Excel). Здесь, по-прежнему, m – число факторов, учтённых в модели, n – количество наблюдений. Если расчётное значение больше критического, то уравнение модели признаётся значимым. Чем больше расчётное значение F -критерия, тем лучше качество модели.
Определим характеристики качества построенной нами линейной модели для Примера 1 . Воспользуемся данными Таблицы 2. Коэффициент детерминации :
Следовательно, в рамках линейной модели изменение объёма продаж на 90,1% объясняется изменением температуры воздуха.
.
Значение индекса корреляции в случае парной линейной модели как мы видим, действительно по модулю равно коэффициенту корреляции между соответствующими переменными (объём продаж и температура). Поскольку полученное значение достаточно близко к единице, то можно сделать вывод о наличии тесной линейной связи между исследуемой переменной (объём продаж) и факторной переменноё (температура).
Критическое значение F кр при α = 0,1; ν 1 =1; ν 2 =7-1-1=5 равно 4,06. Расчётное значение F -критерия больше табличного, следовательно, уравнение модели является значимым.
Средняя относительная ошибка аппроксимации
Построенная линейная модель парной регрессии имеет неудовлетворительную точность (>15%), и её не рекомендуется использовать для анализа и прогнозирования.
В итоге, несмотря на то, что большинство статистических характеристик удовлетворяют предъявляемым к ним критериям, линейная модель парной регрессии непригодна для прогнозирования объёма продаж в зависимости от температуры воздуха. Нелинейный характер зависимости между указанными переменными по данным наблюдений достаточно хорошо виден на Рис.1. Проведённый анализ это подтвердил.
Среди различных методов прогнозирования нельзя не выделить аппроксимацию. С её помощью можно производить приблизительные подсчеты и вычислять планируемые показатели, путем замены исходных объектов на более простые. В Экселе тоже существует возможность использования данного метода для прогнозирования и анализа. Давайте рассмотрим, как этот метод можно применить в указанной программе встроенными инструментами.
Наименование данного метода происходит от латинского слова proxima – «ближайшая» Именно приближение путем упрощения и сглаживания известных показателей, выстраивание их в тенденцию и является его основой. Но данный метод можно использовать не только для прогнозирования, но и для исследования уже имеющихся результатов. Ведь аппроксимация является, по сути, упрощением исходных данных, а упрощенный вариант исследовать легче.
Главный инструмент, с помощью которого проводится сглаживания в Excel – это построение линии тренда. Суть состоит в том, что на основе уже имеющихся показателей достраивается график функции на будущие периоды. Основное предназначение линии тренда, как не трудно догадаться, это составление прогнозов или выявление общей тенденции.
Но она может быть построена с применением одного из пяти видов аппроксимации:
- Линейной;
- Экспоненциальной;
- Логарифмической;
- Полиномиальной;
- Степенной.
Рассмотрим каждый из вариантов более подробно в отдельности.
Способ 1: линейное сглаживание
Прежде всего, давайте рассмотрим самый простой вариант аппроксимации, а именно с помощью линейной функции. На нем мы остановимся подробнее всего, так как изложим общие моменты характерные и для других способов, а именно построение графика и некоторые другие нюансы, на которых при рассмотрении последующих вариантов уже останавливаться не будем.
Прежде всего, построим график, на основании которого будем проводить процедуру сглаживания. Для построения графика возьмем таблицу, в которой помесячно указана себестоимость единицы продукции, производимой предприятием, и соответствующая прибыль в данном периоде. Графическая функция, которую мы построим, будет отображать зависимость увеличения прибыли от уменьшения себестоимости продукции.
Сглаживание, которое используется в данном случае, описывается следующей формулой:
В конкретно нашем случае формула принимает такой вид:
Величина достоверности аппроксимации у нас равна 0,9418 , что является довольно приемлемым итогом, характеризующим сглаживание, как достоверное.
Способ 2: экспоненциальная аппроксимация
Теперь давайте рассмотрим экспоненциальный тип аппроксимации в Эксель.
Общий вид функции сглаживания при этом такой:
где e – это основание натурального логарифма.
В конкретно нашем случае формула приняла следующую форму:
Способ 3: логарифмическое сглаживание
Теперь настала очередь рассмотреть метод логарифмической аппроксимации.
В общем виде формула сглаживания выглядит так:
где ln – это величина натурального логарифма. Отсюда и наименование метода.
В нашем случае формула принимает следующий вид:
Способ 4: полиномиальное сглаживание
Настал черед рассмотреть метод полиномиального сглаживания.
Формула, которая описывает данный тип сглаживания, приняла следующий вид:
Способ 5: степенное сглаживание
В завершении рассмотрим метод степенной аппроксимации в Excel.
Данный способ эффективно используется в случаях интенсивного изменения данных функции. Важно учесть, что этот вариант применим только при условии, что функция и аргумент не принимают отрицательных или нулевых значений.
Общая формула, описывающая данный метод имеет такой вид:
В конкретно нашем случае она выглядит так:
Как видим, при использовании конкретных данных, которые мы применяли для примера, наибольший уровень достоверности показал метод полиномиальной аппроксимации с полиномом в шестой степени (0,9844 ), наименьший уровень достоверности у линейного метода (0,9418 ). Но это совсем не значит, что такая же тенденция будет при использовании других примеров. Нет, уровень эффективности у приведенных выше методов может значительно отличаться, в зависимости от конкретного вида функции, для которой будет строиться линия тренда. Поэтому, если для этой функции выбранный метод наиболее эффективен, то это совсем не означает, что он также будет оптимальным и в другой ситуации.
Если вы пока не можете сразу определить, основываясь на вышеприведенных рекомендациях, какой вид аппроксимации подойдет конкретно в вашем случае, то есть смысл попробовать все методы. После построения линии тренда и просмотра её уровня достоверности можно будет выбрать оптимальный вариант.
Контрольная работа: Парная регрессия
Смысл регрессионного анализа – построение функциональных зависимостей между двумя группами переменных величин Х1 , Х2 , … Хр и Y. При этом речь идет о влиянии переменных Х (это будут аргументы функций) на значения переменной Y (значение функции). Переменные Х мы будем называть факторами, а Y – откликом.
Наиболее простой случай – установление зависимости одного отклика y от одного фактора х. Такой случай называется парной (простой) регрессией.
Парная регрессия – уравнение связи двух переменных у иx :
,
где у – зависимая переменная (результативный признак);
х – независимая, объясняющая переменная (признак-фактор).
Различают линейные и нелинейные регрессии.
Линейная регрессия:.
Нелинейные регрессии делятся на два класса: регрессии, нелинейные относительно включенных в анализ объясняющих переменных, но линейные по оцениваемым параметрам, и регрессии, нелинейные по оцениваемым параметрам.
Регрессии, нелинейные по объясняющим переменным:
• полиномы разных степеней
•равносторонняя гипербола
Регрессии, нелинейные по оцениваемым параметрам:
• степенная ;
• показательная
• экспоненциальная
Построение уравнения регрессии сводится к оценке ее параметров. Для оценки параметров регрессий, линейных по параметрам, используют метод наименьших квадратов (МНК). МНК позволяет получить такие оценки параметров, при которых сумма квадратов отклонений фактических значений результативного признака у от теоретических минимальна, т.е.
Для линейных и нелинейных уравнений, приводимых к линейным, решается следующая система относительно а и b :
Можно воспользоваться готовыми формулами, которые вытекают из этой системы:
Тесноту связи изучаемых явлений оценивает линейный коэффициент парной корреляции для линейной регрессии
и индекс корреляции — для нелинейной регрессии ():
Оценку качества построенной модели даст коэффициент (индекс) детерминации, а также средняя ошибка аппроксимации.
Средняя ошибка аппроксимации – среднее отклонение расчетных значений от фактических:
Допустимый предел значений – не более 8 – 10%.
Средний коэффициент эластичности показывает, на сколько процентов в среднем по совокупности изменится результат у от своей средней величины при изменении фактора x на 1% от своего среднего значения:
Задача дисперсионного анализа состоит в анализе дисперсии зависимой переменной:
где – общая сумма квадратов отклонений;
– сумма квадратов отклонений, обусловленная регрессией («объясненная» или «факторная»);
–остаточная сумма квадратов отклонений.
Долю дисперсии, объясняемую регрессией, в общей дисперсии результативного признака у характеризует коэффициент (индекс) детерминации R 2 :
Коэффициент детерминации – квадрат коэффициента или индекса корреляции.
F -тест – оценивание качества уравнения регрессии – состоит в проверке гипотезы Но о статистической незначимости уравнения регрессии и показателя тесноты связи. Для этого выполняется сравнение фактического Fфакт и критического (табличного) Fтабл значений F -критерия Фишера. F факт определяется из соотношения значений факторной и остаточной дисперсий, рассчитанных на одну степень свободы:
п – число единиц совокупности;
т – число параметров при переменных х.
Fтабл – это максимально возможное значение критерия под влиянием случайных факторов при данных степенях свободы и уровне значимости а. Уровень значимости а – вероятность отвергнуть правильную гипотезу при условии, что она верна. Обычно а принимается равной 0,05 или 0,01.
Если Fтабл Fфакт , то гипотеза Н0 не отклоняется и признается статистическая незначимость, ненадежность уравнения регрессии.
Для оценки статистической значимости коэффициентов регрессии и корреляции рассчитываются t -критерий Стьюдента и доверительные интервалы каждого из показателей. Выдвигается гипотеза Н0 о случайной природе показателей, т.е. о незначимом их отличии от нуля. Оценка значимости коэффициентов регрессии и корреляции с помощью f-критерия Стьюдента проводится путем сопоставления их значений с величиной случайной ошибки:
Случайные ошибки параметров линейной регрессии и коэффициента корреляции определяются по формулам:
Сравнивая фактическое и критическое (табличное) значения t-статистики – tтабл и tфакт – принимаем или отвергаем гипотезу Hо .
Связь между F-критерием Фишера и t-статистикой Стьюдента выражается равенством
Если tтабл tфакт , то гипотеза Но не отклоняется и признается случайная природа формирования a , b или .
Для расчета доверительного интервала определяем предельную ошибку ∆ для каждого показателя:
Формулы для расчета доверительных интервалов имеют следующий вид:
Если в границы доверительного интервала попадает ноль, т.е. нижняя граница отрицательна, а верхняя положительна, то оцениваемый параметр принимается нулевым, так как он не может одновременно принимать и положительное, и отрицательное значения.
Прогнозное значение определяется путем подстановки в уравнение регрессии соответствующего (прогнозного) значения . Вычисляется средняя стандартная ошибка прогноза :
где
и строится доверительный интервал прогноза:
где
По 22 регионам страны изучается зависимость розничной продажи телевизоров, y от среднедушевых денежных доходов в месяц, x (табл. 1):
Название: Парная регрессия Раздел: Рефераты по математике Тип: контрольная работа Добавлен 13:41:57 15 апреля 2011 Похожие работы Просмотров: 3780 Комментариев: 22 Оценило: 4 человек Средний балл: 4.5 Оценка: неизвестно Скачать |
№ региона | X | Y |
1,000 | 2,800 | 28,000 |
2,000 | 2,400 | 21,300 |
3,000 | 2,100 | 21,000 |
4,000 | 2,600 | 23,300 |
5,000 | 1,700 | 15,800 |
6,000 | 2,500 | 21,900 |
7,000 | 2,400 | 20,000 |
8,000 | 2,600 | 22,000 |
9,000 | 2,800 | 23,900 |
10,000 | 2,600 | 26,000 |
11,000 | 2,600 | 24,600 |
12,000 | 2,500 | 21,000 |
13,000 | 2,900 | 27,000 |
14,000 | 2,600 | 21,000 |
15,000 | 2,200 | 24,000 |
16,000 | 2,600 | 34,000 |
17,000 | 3,300 | 31,900 |
19,000 | 3,900 | 33,000 |
20,000 | 4,600 | 35,400 |
21,000 | 3,700 | 34,000 |
22,000 | 3,400 | 31,000 |
1. Постройте поле корреляции и сформулируйте гипотезу о форме связи.
2. Рассчитайте параметры уравнений линейной, степенной, экспоненциальной, полулогарифмической, обратной, гиперболической парной регрессий.
3. Оцените тесноту связи с помощью показателей корреляции и детерминации.
4. С помощью среднего (общего) коэффициента эластичности дайте сравнительную оценку силы связи фактора с результатом.
5. Качество уравнений оцените с помощью средней ошибки аппроксимации.
6. С помощью F-критерия Фишера определите статистическую надежность результатов регрессионного моделирования. Выберите лучшее уравнение регрессии и дайте его обоснование.
7. Рассчитайте прогнозное значение результата по линейному уравнению регрессии, если прогнозное значение фактора увеличится на 7% от его среднего уровня. Определите доверительный интервал прогноза для уровня значимости α=0,05.
8. Оцените полученные результаты, выводы оформите в аналитической записке.
1. Поле корреляции для:
· Линейной регрессии y=a+b*x:
Гипотеза о форме связи: чем больше размер среднедушевого денежного дохода в месяц (факторный признак), тем больше при прочих равных условиях розничная продажа телевизоров (результативный признак). В данной модели параметр b называется коэффициентом регрессии и показывает, насколько в среднем отклоняется величина результативного признака у при отклонении величины факторного признаках на одну единицу.
· Степенной регрессии :
Гипотеза о форме связи : степенная функция имеет вид Y=ax b .
Параметр b степенного уравнения называется показателем эластичности и указывает, на сколько процентов изменится у при возрастании х на 1%. При х = 1 a = Y.
· Экспоненциальная регрессия :
· Равносторонняя гипербола :
Гипотеза о форме связи: В ряде случаев обратная связь между факторным и результативным признаками может быть выражена уравнением гиперболы: Y=a+b/x.
· Обратная гипербола :
· Полулогарифмическая регрессия :
2. Рассчитайте параметры уравнений линейной, степенной, экспоненциальной, полулогарифмической, обратной, гиперболической парной регрессий.
· Рассчитаем параметры уравнений линейной парной регрессии. Для расчета параметров a и b линейной регрессии y=a+b*x решаем систему нормальных уравнений относительно a и b:
По исходным данным рассчитываем ∑y, ∑x, ∑yx, ∑x 2 , ∑y 2 (табл. 2):
№ региона | X | Y | XY | X^2 | Y^2 | Y^cp | Y-Y^cp | Ai |
1 | 2,800 | 28,000 | 78,400 | 7,840 | 784,000 | 25,719 | 2,281 | 0,081 |
2 | 2,400 | 21,300 | 51,120 | 5,760 | 453,690 | 22,870 | -1,570 | 0,074 |
3 | 2,100 | 21,000 | 44,100 | 4,410 | 441,000 | 20,734 | 0,266 | 0,013 |
4 | 2,600 | 23,300 | 60,580 | 6,760 | 542,890 | 24,295 | -0,995 | 0,043 |
5 | 1,700 | 15,800 | 26,860 | 2,890 | 249,640 | 17,885 | -2,085 | 0,132 |
6 | 2,500 | 21,900 | 54,750 | 6,250 | 479,610 | 23,582 | -1,682 | 0,077 |
7 | 2,400 | 20,000 | 48,000 | 5,760 | 400,000 | 22,870 | -2,870 | 0,144 |
8 | 2,600 | 22,000 | 57,200 | 6,760 | 484,000 | 24,295 | -2,295 | 0,104 |
9 | 2,800 | 23,900 | 66,920 | 7,840 | 571,210 | 25,719 | -1,819 | 0,076 |
10 | 2,600 | 26,000 | 67,600 | 6,760 | 676,000 | 24,295 | 1,705 | 0,066 |
11 | 2,600 | 24,600 | 63,960 | 6,760 | 605,160 | 24,295 | 0,305 | 0,012 |
12 | 2,500 | 21,000 | 52,500 | 6,250 | 441,000 | 23,582 | -2,582 | 0,123 |
13 | 2,900 | 27,000 | 78,300 | 8,410 | 729,000 | 26,431 | 0,569 | 0,021 |
14 | 2,600 | 21,000 | 54,600 | 6,760 | 441,000 | 24,295 | -3,295 | 0,157 |
15 | 2,200 | 24,000 | 52,800 | 4,840 | 576,000 | 21,446 | 2,554 | 0,106 |
16 | 2,600 | 34,000 | 88,400 | 6,760 | 1156,000 | 24,295 | 9,705 | 0,285 |
17 | 3,300 | 31,900 | 105,270 | 10,890 | 1017,610 | 29,280 | 2,620 | 0,082 |
19 | 3,900 | 33,000 | 128,700 | 15,210 | 1089,000 | 33,553 | -0,553 | 0,017 |
20 | 4,600 | 35,400 | 162,840 | 21,160 | 1253,160 | 38,539 | -3,139 | 0,089 |
21 | 3,700 | 34,000 | 125,800 | 13,690 | 1156,000 | 32,129 | 1,871 | 0,055 |
22 | 3,400 | 31,000 | 105,400 | 11,560 | 961,000 | 29,992 | 1,008 | 0,033 |
Итого | 58,800 | 540,100 | 1574,100 | 173,320 | 14506,970 | 540,100 | 0,000 | |
сред значение | 2,800 | 25,719 | 74,957 | 8,253 | 690,808 | 0,085 | ||
станд. откл | 0,643 | 5,417 |
Система нормальных уравнений составит:
Ур-ие регрессии: = 5,777+7,122∙x. Данное уравнение показывает, что с увеличением среднедушевого денежного дохода в месяц на 1 тыс. руб. доля розничных продаж телевизоров повышается в среднем на 7,12%.
· Рассчитаем параметры уравнений степенной парной регрессии. Построению степенной модели предшествует процедура линеаризации переменных. В примере линеаризация производится путем логарифмирования обеих частей уравнения:
где
Для расчетов используем данные табл. 3:
№ рег | X | Y | XY | X^2 | Y^2 | Yp^cp | y^cp |
1 | 1,030 | 3,332 | 3,431 | 1,060 | 11,104 | 3,245 | 25,67072 |
2 | 0,875 | 3,059 | 2,678 | 0,766 | 9,356 | 3,116 | 22,56102 |
3 | 0,742 | 3,045 | 2,259 | 0,550 | 9,269 | 3,004 | 20,17348 |
4 | 0,956 | 3,148 | 3,008 | 0,913 | 9,913 | 3,183 | 24,12559 |
5 | 0,531 | 2,760 | 1,465 | 0,282 | 7,618 | 2,827 | 16,90081 |
6 | 0,916 | 3,086 | 2,828 | 0,840 | 9,526 | 3,150 | 23,34585 |
7 | 0,875 | 2,996 | 2,623 | 0,766 | 8,974 | 3,116 | 22,56102 |
8 | 0,956 | 3,091 | 2,954 | 0,913 | 9,555 | 3,183 | 24,12559 |
9 | 1,030 | 3,174 | 3,268 | 1,060 | 10,074 | 3,245 | 25,67072 |
10 | 0,956 | 3,258 | 3,113 | 0,913 | 10,615 | 3,183 | 24,12559 |
11 | 0,956 | 3,203 | 3,060 | 0,913 | 10,258 | 3,183 | 24,12559 |
12 | 0,916 | 3,045 | 2,790 | 0,840 | 9,269 | 3,150 | 23,34585 |
13 | 1,065 | 3,296 | 3,509 | 1,134 | 10,863 | 3,275 | 26,4365 |
14 | 0,956 | 3,045 | 2,909 | 0,913 | 9,269 | 3,183 | 24,12559 |
15 | 0,788 | 3,178 | 2,506 | 0,622 | 10,100 | 3,043 | 20,97512 |
16 | 0,956 | 3,526 | 3,369 | 0,913 | 12,435 | 3,183 | 24,12559 |
17 | 1,194 | 3,463 | 4,134 | 1,425 | 11,990 | 3,383 | 29,4585 |
19 | 1,361 | 3,497 | 4,759 | 1,852 | 12,226 | 3,523 | 33,88317 |
20 | 1,526 | 3,567 | 5,443 | 2,329 | 12,721 | 3,661 | 38,90802 |
21 | 1,308 | 3,526 | 4,614 | 1,712 | 12,435 | 3,479 | 32,42145 |
22 | 1,224 | 3,434 | 4,202 | 1,498 | 11,792 | 3,408 | 30,20445 |
итого | 21,115 | 67,727 | 68,921 | 22,214 | 219,361 | 67,727 | 537,270 |
сред зн | 1,005 | 3,225 | 3,282 | 1,058 | 10,446 | 3,225 | |
стан откл | 0,216 | 0,211 |
Рассчитаем С и b:
Получим линейное уравнение: . Выполнив его потенцирование, получим:
Подставляя в данное уравнение фактические значения х, получаем теоретические значения результата y .
· Рассчитаем параметры уравнений экспоненциальной парной регрессии. Построению экспоненциальной модели предшествует процедура линеаризации переменных. В примере линеаризация производится путем логарифмирования обеих частей уравнения:
где
Для расчетов используем данные табл. 4:
№ региона | X | Y | XY | X^2 | Y^2 | Yp | y^cp |
1 | 2,800 | 3,332 | 9,330 | 7,840 | 11,104 | 3,225 | 25,156 |
2 | 2,400 | 3,059 | 7,341 | 5,760 | 9,356 | 3,116 | 22,552 |
3 | 2,100 | 3,045 | 6,393 | 4,410 | 9,269 | 3,034 | 20,777 |
4 | 2,600 | 3,148 | 8,186 | 6,760 | 9,913 | 3,170 | 23,818 |
5 | 1,700 | 2,760 | 4,692 | 2,890 | 7,618 | 2,925 | 18,625 |
6 | 2,500 | 3,086 | 7,716 | 6,250 | 9,526 | 3,143 | 23,176 |
7 | 2,400 | 2,996 | 7,190 | 5,760 | 8,974 | 3,116 | 22,552 |
8 | 2,600 | 3,091 | 8,037 | 6,760 | 9,555 | 3,170 | 23,818 |
9 | 2,800 | 3,174 | 8,887 | 7,840 | 10,074 | 3,225 | 25,156 |
10 | 2,600 | 3,258 | 8,471 | 6,760 | 10,615 | 3,170 | 23,818 |
11 | 2,600 | 3,203 | 8,327 | 6,760 | 10,258 | 3,170 | 23,818 |
12 | 2,500 | 3,045 | 7,611 | 6,250 | 9,269 | 3,143 | 23,176 |
13 | 2,900 | 3,296 | 9,558 | 8,410 | 10,863 | 3,252 | 25,853 |
14 | 2,600 | 3,045 | 7,916 | 6,760 | 9,269 | 3,170 | 23,818 |
15 | 2,200 | 3,178 | 6,992 | 4,840 | 10,100 | 3,061 | 21,352 |
16 | 2,600 | 3,526 | 9,169 | 6,760 | 12,435 | 3,170 | 23,818 |
17 | 3,300 | 3,463 | 11,427 | 10,890 | 11,990 | 3,362 | 28,839 |
19 | 3,900 | 3,497 | 13,636 | 15,210 | 12,226 | 3,526 | 33,978 |
20 | 4,600 | 3,567 | 16,407 | 21,160 | 12,721 | 3,717 | 41,140 |
21 | 3,700 | 3,526 | 13,048 | 13,690 | 12,435 | 3,471 | 32,170 |
22 | 3,400 | 3,434 | 11,676 | 11,560 | 11,792 | 3,389 | 29,638 |
Итого | 58,800 | 67,727 | 192,008 | 173,320 | 219,361 | 67,727 | 537,053 |
сред зн | 2,800 | 3,225 | 9,143 | 8,253 | 10,446 | ||
стан откл | 0,643 | 0,211 |
Рассчитаем С и b:
Получим линейное уравнение: . Выполнив его потенцирование, получим:
Для расчета теоретических значений y подставим в уравнение значения x .
· Рассчитаем параметры уравнений полулогарифмической парной регрессии. Построению полулогарифмической модели предшествует процедура линеаризации переменных. В примере линеаризация производится путем замены:
где
Для расчетов используем данные табл. 5:
№ региона | X | Y | XY | X^2 | Y^2 | y^cp |
1 | 1,030 | 28,000 | 28,829 | 1,060 | 784,000 | 26,238 |
2 | 0,875 | 21,300 | 18,647 | 0,766 | 453,690 | 22,928 |
3 | 0,742 | 21,000 | 15,581 | 0,550 | 441,000 | 20,062 |
4 | 0,956 | 23,300 | 22,263 | 0,913 | 542,890 | 24,647 |
5 | 0,531 | 15,800 | 8,384 | 0,282 | 249,640 | 15,525 |
6 | 0,916 | 21,900 | 20,067 | 0,840 | 479,610 | 23,805 |
7 | 0,875 | 20,000 | 17,509 | 0,766 | 400,000 | 22,928 |
8 | 0,956 | 22,000 | 21,021 | 0,913 | 484,000 | 24,647 |
9 | 1,030 | 23,900 | 24,608 | 1,060 | 571,210 | 26,238 |
10 | 0,956 | 26,000 | 24,843 | 0,913 | 676,000 | 24,647 |
11 | 0,956 | 24,600 | 23,506 | 0,913 | 605,160 | 24,647 |
12 | 0,916 | 21,000 | 19,242 | 0,840 | 441,000 | 23,805 |
13 | 1,065 | 27,000 | 28,747 | 1,134 | 729,000 | 26,991 |
14 | 0,956 | 21,000 | 20,066 | 0,913 | 441,000 | 24,647 |
15 | 0,788 | 24,000 | 18,923 | 0,622 | 576,000 | 21,060 |
16 | 0,956 | 34,000 | 32,487 | 0,913 | 1156,000 | 24,647 |
17 | 1,194 | 31,900 | 38,086 | 1,425 | 1017,610 | 29,765 |
19 | 1,361 | 33,000 | 44,912 | 1,852 | 1089,000 | 33,351 |
20 | 1,526 | 35,400 | 54,022 | 2,329 | 1253,160 | 36,895 |
21 | 1,308 | 34,000 | 44,483 | 1,712 | 1156,000 | 32,221 |
22 | 1,224 | 31,000 | 37,937 | 1,498 | 961,000 | 30,406 |
Итого | 21,115 | 540,100 | 564,166 | 22,214 | 14506,970 | 540,100 |
сред зн | 1,005 | 25,719 | 26,865 | 1,058 | 690,808 | |
стан откл | 0,216 | 5,417 |
Рассчитаем a и b:
Получим линейное уравнение: .
· Рассчитаем параметры уравнений обратной парной регрессии. Для оценки параметров приведем обратную модель к линейному виду, заменив , тогда
Для расчетов используем данные табл. 6:
№ региона | X | Y | XY | X^2 | Y^2 | Y^cp |
1 | 2,800 | 0,036 | 0,100 | 7,840 | 0,001 | 24,605 |
2 | 2,400 | 0,047 | 0,113 | 5,760 | 0,002 | 22,230 |
3 | 2,100 | 0,048 | 0,100 | 4,410 | 0,002 | 20,729 |
4 | 2,600 | 0,043 | 0,112 | 6,760 | 0,002 | 23,357 |
5 | 1,700 | 0,063 | 0,108 | 2,890 | 0,004 | 19,017 |
6 | 2,500 | 0,046 | 0,114 | 6,250 | 0,002 | 22,780 |
7 | 2,400 | 0,050 | 0,120 | 5,760 | 0,003 | 22,230 |
8 | 2,600 | 0,045 | 0,118 | 6,760 | 0,002 | 23,357 |
9 | 2,800 | 0,042 | 0,117 | 7,840 | 0,002 | 24,605 |
10 | 2,600 | 0,038 | 0,100 | 6,760 | 0,001 | 23,357 |
11 | 2,600 | 0,041 | 0,106 | 6,760 | 0,002 | 23,357 |
12 | 2,500 | 0,048 | 0,119 | 6,250 | 0,002 | 22,780 |
13 | 2,900 | 0,037 | 0,107 | 8,410 | 0,001 | 25,280 |
14 | 2,600 | 0,048 | 0,124 | 6,760 | 0,002 | 23,357 |
15 | 2,200 | 0,042 | 0,092 | 4,840 | 0,002 | 21,206 |
16 | 2,600 | 0,029 | 0,076 | 6,760 | 0,001 | 23,357 |
17 | 3,300 | 0,031 | 0,103 | 10,890 | 0,001 | 28,398 |
19 | 3,900 | 0,030 | 0,118 | 15,210 | 0,001 | 34,844 |
20 | 4,600 | 0,028 | 0,130 | 21,160 | 0,001 | 47,393 |
21 | 3,700 | 0,029 | 0,109 | 13,690 | 0,001 | 32,393 |
22 | 3,400 | 0,032 | 0,110 | 11,560 | 0,001 | 29,301 |
Итого | 58,800 | 0,853 | 2,296 | 173,320 | 0,036 | 537,933 |
сред знач | 2,800 | 0,041 | 0,109 | 8,253 | 0,002 | |
стан отклон | 0,643 | 0,009 |
Рассчитаем a и b:
Получим линейное уравнение: . Выполнив его потенцирование, получим:
Для расчета теоретических значений y подставим в уравнение значения x .
· Рассчитаем параметры уравнений равносторонней гиперболы парной регрессии. Для оценки параметров приведем модель равносторонней гиперболы к линейному виду, заменив , тогда
Для расчетов используем данные табл. 7:
№ региона | X=1/z | Y | XY | X^2 | Y^2 | Y^cp |
1 | 0,357 | 28,000 | 10,000 | 0,128 | 784,000 | 26,715 |
2 | 0,417 | 21,300 | 8,875 | 0,174 | 453,690 | 23,259 |
3 | 0,476 | 21,000 | 10,000 | 0,227 | 441,000 | 19,804 |
4 | 0,385 | 23,300 | 8,962 | 0,148 | 542,890 | 25,120 |
5 | 0,588 | 15,800 | 9,294 | 0,346 | 249,640 | 13,298 |
6 | 0,400 | 21,900 | 8,760 | 0,160 | 479,610 | 24,227 |
7 | 0,417 | 20,000 | 8,333 | 0,174 | 400,000 | 23,259 |
8 | 0,385 | 22,000 | 8,462 | 0,148 | 484,000 | 25,120 |
9 | 0,357 | 23,900 | 8,536 | 0,128 | 571,210 | 26,715 |
10 | 0,385 | 26,000 | 10,000 | 0,148 | 676,000 | 25,120 |
11 | 0,385 | 24,600 | 9,462 | 0,148 | 605,160 | 25,120 |
12 | 0,400 | 21,000 | 8,400 | 0,160 | 441,000 | 24,227 |
13 | 0,345 | 27,000 | 9,310 | 0,119 | 729,000 | 27,430 |
14 | 0,385 | 21,000 | 8,077 | 0,148 | 441,000 | 25,120 |
15 | 0,455 | 24,000 | 10,909 | 0,207 | 576,000 | 21,060 |
16 | 0,385 | 34,000 | 13,077 | 0,148 | 1156,000 | 25,120 |
17 | 0,303 | 31,900 | 9,667 | 0,092 | 1017,610 | 29,857 |
19 | 0,256 | 33,000 | 8,462 | 0,066 | 1089,000 | 32,564 |
20 | 0,217 | 35,400 | 7,696 | 0,047 | 1253,160 | 34,829 |
21 | 0,270 | 34,000 | 9,189 | 0,073 | 1156,000 | 31,759 |
22 | 0,294 | 31,000 | 9,118 | 0,087 | 961,000 | 30,374 |
Итого | 7,860 | 540,100 | 194,587 | 3,073 | 14506,970 | 540,100 |
сред знач | 0,374 | 25,719 | 9,266 | 0,146 | 1318,815 | |
стан отклон | 0,079 | 25,639 |
Рассчитаем a и b:
Получим линейное уравнение: . Получим уравнение регрессии: .
3. Оценка тесноты связи с помощью показателей корреляции и детерминации :
· Линейная модель. Тесноту линейной связи оценит коэффициент корреляции. Был получен следующий коэффициент корреляции rxy =b=7,122*, что говорит о прямой сильной связи фактора и результата. Коэффициент детерминации r²xy =(0,845)²=0,715. Это означает, что 71,5% вариации результативного признака (розничнаяпродажа телевизоров, у) объясняется вариацией фактора х – среднедушевой денежный доход в месяц.
· Степенная модель. Тесноту нелинейной связи оценит индекс корреляции. Был получен следующий индекс корреляции =, что говорит о очень сильной тесной связи, но немного больше чем в линейной модели. Коэффициент детерминации r²xy =0,7175. Это означает, что 71,75% вариации результативного признака (розничнаяпродажа телевизоров, у) объясняется вариацией фактора х – среднедушевой денежный доход в месяц.
· Экспоненциальная модель. Был получен следующий индекс корреляции ρxy =0,8124, что говорит о том, что связь прямая и очень сильная, но немного слабее, чем в линейной и степенной моделях. Коэффициент детерминации r²xy =0,66. Это означает, что 66% вариации результативного признака (розничнаяпродажа телевизоров, у) объясняется вариацией фактора х – среднедушевой денежный доход в месяц.
· Полулогарифмическая модель. Был получен следующий индекс корреляции ρxy =0,8578, что говорит о том, что связь прямая и очень сильная, но немного больше чем в предыдущих моделях. Коэффициент детерминации r²xy =0,7358. Это означает, что 73,58% вариации результативного признака (розничнаяпродажа телевизоров, у) объясняется вариацией фактора х – среднедушевой денежный доход в месяц.
· Гиперболическая модель. Был получен следующий индекс корреляции ρxy =0,8448 и коэффициент корреляции rxy =-0,1784 что говорит о том, что связь обратная очень сильная. Коэффициент детерминации r²xy =0,7358. Это означает, что 73,5% вариации результативного признака (розничнаяпродажа телевизоров, у) объясняется вариацией фактора х – среднедушевой денежный доход в месяц.
· Обратная модель. Был получен следующий индекс корреляции ρxy =0,8114 и коэффициент корреляции rxy =-0,8120, что говорит о том, что связь обратная очень сильная. Коэффициент детерминации r²xy =0,6584. Это означает, что 65,84% вариации результативного признака (розничнаяпродажа телевизоров, у) объясняется вариацией фактора х – среднедушевой денежный доход в месяц.
Вывод: по полулогарифмическому уравнению получена наибольшая оценка тесноты связи: ρxy =0,8578 (по сравнению с линейной, степенной, экспоненциальной, гиперболической, обратной регрессиями).
4. С помощью среднего (общего) коэффициента эластичности дайте сравнительную оценку силы связи фактора с результатом.
Рассчитаем коэффициент эластичности для линейной модели:
· Для уравнения прямой:y = 5,777+7,122∙x
· Для уравнениястепенноймодели :
· Для уравненияэкспоненциальноймодели :
Для уравненияполулогарифмическоймодели :
· Для уравнения обратной гиперболической модели :
· Для уравнения равносторонней гиперболической модели :
Сравнивая значения , характеризуем оценку силы связи фактора с результатом:
·
·
·
·
·
·
Известно, что коэффициент эластичности показывает связь между фактором и результатом, т.е. на сколько% изменится результат y от своей средней величины при изменении фактора х на 1% от своего среднего значения. В данном примере получилось, что самая большая сила связи между фактором и результатом в полулогарифмической модели, слабая сила связи в обратной гиперболической модели.
5. Оценка качества уравнений с помощью средней ошибки аппроксимации.
Подставляя в уравнение регрессии фактические значения х, определим теоретические (расчетные) значения . Найдем величину средней ошибки аппроксимации :
В среднем расчетные значения отклоняются от фактических на:
· Линейная регрессия. =*100%= 8,5%, что говорит о повышенной ошибке аппроксимации, но в допустимых пределах.
Качество построенной модели оценивается как хорошее, так как не превышает 8 -10%.
· Степенная регрессия. =*100%= 8,2%, что говорит о повышенной ошибке аппроксимации, но в допустимых пределах.
Качество построенной модели оценивается как хорошее, так как не превышает 8 -10%.
· Экспоненциальная регрессия. =*100%= 9%, что говорит о повышенной ошибке аппроксимации, но в допустимых пределах.
Качество построенной модели оценивается как хорошее, так как не превышает 8 -10%.
· Полулогарифмическая регрессия. =*100%= 7,9 что говорит о повышенной ошибке аппроксимации, но в допустимых пределах.
Качество построенной модели оценивается как хорошее, так как не превышает 8 -10%.
· Гиперболическая регрессия. =*100%= 9,3 что говорит о повышенной ошибке аппроксимации, но в допустимых пределах.
Качество построенной модели оценивается как хорошее, так как не превышает 8 -10%.
· Обратная регрессия. =*100%= 9,9 3 что говорит о повышенной ошибке аппроксимации, но в допустимых пределах.
Качество построенной модели оценивается как хорошее, так как не превышает 8 -10%.
6. Рассчитаем F-критерий:
· Линейная регрессия. = *19= 47,579
http://welom.ru/srednyaya-oshibka-approksimacii-v-excel-ocenka-kachestva-uravneniya/
http://www.bestreferat.ru/referat-268496.html
Здравствуйте на этой странице я собрала теорию и практику с примерами решения задач по предмету эконометрика с решением по каждой теме, чтобы вы смогли освежить знания!
Если что-то непонятно — вы всегда можете написать мне в WhatsApp и я вам помогу!
Эконометрика
Эконометрика — это наука, изучающая конкретные количественные и качественные взаимосвязи экономических объектов и процессов с помощью математических и статистических методов и моделей.
Эконометрика — эффективный инструмент научного анализа и моделирования в профессиональной деятельности экономиста, менеджера и инженера
Парная регрессия и корреляция
Парная регрессия — уравнение связи двух переменных и :
где — зависимая переменная (результативный признак);
— независимая, объясняющая переменная (признак-фактор).
Различают линейные и нелинейные регрессии.
Линейная регрессия :
Нелинейные регрессии делятся на два класса: регрессии, нелинейные относительно включенных в анализ объясняющих переменных, но линейные по оцениваемым параметрам, и регрессии, нелинейные по оцениваемым параметрам.
Возможно эта страница вам будет полезна:
Регрессии, нелинейные по объясняющим переменным:
• полиномы разных степеней
• равносторонняя гипербола
Регрессии, нелинейные по оцениваемым параметрам’.
• степенная
• показательная
• экспоненциальная
Построение уравнения регрессии сводится к оценке ее параметров. Для оценки параметров регрессий, линейных по параметрам, используют метод наименьших квадратов (МНК). МНК позволяет получить такие оценки параметров, при которых сумма квадратов отклонений фактических значений результативного признака от теоретических минимальна, т.е.
Для линейных и нелинейных уравнений, приводимых к линейным, решается следующая система относительно и :
Можно воспользоваться готовыми формулами, которые вытекают из этой системы:
Тесноту связи изучаемых явлений оценивает линейный коэффициент парной корреляции для линейной регрессии :
и индекс корреляции — для нелинейной регрессии :
Оценку качества построенной модели даст коэффициент (индекс) детерминации, а также средняя ошибка аппроксимации.
Средняя ошибка аппроксимации — среднее отклонение расчетных значений от фактических:
Допустимый предел значений — не более 8 — 10%.
Средний коэффициент эластичности показывает, на сколько процентов в среднем по совокупности изменится результат у от своей средней величины при изменении фактора на 1% от своего среднего значения:
Задача дисперсионного анализа состоит в анализе дисперсии зависимой переменной:
где — общая сумма квадратов отклонений;
— сумма квадратов отклонений, обусловленная регрессией («объясненная» или «факторная»);
— остаточная сумма квадратов отклонений.
Долю дисперсии, объясняемую регрессией, в общей дисперсии результативного признака у характеризует коэффициент (индекс) детерминации :
Коэффициент детерминации — квадрат коэффициента или индекса корреляции.
-тест — оценивание качества уравнения регрессии — состоит в проверке гипотезы о статистической незначимости уравнения регрессии и показателя тесноты связи. Дня этого выполняется сравнение фактического и критического (табличного) значений -критерия Фишера. определяется из соотношения значений факторной и остаточной дисперсий, рассчитанных на одну степень свободы:
где — число единиц совокупности;
— число параметров при переменных .
— это максимально возможное значение критерия под влиянием случайных факторов при данных степенях свободы и уровне значимости . Уровень значимости — вероятность отвергнуть правильную гипотезу при условии, что она верна. Обычно принимается равной 0,05 или 0,01.
Если , то — гипотеза о случайной природе оцениваемых характеристик отклоняется и признается их статистическая значимость и надежность. Если , то гипотеза не отклоняется и признается статистическая незначимость, ненадежность уравнения регрессии.
Для оценки статистической значимости коэффициентов регрессии и корреляции рассчитываются -критерий Стьюдента и доверительные интервалы каждого из показателей. Выдвигается гипотеза о случайной природе показателей, т.е. о незначимом их отличии от нуля. Оценка значимости коэффициентов регрессии и корреляции с помощью -критерия Стьюдента проводится путем сопоставления их значений с величиной случайной ошибки:
Случайные ошибки параметров линейной регрессии и коэффициента корреляции определяются по формулам:
Сравнивая фактическое и критическое (табличное) значения -статистики — и — принимаем или отвергаем гипотезу .
Связь между -критерием Фишера и -статистикой Стьюдента выражается равенством
Если то отклоняется, т.е. и не случайно отличаются от нуля и сформировались под влиянием систематически действующего фактора . Если , то гипотеза не отклоняется и признается случайная природа формирования или .
Для расчета доверительного интервала определяем предельную ошибку для каждого показателя:
Формулы для расчета доверительных интервалов имеют следующий вид:
Если в границы доверительного интервала попадает ноль, т.е. нижняя граница отрицательна, а верхняя положительна, то оцениваемый параметр принимается нулевым, так как он не может одновременно принимать и положительное, и отрицательное значения.
Прогнозное значение определяется путем подстановки в уравнение регрессии соответствующего (прогнозного) значения . Вычисляется средняя стандартная ошибка прогноза и строится доверительный интервал прогноза :
где
Пример задачи №1
По семи территориям Уральского района за 199Х г. известны значения двух признаков (табл. 1.1).
Требуется:
а)линейной;
б) степенной;
в) показательной;
г) равносторонней гиперболы.
Оценить каждую модель через среднюю ошибку аппроксимации и -критерий Фишера.
Решение:
1а. Для расчета параметров и линейной регрессии
решаем систему нормальных уравнений относительно и :
По исходным данным рассчитываем
Уравнение регрессии:
С увеличением среднедневной заработной платы на 1 руб. доля расходов на покупку продовольственных товаров снижается в среднем на 0,35 %-ных пункта. Рассчитаем линейный коэффициент парной корреляции:
Связь умеренная, обратная.
Определим коэффициент детерминации:
Вариация результата на 12,7% объясняется вариацией фактора . Подставляя в уравнение регрессии фактические значения , определим теоретические (расчетные) значения . Найдем величину средней ошибки аппроксимации :
В среднем расчетные значения отклоняются от фактических на 8,1%.
Рассчитаем -критерий:
поскольку , следует рассмотреть
Полученное значение указывает на необходимость принять гипотезу о случайной природе выявленной зависимости и статистической незначимости параметров уравнения и показателя тесноты связи.
- Построению степенной модели предшествует процедура линеаризации переменных. В примере линеаризация производится путем логарифмирования обеих частей уравнения:
Для расчетов используем данные табл. 1.3.
Рассчитаем и :
Получим линейное уравнение:
Выполнив его потенцирование, получим:
Подставляя в данное уравнение фактические значения , получаем теоретические значения результата . По ним рассчитаем показатели: тесноты связи — индекс корреляции и среднюю ошибку аппроксимации :
Характеристики степенной модели указывают, что она несколько лучше линейной функции описывает взаимосвязь.
1в. Построению уравнения показательной кривой предшествует процедура линеаризации переменных при логарифмировании обеих частей уравнения:
где
Для расчетов используем данные табл. 1.4.
Значения параметров регрессии и составили:
Получено линейное уравнение:
Произведем потенцирование полученного уравнения и запишем его в обычной форме:
Тесноту связи оценим через индекс корреляции :
Связь умеренная.
, что говорит о повышенной ошибке аппроксимации, но в допустимых пределах. Показательная функция чуть хуже, чем степенная, она описывает изучаемую зависимость.
1г. Уравнение равносторонней гиперболы линеаризуется при замене:. Тогда .
Для расчетов используем данные табл. 1.5.
Значения параметров регрессии и составили:
Получено уравнение:
Индекс корреляции:
. По уравнению равносторонней гиперболы полумена наибольшая оценка тесноты связи: =0,3944 (по сравнению с линейной, степенной и показательной регрессиями). остается на допустимом уровне:
где
Следовательно, принимается гипотеза о статистически незначимых параметрах этого уравнения. Этот результат можно объяснить сравнительно невысокой теснотой выявленной зависимости и небольшим числом наблюдений.
Пример задачи №2
По территориям региона приводятся данные за 199Х г. (табл. 1.6).
Требуется:
- Построить линейное уравнение парной регрессии у от х.
- Рассчитать линейный коэффициент парной корреляции и среднюю ошибку аппроксимации.
- Оценить статистическую значимость параметров регрессии и корреляции.
- Выполнить прогноз заработной платы у при прогнозном значении среднедушевого прожиточного минимумах, составляющем 107% от среднего уровня.
- Оценить точность прогноза, рассчитав ошибку прогноза и его доверительный интервал.
Решение:
- Для расчета параметров уравнения линейной регрессии строим расчетную таблицу (табл. 1.7).
Получено уравнение регрессии:
С увеличением среднедушевого прожиточного минимума на 1 руб. среднедневная заработная плата возрастает в среднем на 0,92 руб.
- Тесноту линейной связи оценит коэффициент корреляции:
Это означает, что 52% вариации заработной платы () объясняется вариацией фактора — среднедушевого прожиточного минимума. Качество модели определяет средняя ошибка аппроксимации:
Качество построенной модели оценивается как хорошее, так как не превышает 8 — 10%.
- Оценку статистической значимости параметров регрессии проведем с помощью -статистики Стьюдента и путем расчета доверительного интервала каждого из показателей.
Выдвигаем гипотезу о статистически незначимом отличии показателей от нуля:
для числа степеней свободы
составит 2,23.
Определим случайные ошибки :
Тогда
Фактические значения -статистики превосходят табличные значения:
поэтому гипотеза отклоняется, т.е. и не случайно отличаются от нуля, а статистически значимы.
Рассчитаем доверительный интервал для и . Для этого определим предельную ошибку для каждого показателя:
Доверительные интервалы:
Анализ верхней и нижней границ доверительных интервалов приводит к выводу о том, что с вероятностью
параметры и , находясь в указанных границах, не принимают нулевых значений, т.е. не являются статистически незначимыми и существенно отличны от нуля.
Полученные оценки уравнения регрессии позволяют использовать его для прогноза. Если прогнозное значение прожиточного минимума составит:
тогда прогнозное значение прожиточного минимума составит:
5. Ошибка прогноза составит:
Предельная ошибка прогноза, которая в 95% случаев не будет превышена, составит:
Доверительный интервал прогноза:
Выполненный прогноз среднемесячной заработной платы оказался надежным
но неточным, так как диапазон верхней и нижней границ доверительного интервала составляет 1,95 раза:
Пример задачи №3
По группе предприятий, производящих однородную продукцию, известно, как зависит себестоимость единицы продукции у от факторов, приведенных в табл. 1.8.
Требуется:
- Определить с помощью коэффициентов эластичности силу влияния каждого фактора на результат.
- Ранжировать факторы по силе влияния.
Решение:
- Для уравнения равносторонней гиперболы
Для уравнения прямой
Для уравнения степенной зависимости
Для уравнения показательной зависимости
Сравнивая значения , ранжируем по силе их влияния на себестоимость единицы продукции:
Для формирования уровня себестоимости продукции фуппы предприятий первоочередное значение имеют цены на энергоносители; в гораздо меньшей степени влияют трудоемкость продукции и отчисляемая часть прибыли. Фактором снижения себестоимости выступает размер производства: с ростом его на 1% себестоимость единицы продукции снижается на -0,97%.
Пример задачи №4
Зависимость потребления продукта А от среднедушевого дохода по данным 20 семей характеризуется следующим образом:
уравнение регрессии
индекс корреляции
остаточная дисперсия
Требуется:
Провести дисперсионный анализ полученных результатов.
Решение:
Результаты дисперсионного анализа приведены в табл. 1.9.
В силу того что
гипотеза о случайности различий факторной и остаточной дисперсий отклоняется. Эти различия существенны, статистически значимы, уравнение надежно, значимо, показатель тесноты связи надежен и отражает устойчивую зависимость потребления продукта от среднедушевого дохода.
Реализация типовых задач в Excel
Решение с помощью ППП Excel
- Встроенная статистическая функция ЛИНЕЙН определяет параметры линейной регрессии . Порядок вычисления следующий:
1) введите исходные данные или откройте существующий файл, содержащий анализируемые данные;
2) выделите область пустых ячеек 5×2 (5 строк, 2 столбца) для вывода результатов регрессионной статистики или область 1×2 — для получения только оценок коэффициентов регрессии;
3) активизируйте Мастер функций любым нз способов:
а) в главном меню выберите Вставка/Функция;
б) на панели инструментов Стандартная щелкните по кнопке Вставка функции;
4) в окне Категория (рис. 1.1) выберите Статистические, в окне Функция — ЛИНЕЙН. Щелкните по кнопке ОК;
5) заполните аргументы функции (рис. 1.2):
Известные значенияу — диапазон, содержащий данные результативного признака;
Известные значения_х — диапазон, содержащий данные факторов независимого признака;
Константа — логическое значение, которое указывает на наличие или на отсутствие свободного члена в уравнении; если Константа = 1, то свободный член рассчитывается обычным образом, если Константа = 0, то свободный член равен 0; Статистика — логическое значение, которое указывает, выводить дополнительную информацию по регрессионному анализу или нет. Если Статистика = 1, то дополнительная информация выводится, если Статистика — 0, то выводятся только оценки параметров уравнения. Щелкните по кнопке ОК;
6) в левой верхней ячейке выделенной области появится первый элемент итоговой таблицы. Чтобы раскрыть всю таблицу, нажмите на клавишу , а затем — на комбинацию клавиш
Дополнительная регрессионная статистика будет выводиться в порядке, указанном в следующей схеме:
Для вычисления параметров экспоненциальной кривой в MS Excel применяется встроенная статистическая функция ЛГРФПРИБЛ. Порядок вычисления аналогичен применению функции ЛИНЕЙН.
Для данных из примера 2 результат вычисления функции ЛИНЕЙН представлен на рис. 1.3, функции ЛГРФПРИБЛ — на рис. 1.4.
- С помощью инструмента анализа данных Регрессия, помимо результатов регрессионной статистики, дисперсионного анализа и доверительных интервалов, можно получить остатки и графики подбора линии регрессии, остатков и нормальной вероятности. Порядок действий следующий:
1) проверьте доступ к пакету анализа. В главном меню последовательно выберите Сервис /Надстройки. Установите флажок Пакет анализа (рис. 1.5);
2) в главном меню выберите Сервис/Анализ данных/Регрессия. Щелкните по кнопке ОК;
3) заполните диалоговое окно ввода данных и параметров вывода (рис. 1.6):
Входной интервал — диапазон, содержащий данные результативного признака;
Входной интервал — диапазон, содержащий данные факторов независимого признака;
Метки — флажок, который указывает, содержит ли первая строка названия столбцов или нет;
Константа — ноль — флажок, указывающий на наличие или отсутствие свободного члена в уравнении;
Выходной интервал — достаточно указать левую верхнюю ячейку будущего диапазона;
Новый рабочий лист — можно задать произвольное имя нового листа.
Если необходимо получить информацию и графики остатков, установите соответствующие флажки в диалоговом окне. Щелкните по кнопке ОК.
Результаты регрессионного анализа для данных из примера 2 представлены на рис. 1.7.
Решение с помощью ППП Statgraphics
Порядок вычислений при использовании функции Simple Regression следующий:
1) введите исходные данные (рис. 1.8) или откройте существующий файл, содержащий исходные данные;
2) в главном меню последовательно выберите Relate/Simple Regression;
3) заполните диалоговое окно ввода данных. В поле «» введите название столбца, содержащего зависимую переменную, в поле «» -название столбца, содержащего значения факторного признака. Щелкните по кнопке ОК;
4) в окне табличных настроек поставьте флажок напротив Analysis Summary.
Результаты вычислений появятся в отдельном окне. Для данных из примера 2 результат применения функции Simple Regression представлен на рис. 1.9.
Как видим, результаты вычислений вручную и с помощью компьютера совпадают.
Возможно эта страница вам будет полезна:
Множественная регрессия и корреляция
Множественная регрессия — уравнение связи с несколькими независимыми переменными:
где — зависимая переменная (результативный признак);
— независимые переменные (факторы).
Для построения уравнения множественной регрессии чаще используются следующие функции:
• линейная —
• степенная —
• экспонента —
• гипербола —
Можно использовать и другие функции, приводимые к линейному виду.
Для оценки параметров уравнения множественной регрессии применяют метод наименьших квадратов (МНК). Для линейных уравнений и нелинейных уравнений, приводимых к линейным, строится следующая система нормальных уравнений, решение которой позволяет получить оценки параметров регрессии:
Для ее решения может быть применен метод определителей:
где
определитель системы.
— частные определители; которые получаются путем замены соответствующего столбца матрицы определителя системы данными левой части системы.
Другой вид Уравнения множественной регрессии — уравнение регрессии в стандартизованном масштабе:
у-у
где — стандартизованные переменные;
— стандартизованные коэффициенты регрессии.
К уравнению множественной регрессии в стандартизованном масштабе применим МНК. Стандартизованные коэффициенты регрессии (-коэффициенты) определяются из следующей системы уравнений:
Связь коэффициентов множественной регрессии со стандартизованными коэффициентами описывается соотношением
Параметр определяется как
Средние коэффициенты эластичности для линейной регрессии рассчитываются по формуле
Для расчета частных коэффициентов эластичности применяется следующая формула:
Тесноту совместного влияния факторов на результат оценивает индекс множественной корреляции:
Значение индекса множественной корреляции лежит в пределах от 0 до 1 и должно быть больше или ранно максимальному парному индексу корреляции:
Индекс множественной корреляции для уравнения в стандартизованном масштабе можно записать и виде
При линейной зависимости коэффициент множественной корреляции можно определить через матрицу парных коэффициентов корреляции:
где
определитель матрицы парных коэффициентов корреляии;
определитель матрицы межфакторной корреляции.
Частные коэффициенты (или индексы) корреляции, измеряющие влияние на у фактора при неизменном уровне других факторов, можно определить по формуле
или по рекуррентной формуле:
Частные коэффициенты корреляции изменяются в пределах от —1 до 1.
Качество построенной модели в целом оценивает коэффициент (индекс) детерминации. Коэффициент множественной детерминации рассчитывается как квадрат индекса множественной корреляции:
Скорректированный индекс множественной детерминации содержит поправку на число степеней свободы и рассчитывается по формуле
где — число наблюдений; — число факторов.
Значимость уравнения множественной регрессии в целом оценивается с помощью -критерия Фишера:
Частный -критерий оценивает статистическую значимость присутствия каждого из факторов в уравнении. В общем виде для фактора частный -критерий определится как
Оценка значимости коэффициентов чистой регрессии с помощью -критерия Стьюдента сводится к вычислению значения
где — средняя квадратичсская ошибка коэффициента регрессии она может быть определена по следующей формуле:
При построении уравнения множественной регрессии может возникнуть проблема мупьтиколлинеарности факторов, их тесной линейной связанности.
Считается, что две переменные явно коллинеарны, т.е. находятся между собой в линейной зависимости, если .
По величине парных коэффициентов корреляции обнаруживается лишь явная коллинеарность факторов. Наибольшие трудности в использовании аппарата множественной регрессии возникают при наличии мультиколлинеарности факторов. Чем сильнее мультикол-линеарность факторов, тем менее надежна оценка распределения суммы объясненной вариации по отдельным факторам с помощью метода наименьших квадратов.
Для оценки мультиколлинеарности факторов может использоваться определитель матрицы парных коэффициентов корреляции между факторами.
Если бы факторы не коррелировали между собой, то матрица парных коэффициентов корреляции между факторами была бы единичной матрицей, поскольку все недиагональные элементы были бы равны нулю. Так, для включающего три объясняющих переменных уравнения
матрица коэффициентов корреляции между факторами имела бы определитель, равный 1:
так как
Если же наоборот, между факторами существует полная линейная зависимость и все коэффициенты корреляции равны 1, то определитель такой матрицы равен 0:
Чем ближе к 0 определитель матрицы межфакторной корреляции, тем сильнее мультиколлинеарность факторов и ненадежнее результаты множественной регрессии. И наоборот, чем ближе к 1 определитель матрицы межфакторной корреляции, тем меньше мультиколлинеарность факторов.
Проверка мультиколлинеарности факторов может быть проведена методом испытания гипотезы о независимости переменных
Доказано, что величина
имеет приближенное распределение
степенями свободы. Если фактическое значение превосходит табличное (критическое) то гипотеза отклоняется. Это означает, что , недиагональные ненулевые коэффициенты корреляции указывают на коллинеарность факторов. Мультиколлинеарность считается доказанной.
Для применения МНК требуется, чтобы дисперсия остатков была гомоскедастичной. Это значит, что для каждого значения фактора остатки имеют одинаковую дисперсию. Если это условие не соблюдается, то имеет место гетероскедастичность.
При нарушении гомоскедастичности мы имеем неравенства
При малом объеме выборки для оценки гетероскедастичности может использоваться метод Гольдфельда Кнандта. Основная идея теста Гольдфельда — Квандта состоит в следующем:
1) упорядочение и наблюдений по мере возрастания переменной ;
2) исключение из рассмотрения центральных наблюдений; при этом , где — число оцениваемых параметров;
3) разделение совокупности из наблюдений на две группы (соответственно с малыми и с большими значениями фактора ) и определение по каждой из групп ураннсний регрессии;
4) определение остаточной суммы киндратов для первой и второй групп и нахождение их отношения:
При выполнении нулевой гипотезы о гомоскедастичности отношение будет удовлетворять -критерию со степенями свободы для каждой остаточной суммы квадратов. Чем больше величина превышает табличное значение -критерия, тем более нарушена предпосылка о равенстве дисперсий остаточных величин.
Уравнения множественной регрессии могут включать в качестве независимых переменных качественные признаки (например, профессия, пол, образование, климатические условия, отдельные регионы и т.д.). Чтобы ввести такие переменные в регрессионную модель, их необходимо упорядочить и присвоить им те или иные значения, т.е. качественные переменные преобразовать в количественные.
Такого вида сконструированные переменные принято в эконометрике называть фиктивными переменными. Например, включать в модель фактор «пол» в виде фиктивной переменной можно в следующем виде:
Коэффициент регрессии при фиктивной переменной интерпретируется как среднее изменение зависимой переменной при переходе от одной категории (женский пол) к другой (мужской пол) при неизменных значениях остальных параметров. На основе -критерия Стьюдента делается вывод о значимости влияния фиктивной переменной, существенности расхождения между категориями.
Пример задачи №5
По 30 территориям России имеются данные, представленные в табл. 2.1.
Требуется:
- Построить уравнение множественной регрессии в стандартизованной и естественной форме; рассчитать частные коэффициенты эластичности, сравнить их с и пояснить различия между ними.
- Рассчитать линейные коэффициенты частной корреляции и коэффициент множественной корреляции, сравнить их с линейными коэффициентами парной корреляции, пояснить различия между ними.
- Рассчитать общий и частные -критерии Фишера.
Решение:
Линейное уравнение множественной регрессии от и имеет вид:
Для расчета его параметров применим метод стандартизации переменных и построим искомое уравнение в стандартизованном масштабе:
Расчет -коэффициентов выполним по формулам
Получим уравнение
Для построения уравнения в естественной форме рассчитаем и , используя формулы для перехода от к ;
Значение а определим из соотношения
Для характеристики относительной силы влияния и на рассчитаем средние коэффициенты эластичности:
С увеличением средней заработной платы на 1% от ее среднего уровня средний душевой доход у возрастает на 1,02% от своего среднего уровня; при повышении среднего возраста безработного на 1% среднедушевой доход у снижается на 0,87% от своего среднего уровня. Очевидно, что сила влияния средней заработной платы на средний душевой доход у оказалась большей, чем сила влияния среднего возраста безработного . К аналогичным выводам о силе связи приходим при сравнении модулей значений и :
Различия в силе влияния фактора на результат, полученные при сравнении и объясняются тем, что коэффициент эластичности исходит из соотношения средних:
-коэффициент — из соотношения средних квадратических отклонений:
- Линейные коэффициенты частной корреляции здесь рассчитываются по рекуррентной формуле:
Если сравнить значения коэффициентов парной и частной корреляции, то приходим к выводу, что из-за слабой межфакторной связи коэффициенты парной и частной корреляции отличаются незначительно: выводы о тесноте и направлении связи на основе коэффициентов парной и частной корреляции совпадают:
Расчет линейного коэффициента множественной корреляции выполним с использованием коэффициентов и :
Зависимость от и характеризуется как тесная, в которой 72% вариации среднего душевого дохода определяются вариацией учтенных в модели факторов: средней заработной платы и среднего возраста безработного. Прочие факторы, не включенные в модель, составляют соответственно 28% от общей вариации .
Сравнивая приходим к выводу о необходимости отклонить гипотезу , так как
С вероятностью делаем заключение о статистической значимости уравнения в целом и показателя тесноты связи которые сформировались под неслучайным воздействием факторов и .
Частные -критерии — и оценивают статистическую значимость присутствия факторов и в уравнении множественной регрессии, оценивают целесообразность включения в уравнение одного фактора после другого фактора, т.е. оценивает целесообразность включения в уравнение фактора после того, как в него был включен фактор . Соответственно указывает на целесообразность включения в модель фактора после фактора :
Сравнивая приходим к выводу о целесообразности включения в модель фактора после’ фактора , так как
Гипотезу о несущественности прироста за счет включения дополнительного фактора отклоняем и приходим к выводу о статистически подтвержденной целесообразности включения фактора после фактора .
Целесообразность включения в модель фактора после фактора проверяет :
Низкое значение (немногим больше 1) свидетельствует о статистической незначимости прироста за счет включения в модель фактора после фактора . Следовательно, подтверждается нулевая гипотеза нецелесообразности включения в модель фактора (средний возраст безработного). Это означает, что парная регрессионная модель зависимости среднего дохода от средней заработной платы является достаточно статистически значимой, надежной и что нет необходимости улучшать ее, включая дополнительный фактор (средний возраст безработного).
Пример задачи №6
По 20 территориям России изучаются следующие данные (табл. 2.2): зависимость среднегодового душевого дохода у (тыс. руб.) от доли занятых тяжелым физическим трудом в общей численности занятых (%) и от доли экономически активного населения в численности всего населения (%).
Требуется:
- Составить таблицу дисперсионного анализа для проверки при уровне значимости статистической значимости уравнения множественной регрессии и его показателя тесноты связи.
- С помощью частных -критериев Фишера оценить, насколько целесообразно включение в уравнение множественной регрессии фактора после фактора и насколько целесообразно включение после .
- Оценить с помощью -критерия Стыодента статистическую значимость коэффициентов при переменных и множественного уравнения регрессии.
Решение:
- Задача дисперсионного анализа состоит в проверке нулевой гипотезы о статистической незначимости уравнения регрессии в целом и показателя тесноты связи.
Анализ выполняется при сравнении фактического и табличного (критического) значений -критерия Фишера
определяется из соотношения значений факторной и остаточной дисперсий, рассчитанных на одну степень свободы:
где — число единиц совокупности;
— число факторов в уравнении линейной регрессии; — фактическое значение результативного признака; — расчетное значение результативного признака.
Результаты дисперсионного анализа представлены в табл. 2.3.
Сравнивая приходим к выводу о необходимости отклонить гипотезу и сделать вывод о статистической значимости уравнения регрессии в целом и значения , так как они статистически надежны и сформировались под систематическим действием неслучайных причин. Вероятность того, что допускаются ошибки при отклонении нулевой гипотезы, не превышает 5%, и это является достаточно малой величиной.
Возможно эта страница вам будет полезна:
Результаты дисперсионного анализа представлены в табл. 2.4.
Включение фактора после фактора оказалось статистически значимым и оправданным: прирост факторной дисперсии (в расчете на одну степень свободы) оказался существенным, т.е. следствием дополнительного включения в модель систематически действующего фактора так как
Аналогично проверим целесообразность включения в модель дополнительного фактора после включенного ранее фактора . Расчет выполним с использованием показателей тесноты связи
В силу того что
приходим к выводу, что включение после оказалось бесполезным: прирост факторной дисперсии в расчете на одну степень свободы был несуществен, статистически незначим, т.е. влияние не является устойчивым, систематическим. Вполне возможно было ограничиться построением линейного уравнения парной регрессии у от .
Табличные (критические) значения -критерия Стьюдента зависят от принятого уровня значимости (обычно это 0,1; 0,05 или 0,01) и от числа степеней свободы , где — число единиц совокупности, — число факторов в уравнении.
В нашем примере при
Сравнивая , приходим к выводу, что так как коэффициент регрессии является статистически значимым, надежным, на него можно опираться в анализе и в прогнозе. Так как
приходим к заключению, что величина является статистически незначимой, ненадежной в силу того, что она формируется преимущественно под воздействием случайных факторов. Еще раз подтверждается статистическая значимость влияния (доли занятых тяжелым физическим трудом) на у (среднедушевой доход) и ненадежность, незначимость влияния (доли экономически активного населения в численности всего населения).
Возможно эта страница вам будет полезна:
Пример задачи №7
Зависимость спроса на свинину от цены на нее и от цены на говядину представлена уравнением
Требуется:
- Представить данное уравнение в естественной форме (не в логарифмах).
- Оценить значимость параметров данного уравнения, если известно, что -критерий для параметра при составил 0,827, а для параметра при — 1,015.
Решение:
- Представленное степенное уравнение множественной регрессии приводим к естественной форме путём потенцирования обеих частей уравнения:
Значения коэффициентов регрессии и в степенной функции равны коэффициентам эластичности результата от и .
Спрос на свинину сильнее связан с ценой на говядину — он увеличивается в среднем на 2,83% при росте цен на 1%. С ценой на свинину спрос на нее связан обратной зависимостью: с ростом цен на 1% потребление снижается в среднем на 0,21%.
- Это весьма небольшие значения -критерия, которые свидетельствуют о случайной природе взаимосвязи, о статистической ненадежности всего уравнения, поэтому применять полученное уравнение для прогноза не рекомендуется.
Возможно эта страница вам будет полезна:
Пример задачи №8
По 20 предприятиям региона (табл. 2.5) изучается зависимость выработки продукции на одного работника у (тыс. руб.) от ввода в действие новых основных фондов (% от стоимости фондов на конец года) и от удельного веса рабочих высокой квалификации в общей численности рабочих (%).
Требуется:
- Оценить показатели вариации каждого признака и сделать вывод о возможностях применения МНК для их изучения.
- Проанализировать линейные коэффициенты парной и частной корреляции.
- Написать уравнение множественной регрессии, оценить значимость его параметров, пояснить их экономический смысл.
- С помощью -критерия Фишера оценить статистическую надежность уравнения регрессии и . Сравнить значения скорректированного и нескорректированного линейных коэффициентов множественной детерминации.
- С помощью частных -критериев Фишера оценить целесообразность включения в уравнение множественной регрессии фактора после и фактора после .
- Рассчитать средние частные коэффициенты эластичности и дать на их основе сравнительную оценку силы влияния факторов на результат.
Возможно эта страница вам будет полезна:
Реализация типовых задач в Excel
- Решение примера проведем с использованием ППП MS Excel и Statgraphics.
Решение с помощью ППП Excel
Сводную таблицу основных статистических характеристик для одного или нескольких массивов данных можно получить с помощью инструмента анализа данных Описательная статистика. Для этого выполните следующие шаги:
1) введите исходные данные или откройте существующий файл, содержащий анализируемые данные;
2) в главном меню выберите последовательно пункты Сервис / Анализ данных / Описательная статистика, после чего щелкните по кнопке ОК;
3) заполните диалоговое окно ввода данных и параметров вывода (рис. 2.1):
Входной интервал — диапазон, содержащий анализируемые данные, это может быть одна или несколько строк (столбцов); Группирование — по столбцам или по строкам — необходимо указать дополнительно;
Метки — флажок, который указывает, содержит ли первая строка названия столбцов или нет;
Выходной интервал — достаточно указать левую верхнюю ячейку будущего диапазона;
Новый рабочий лист — можно задать произвольное имя нового листа.
Если необходимо получить дополнительную информацию Итоговой статистики, Уровня надежности, k-го наибольшего и наименьшего значений, установите соответствующие флажки в диалоговом окне. Щелкните по кнопке ОК.
Результаты вычисления соответствующих показателей для каждого признака представлены на рис. 2.2.
Решение с помощью ППП Statgraphics
Для проведения многофакторного анализа в ППП Statgraphics используется пункт меню Multiple Variable Analysis. Для получения показателей описательной статистики необходимо проделать следующие операции:
1) ввести исходные данные или открыть существующий файл, содержащий анализируемые данные;
2) в главном меню выбрать Describe/Numeric Data/Multiple Variable Analysis;
3) заполнить диалоговое окно ввода данных (рис. 2.3). Ввести названия всех столбцов, значения которых вы хотите включить в анализ; щелкнуть по кнопке ОК;
4) в окне табличных настроек поставить флажок напротив Summary Statistics (рис. 2.4). Итоговая статистика — показатели вариации -появится в отдельном окне.
Для данных примера 4 результат применения функции Multiple Variable Analysis представлен на рис. 2.5.
Сравнивая значения средних квадратических отклонений и средних величин и определяя коэффициенты вариации:
приходим к выводу о повышенном уровне варьирования признаков, хотя и в допустимых пределах, не превышающих 35%. Совокупность предприятий однородна, и для ее изучения могут использоваться метод наименьших квадратов и вероятностные методы оценки статистических гипотез.
- Значения линейных коэффициентов парной корреляции определяют тесноту попарно связанных переменных, использованных в данном уравнении множественной регрессии. Линейные коэффициенты частной корреляции оценивают тесноту связи значений двух переменных, исключая влияние всех других переменных, представленных в уравнении множественной регрессии.
Решение с помощью ППП Excel
К сожалению, в ППП MS Excel нет специального инструмента для расчета линейных коэффициентов частной корреляции. Матрицу парных коэффициентов корреляции переменных можно рассчитать, используя инструмент анализа данных Корреляция. Для этого:
1) в главном меню последовательно выберите пункты Сервис / Анализ данных / Корреляция. Щелкните по кнопке ОК;
2) заполните диалоговое окно ввода данных и параметров вывода (см. рис. 2.1);
3) результаты вычислений — матрица коэффициентов парной корреляции — представлены на рис. 2.6.
Решение с помощью ППП Stat graphics
При проведении многофакторного анализа — Multiple Variable Analysis — вычисляются линейные коэффициенты парной корреляции и линейные коэффициенты частной корреляции. Последовательность операций описана в п.1 этого примера. Для отображения результатов вычисления на экране необходимо установить флажки напротив Correlations и Partial Correlations в окне табличных настроек (рис. 2.7).
В результате получим матрицы коэффициентов парной и частной корреляции (рис. 2.8).
Значения коэффициентов парной корреляции указывают на весьма тесную связь выработки у как с коэффициентом обновления основных фондов — , так и с долей рабочих высокой квалификации
Но в то же время межфакторная связь весьма тесная и превышает тесноту связи с . В связи с этим для улучшения данной модели можно исключить из нее фактор как малоинформативный, недостаточно статистически надежный.
Коэффициенты частной корреляции дают более точную характеристику тесноты связи двух признаков, чем коэффициенты парной корреляции, так как очищают парную зависимость от взаимодействия данной пары признаков с другими признаками, представленными в модели. Наиболее тесно связаны и :
связь и гораздо слабее:
а межфакторная зависимость и выше, чем парная и :
Все это приводит к выводу о необходимости исключить фактор — доля высококвалифицированных рабочих — из правой части уравнения множественной регрессии.
Если сравнить коэффициенты парной и частной корреляции, то можно увидеть, что из-за высокой межфакторной зависимости коэффициенты парной корреляции дают завышенные оценки тесноты связи:
Именно по этой причине рекомендуется при наличии сильной коллинеарности (взаимосвязи) факторов исключать из исследования тот фактор, у которого теснота парной зависимости меньше, чем теснота межфакторной связи.
- Вычисление параметров линейного уравнения множественной регрессии.
Решение с помощью ППП Excel
Эта операция проводится с помощью инструмента анализа данных Регрессия. Она аналогична расчету параметров парной линейной регрессии, описанной в 1-м разделе практикума, только в отличие от парной регрессии в диалоговом окне при заполнении параметра входной интервал и следует указать не один столбец, а все столбцы, содержащие значения факторных признаков. Результаты анализа представлены на рис. 2.9.
Для вычисления параметров множестнсшшП регрессии можно использовать процедуру Multiple Regression. Дни »нно:
1) введите исходные данные или откройте сущее i иун>щи11 файл;
2) в главном меню последовательно выберите Heinle / Multiple Regression;
3) заполните диалоговое окно ввода данных. II ноне Depended Variable введите название столбца, содержащею шичпш» зависимой переменной, в поле Independed Variable — нашими* i ишбцов, содержащих значения факторов. Щелкните по кнопке ОК
Результаты вычисления функции Multiple КсЦ1 гм1«ш появятся в отдельном окне (рис. 2.10).
По результатам вычислений составим урцниемн* множественной регрессии вида
Значения случайных ошибок параметров с учетом округления:
Они показывают, какое значение данной характеристики сформировалось под влиянием случайных факторов. Эти значения используются для расчета -критерия С п.юдснта:
Если значения -критерия больше 2-3, можно сделать вывод о существенности данного параметра, который формируется под воздействием неслучайных причин. Здесь статистически значимыми являются и , а величина сформировалась под воздействием случайных причин, поэтому фактор силу влияния которого оценивает , можно исключить как несущественно влияющий, неинформативный.
На это же указывает показатель вероятности случайных значений параметров регрессии: если а меньше принятого нами уровня (обычно 0,1; 0,05 или 0,01; это соответствует 10%; 5% или 1% вероятности), делают вывод о неслучайной природе данного значения параметра, т.е. о том, что он статистически значим и надежен. В противном случае принимается гипотеза о случайной природе значения коэффициентов уравнения. Здесь
что позволяет рассматривать как неинформативный фактор и удалить его для улучшения данного уравнения.
Величина оценивает агрегированное влияние прочих (кроме учтенных в модели факторов и ) факторов на результату.
Величины и указывают, что с увеличением и на единицу их значений результат увеличивается соответственно на 0,9459 и на 0,0856 млн руб. Сравнивать эти значения не следует, так как они зависят от единиц измерения каждого признака и потому несопоставимы между собой.
Оценку надежности уравнения регрессии в целом и показателя тесноты связи дает -критерий Фишера:
По данным таблиц дисперсионного анализа, представленным на рис. 2.9 и 2.10, . Вероятность случайно получить такое значение -критерия составляет 0,0000, что не превышает допустимый уровень значимости 5%; об этом свидетельствует величина — значения из этих же таблиц. Следовательно, полученное значение не случайно, оно сформировалось под алюминием существенных факторов, т.е. подтверждается статистически значимость всего уравнения и показателя тесноты связи .
Значения скорректированного и нескорремирпианпого линейных коэффициентов множественной детерминации приведены на рис. 2.9 и 2.10 в рамках регрессионной статистики.
Нескорректированный коэффициент множественной детерминации
оценивает долю вариации результата за счет представленных в уравнении фактором в общей вариации результата. Здесь эта доля составляет 94,7% и указывает на весьма высокую степень обусловленности вариации вариацией факторов, иными словами — на весьма теси> i факторов с результатом.
Скорректированный коэффициент множественной детерминации
определяет тесноту связи с учетом степеней свободы общей и остаточной дисперсий. Он дает такую оценку тесноты связи, которая не зависит от числа факторов и потому может сравниваться по разным моделям с разным что ном факторов. Оба коэффициента указывают на весьма высокую (Ооиес 90%) детерминированность результата в модели факторами.
1) введите исходные данные или откройте существующий файл;
2) в главном меню последовательно выберите пункты Relate / Multiple Regression;
3) заполните диалоговое окно ввода данных. В поле Depended Variable введите название столбца, содержащего значения зависимой переменной, в поле Independed Variable — названия столбцов, содержащих значения факторов, в том порядке, в котором будет проводиться анализ целесообразности включения факторов в модель. Чтобы оценить статистическую значимость включения в модель фактора после фактора , сначала введите фактор затем . Для оценки обратного порядка включения факторов в модель после введите , затем . Щелкните по кнопке ОК;
4) в окне табличных настроек поставьте флажок напротив поля Conditional Sums of Squares.
Результаты вычисления показаны на рис. 2.11.
Частный -критерий — показывает статистическую значимость включения фактора в модель после того, как в нее включен фактор .
= 2 . Вероятность случайной природы его значения (-значение = 0,1750) составляет 17,5% против принятого уровня значимости (5%). Следовательно, включение в модель фактора — доля высококвалифицированных рабочих — после того, как в уравнение включен фактор — коэффициент обновления основных фондов — статистически нецелесообразно: прирост факторной дисперсии за счет дополнительного признака оказывается незначимым, несущественным; фактор включать в уравнение после фактора не следует.
Если поменять первоначальный порядок включения факторов в модель и рассмотреть вариант включения после , то результат расчета частного -критерия для будет иным.
Вероятность его случайного формирования составила 0,04%, это значительно меньше принятого стандарта (5%). Следовательно, значение частного -критерия для дополнительно включенного фактора не случайно, является статистически значимым, надежным, достоверным: прирост факторной дисперсии за счет дополнительного фактора является существенным. Фактор должен присутствовать в уравнении, в том числе в варианте, когда он дополнительно включается после фактора .
Общий вывод состоит в том, что множественная модель с факторами и с
содержит неинформативный фактор . Если исключить фактор , то можно (ограничиться уравнением парной регрессии:
более простым, хорошо детерминированным, ириголным для анализа и для прогноза.
- Средние частные коэффициенты эластичности показывают, на сколько процентов от значения своей средней изменяется результат при изменении фактора на 1% от своей средней и
при фиксированном воздействии на у всех прочих факторов, включенных в уравнение регрессии. Для линейной зависимости
где — коэффициент регрессии при в уравнении множественной регрессии. Здесь
По значениям частных коэффициентов эластичности можно сделать вывод о более сильном влиянии на результат у признака фактора , чем признака фактора :0,6% против 0,2%.
Возможно эта страница вам будет полезна:
Система эконометрических уравнений
Сложные экономические процессы описывают с помощью системы взаимосвязанных (одновременных) уравнений.
Различают несколько видов систем уравнений: • система независимых уравнений — когда каждая зависимая переменная рассматривается как функция одного и того же набора факторов :
Для решения этой системы и нахождения ее параметров используется метод наименьших квадратов;
• система рекурсивных уравнений — когда зависимая переменная одного уравнения выступает в виде фактора в другом уравнении:
Для решения этой системы и нахождения ее параметров используется метод наименьших квадратов;
• система взаимосвязанных (совместных) уравнений — когда одни и те же зависимые переменные в одних уравнениях входят в левую часть, а в других — в правую:
Такая система уравнений называется структурной формой модели.
Эндогенные переменные — взаимозависимые переменные, которые определяются внутри модели (системы) .
Экзогенные переменные — независимые переменные, которые определяются вне системы .
Предопределенные переменные — экзогенные и лаговые (за предыдущие моменты времени) эндогенные переменные системы.
Коэффициенты и при переменных — структурные коэффициенты модели.
Система линейных функций эндогенных переменных от всех предопределенных переменных системы — приведенная форма модели.
где — коэффициенты приведенной формы модели.
Необходимое условие идентификации — выполнение счетного правила:
— уравнение идентифицируемо;
— уравнение неидентифицируемо;
— уравнение сверхидентифицируемо,
где — число эндогенных переменных в уравнении,
— число предопределенных переменных, отсутствующих в уравнении, но присутствующих в системе.
Достаточное условие идентификации — определитель матрицы, составленной из коэффициентов при переменных, отсутствующих в исследуемом уравнении, не равен нулю, и ранг этой матрицы не менее числа эндогенных переменных системы без единицы.
Для решения идентифицируемого уравнения применяется косвенный метод наименьших квадратов, для решения сверхидентифицированных — двухшаговый метод наименьших квадратов.
Косвенный МНК состоит в следующем:
• составляют приведенную форму модели и определяют численные значения параметров каждого ее уравнения обычным МНК;
• путем алгебраических преобразований переходят от приведенной формы к уравнениям структурной формы модели, получая тем самым численные оценки структурных параметров.
Двухшаговый МНК заключается в следующем:
• составляют приведенную форму модели и определяют численные значения параметров каждого ее уравнения обычным МНК;
• выявляют эндогенные переменные, находящиеся в правой части структурного уравнения, параметры которого определяют двухша-говым МНК, и находят расчетные значения по соответствующим уравнениям приведенной формы модели;
• обычным МНК определяют параметры структурного уравнения, используя в качестве исходных данных фактические значения предопределенных переменных и расчетные значения эндогенных переменных, стоящих в правой части данного структурного уравнения.
Пример задачи №9
Требуется:
- Оценить следующую структурную модель на идентификацию:
- Исходя из приведенной формы модели уравнений
найти структурные коэффициенты модели.
Решение:
Проверим каждое уравнение системы на необходимое (Н) и достаточное (Д) условия идентификации.
Первое уравнение. Н: эндогенных переменных — , отсутствующих экзогенных — . Выполняется необходимое равенство: 2 = 1 + 1, следовательно, уравнение точно идентифицируемо.
Д: в первом уравнений отсутствуют и . Построим матрицу из коэффициентов при них в других уравнениях системы:
Определитель матрицы не равен 0, ранг матрицы равен 2; следовательно, выполняется достаточное условие идентификации, и первое уравнение точно идентифицируемо.
Второе уравнение.
Н: эндогенных переменных — , отсутствующих экзогенных —
Выполняется необходимое равенство: 3 = 2+ 1, следовательно, уравнение точно идентифицируемо.
Д: во втором уравнении отсутствуют и . Построим матрицу из коэффициентов при них в других уравнениях системы:
Определитель матрицы не равен 0, ранг матрицы равен 2, следовательно, выполняется достаточное условие идентификации, и второе уравнение точно идентифицируемо.
Третье уравнение.
Н: эндогенных переменных — , отсутствующих экзогенных — .
Выполняется необходимое равенство: 2=1 + 1, следовательно, уравнение точно идентифицируемо.
Д: в третьем уравнении отсутствуют и . Построим матрицу из коэффициентов при них в других уравнениях системы:
Определитель матрицы не равен 0, ранг матрицы равен 2, следовательно, выполняется достаточное условие идентификации, и третье уравнение точно идентифицируемо.
Следовательно, исследуемая система точно идентифицируема и может быть решена косвенным методом наименьших квадратов.
- Вычислим структурные коэффициенты модели:
1)из третьего уравнения приведенной формы выразим (так как его нет в первом уравнении структурной формы):
Данное выражение содержит переменные которые нужны для первого уравнения структурной формы модели (СФМ). Подставим полученное выражение в первое уравнение приведенной формы модели (ПФМ):
2) во втором уравнении СФМ нет переменных и . Структурные параметры второго уравнения СФМ можно будет определить в два этапа:
Первый этап: выразим в данном случае из первого или третьего уравнения ПФМ. Например, из первого уравнения:
Подстановка данного выражения во второе уравнение ПФМ не решило бы задачу до конца, так как в выражении присутствует , которого нет в СФМ.
Выразим из третьего уравнения ПФМ:
Подставим его в выражение :
Второй этап: аналогично, чтобы выразить через искомые и и , заменим в выражении значение на полученное из первого уравнения ПФМ:
Следовательно,
Подставим полученные и во второе уравнение ПФМ:
Это уравнение можно получить из ПФМ иным путем. Суммируя все уравнения, получим
Далее из первого и второго уравнений ПФМ исключим домножив первое уравнение на 3, а второе — на (-2) и просуммировав их:
Затем аналогичным путем из полученных уравнений исключаем , а именно:
3) из второго уравнения ПФМ выразим , так как его нет в третьем уравнении СФМ:
Подставим полученное выражение в третье уравнение ПФМ:
Таким образом, СФМ примет вид
Пример задачи №10
Изучается модель вида
где — валовой национальный доход;
— валовой национальный доход предшествующего года;
— личное потребление;
— конечный спрос (помимо личного потребления);
— случайные составляющие.
Информация за девять лет о приростах всех показателей дана в табл. 3.1*.
Для данной модели была получена система приведенных уравнений:
Требуется:
- Провести идентификацию модели.
- Рассчитать параметры первого уравнения структурной модели.
Решение:
В данной модели две эндогенные переменные ( и ) и две экзогенные переменные ( и ). Второе уравнение точно идентифицировано, так как содержит две эндогенные переменные и не содержит одну экзогенную переменную из системы. Иными словами, для второго уравнения имеем по счетному правилу идентификации равенство: 2=1 + 1.
Первое уравнение сверхидентифицировано, так как в нем на параметры при и наложено ограничение: они должны бьггь равны. В этом уравнении содержится одна эндогенная переменная . Переменная в данном уравнении не рассматривается как эндогенная, так как она участвует в уравнении не самостоятельно, а вместе с переменной . В данном уравнении отсутствует одна экзогенная переменная, имеющаяся в системе. По счетному правилу идентификации получаем: 1 + 1 = 2: + 1 > Н. Это больше, чем число эндогенных переменных в данном уравнении, следовательно, система сверх-идентифицирована.
- Для определения параметров сверхидентифицированной модели используется двухшаговый метод наименьших квадратов.
Шаг 1. На основе системы приведенных уравнений по точно идентифицированному второму уравнению определим теоретические значения эндогенной переменной . Для этого в приведенное уравнение
подставим значения и , имеющиеся в условии задачи. Получим:
Шаг 2. По сверхидентифицированному уравнению структурной формы модели заменяем фактические значения на теоретические и рассчитываем новую переменную + (табл. 3.2).
Далее к сверхидентифицированному уравнению применяется метод наименьших квадратов. Обозначим новую переменную + через . Решаем уравнение
Система нормальных уравнений составит:
Итак, первое уравнение структурной модели будет таким:
Пример задачи №11
Имеются данные за 1990-1994 гг. (табл. 3.3).
Требуется: Построить модель вида
рассчитав соответствующие структурные коэффициенты.
Решение:
Система одновременных уравнений с двумя эндогенными и двумя экзогенными переменными имеет вид
В каждом уравнении две эндогенные и одна отсутствующая экзогенная переменная из имеющихся в системе. Для каждого уравнения данной системы действует счетное правило 2=1 + 1. Это означает, что каждое уравнение и система в целом идентифицированы.
Для определения параметров такой системы применяется косвенный метод наименьших квадратов.
С этой целью структурная форма модели преобразуется в приведенную форму:
в которой коэффициенты при определяются методом наименьших квадратов.
Для нахождения значений и запишем систему нормальных уравнений:
При ее решении предполагается, что и выражены через отклонения от средних уровней, т. е. матрица исходных данных составит:
Применительно к ней необходимые суммы оказываются следующими:
Система нормальных уравнений составит:
Решая ее, получим:
Итак, имеем
Аналогично строим систему нормальных уравнений для определения коэффициентов и :
Следовательно,
тогда второе уравнение примет вид
Приведенная форма модели имеет вид
Из приведенной формы модели определяем коэффициенты структурной модели:
Итак, структурная форма модели имеет вид
Пример задачи №12
Рассматривается следующая модель:
где
Требуется:
- В предположении, что имеются временные ряды данных по всем переменным модели, предложите способ оценки ее параметров.
- Как изменится ваш ответ на вопрос п. 1, если из модели исключить тождество дохода?
Решение:
- Модель представляет собой систему одновременных уравнений. Для ответа на вопрос о способе оценки параметров модели проверим каждое ее уравнение на идентификацию.
Модель включает четыре эндогенные переменные и четыре предопределенные переменные (две экзогенные переменные — и и две лаговые эндогенные переменные — и ).
Проверим необходимое условие идентификации для уравнений модели уравнение.
Это уравнение включает две эндогенные переменные и одну предопределенную переменную . Следовательно, число предопределенных переменных, не входящих в это уравнение, плюс 1, больше числа эндогенных переменных, входящих в уравнение: 3 + 1 > 2. Уравнение сверх идентифицировано.
II уравнение.
Уравнение II включает две эндогенные переменные, и не включает три предопределенные переменные. Как и I уравнение, оно сверхидентифицировано.
III уравнение.
Уравнение III тоже включает две эндогенные переменные и не включает три предопределенные переменные. Это уравнение сверхидентифицировано.
IV уравнение.
Уравнение IV представляет собой тождество, параметры которого известны. Необходимости в его идентификации нет.
Проверим для каждого из уравнений достаточное условие идентификации. Для этого составим матрицу коэффициентов при переменных модели:
В соответствии с достаточным условием идентификации определитель матрицы коэффициентов при переменных, не входящих в исследуемое уравнение, не должен быть равен нулю, а ранг матрицы должен быть равен числу эндогенных переменных модели минус 1, т.е. 4-1=3.
I уравнение.
Матрица коэффициентов при переменных, не входящих в уравнение, имеет вид
Ее ранг равен 3, так как определитель квадратной подматрицы 3×3 этой матрицы не равен нулю:
Достаточное условие идентификации для I уравнения выполняется.
II уравнение.
Выпишем матрицу коэффициентов при переменных, не входящих в уравнение:
Ее ранг равен трем, так как определитель квадратной подматрицы 3 х 3 этой матрицы не равен нулю:
Достаточное условие идентификации для II уравнения выполняется.
Ill уравнение.
Выпишем матрицу коэффициентов при переменных, не входящих в уравнение:
Ее ранг равен трем, так как определитель квадратной подматрицы 3 х 3 этой матрицы не равен нулю:
Достаточное условие идентификации для III уравнения выполняется.
Таким образом, все уравнения модели сверхидентифицированы. Для оценки параметров каждого из уравнений будем применять двухшаговый МНК.
Шаг 1. Запишем приведенную форму модели в общем виде:
где — случайные ошибки.
Определим параметры каждого из приведенных выше уравнений в отдельности обычным МНК. Затем найдем расчетные значения
эндогенных переменных , используемых в правой части структурной модели, подставляя в каждое уравнение приведенной формы соответствующее значение предопределенных переменных.
Шаг 2. В исходных структурных уравнениях заменим эндогенные переменные, выступающие в качестве факторных признаков, их расчетными значениями:
Применяя к каждому из полученных уравнений в отдельности обычный МНК, определим структурные параметры
Если из модели исключить тождество дохода, число предопределенных переменных модели уменьшится на 1 (из модели будет исключена переменная ). Число эндогенных переменных модели также снизится на единицу — переменная станет экзогенной. В правых частях функции потребления и функции денежного рынка будут находиться только предопределенные переменные. Функция инвестиций постулирует зависимость эндогенной переменной от эндогенной переменной (которая зависит только от предопределенных переменных) и предопределенной переменной . Таким образом, мы получим рекурсивную систему. Ее параметры можно оценивать обычным МНК, и нет необходимости исследования системы уравнения на идентификацию.
Временные ряды в эконометрических исследованиях
Модели, построенные по данным, характеризующим один объект за ряд последовательных моментов (периодов), называются моделями временных рядов.
Временной ряд — это совокупность значений какого-либо показателя за несколько последовательных моментов или периодов.
Каждый уровень временного ряда формируется из трендовой , циклической и случайной компонент.
Модели, в которых временной ряд представлен как сумма перечисленных компонент, — аддитивные модели, как произведение -мультипликативные модели временного ряда. Аддитивная модель имеет вид:
мультипликативная модель:
Построение аддитивной и мультипликативной моделей сводится к расчету значений для каждого уровня ряда. Построение модели включает следующие шаги:
1) выравнивание исходного ряда методом скользящей средней;
2) расчет значений сезонной компоненты ;
3) устранение сезонной компоненты из исходных уровней ряда и получение выровненных данных в аддитивной или в мультипликативной модели;
4) аналитическое выравнивание уровней или и расчет значений Т с использованием полученного уравнения тренда;
5) расчет полученных по модели значений или ;
6) расчет абсолютных и/или относительных ошибок.
Автокорреляция уровней ряда — это корреляционная зависимость между последовательными уровнями временного ряда:
где
коэффициент автокорреляции уровней ряда первого порядка;
где
коэффициент автокорреляции уровней ряда второго порядка.
Формулы для расчета коэффициентов автокорреляции старших порядков легко получить из формулы линейного коэффициента корреляции.
Последовательность коэффициентов автокорреляции уровней первого, второго и т.д. порядков называют автокорреляционной функцией временного ряда, а график зависимости ее значений от величины лага (порядка коэффициента автокорреляции) — коррело-граммой.
Построение аналитической функции для моделирования тенденции (тренда) временного ряда называют аналитическим выравниванием временного ряда. Для этого чаще всего применяются следующие функции:
• линейная
• гипербола
• экспонента
• степенная функция
• парабола второго и более высоких порядков
Параметры трендов определяются обычным МНК, в качестве независимой переменной выступает время , а в качестве зависимой переменной — фактические уровни временного ряда . Критерием отбора наилучшей формы тренда является наибольшее значение скорректированного коэффициента детерминации .
При построении моделей регрессии по временным рядам для устранения тенденции используются следующие методы.
Метод отклонений от тренда предполагает вычисление трендовых значений для каждого временного ряда модели, например и расчет отклонений от трендов:
Для дальнейшего анализа используют не исходные данные, а отклонения от тренда.
Метод последовательных разностей заключается в следующем: если ряд содержит линейный тренд, тогда исходные данные заменяются первыми разностями:
если параболический тренд — вторыми разностями:
В случае экспоненциального и степенного тренда метод последовательных разностей применяется к логарифмам исходных данных.
Модель, включающая фактор времени, имеет вид
Параметры а и b этой модели определяются обычным МНК.
Автокорреляция в остатках — корреляционная зависимость между значениями остатков за текущий и предыдущие моменты времени.
Для определения автокорреляции остатков используют критерий Дарвина — Уотсона и расчет величины:
Коэффициент автокорреляции остатков первого порядка определяется по формуле
Критерий Дарбина — Уотсона и коэффициент автокорреляции остатков первого порядка связаны соотношением
Эконометрические модели, содержащие не только текущие, но и лаговые значения факторных переменных, называются моделями с распределенным лагом.
Модель с распределенным лагом в предположении, что максимальная величина лага конечна, имеет вид
Коэффициент регрессии при переменной характеризует среднее абсолютное изменение при изменении на 1 ед. своего измерения в некоторый фиксированный момент времени , без учета воздействия лаговых значений фактора . Этот коэффициент называют краткосрочным мультипликатором.
В момент воздействие факторной переменной на результат составит условных единиц; в момент времени воздействие можно охарактеризовать суммой и т.д. Эти суммы называют промежуточными мультипликаторами. Для максимального лага воздействие фактора на результат описывается суммой которая называется долгосрочным мультипликатором.
Величины
называются относительными коэффициентами модели с распределенным лагом. Если все коэффициенты имеют одинаковые знаки, то для любого
Величина среднего лага модели множественной регрессии определяется по формуле средней арифметической взвешенной:
и представляет собой средний период, в течение которого будет происходить изменение результата под воздействием изменения фактора в момент .
Медианный лаг — это период, в течение которого с момента времени будет реализована половина общего воздействия фактора на результат:
где — медианный лаг.
Оценку параметров моделей с распределенными лагами можно проводить согласно одному из двух методов: методу Койка или методу Алмон.
В распределении Койка делается предположение, что коэффициенты при лаговых значениях объясняющей переменной убывают в геометрической прогрессии:
Уравнение регрессии преобразуется к виду
После несложных преобразований получаем уравнение, оценки параметров которого приводят к оценкам параметров исходного уравнения.
В методе Алмон предполагается, что веса текущих и лаговых значений объясняющих переменных подчиняются полиномиальному распределению:
Уравнение регрессии примет вид
Расчет параметров модели с распределенным лагом методом Алмон проводится по следующей схеме:
1) устанавливается максимальная величина лага ;
2) определяется степень полинома , описывающего структуру лага;
3) рассчитываются значения переменных ;
4) определяются параметры уравнения линейной регрессии от ;
5) рассчитываются параметры исходной модели с распределенным лагом.
Модели, содержащие в качестве факторов лаговые значения зависимой переменной, называются моделями авторегрессии, например:
Как и в модели с распределенным лагом, в этой модели характеризует краткосрочное изменение под воздействием изменения на 1 ед. Долгосрочный мультипликатор в модели авторегрессии рассчитывается как сумма краткосрочного и промежуточных мультипликаторов:
Отметим, что такая интерпретация коэффициентов модели авторегрессии и расчет долгосрочного мультипликатора основаны на предпосылке о наличии бесконечного лага в воздействии текущего значения зависимой переменной на ее будущие значения.
Пример задачи №13
По данным за 18 месяцев построено уравнение регрессии зависимости прибыли предприятия (млн руб.) от цен на сырье (тыс. руб. за 1 т) и производительности труда (ед. продукции на 1 работника):
При анализе остаточных величин были использованы значения, приведенные в табл. 4.1.
Требуется:
- По трем позициям рассчитать
- Рассчитать критерий Дарбина — Уотсона.
- Оценить полученный результат при 5%-ном уровне значимости.
- Указать, пригодно ли уравнение для прогноза.
Решение:
- определяется путем подстановки фактических значений и в уравнение регрессии:
Остатки рассчитываются по формуле
Следовательно,
— те же значения, что и , но со сдвигом на один месяц. Результаты вычислений оформим в виде табл. 4.2.
- Критерий Дарбина — Уотсона рассчитывается по формуле
4-4 = 4-3,81 =0,19,
что значительно меньше, чем . Это означает наличие в остатках автокорреляции.
- Уравнение регрессии не может быть использовано для прогноза, так как в нем не устранена автокорреляция в остатках, которая может иметь разные причины. Автокорреляция в остатках может означать, что в уравнение не включен какой-либо существенный фактор. Возможно также, что форма связи неточна, а может быть, в рядах динамики имеется общая тенденция.
Пример задачи №14
Имеются следующие данные о величине дохода на одного члена семьи и расхода на товар (табл. 4.3).
Требуется:
- Определить ежегодные абсолютные приросты доходов и расходов и сделать выводы о тенденции развития каждого ряда.
- Перечислить основные пути устранения тенденции для построения модели спроса на товар в зависимости от дохода.
- Построить линейную модель спроса, используя первые разности уровней исходных динамических рядов.
- Пояснить экономический смысл коэффициента регрессии.
- Построить линейную модель спроса на товар , включив в нее фактор времен». Интерпретировать полученные параметры.
Решение:
Обозначим расходы на товар через , а доходы одного члена семьи — через . Ежегодные абсолютные приросты определяются по формулам
Расчеты можно оформить в виде таблицы (табл. 4.4).
Значения не имеют четко выраженной тенденции, они варьируют вокруг среднего уровня, что означает наличие в ряде динамики линейного тренда (линейной тенденции). Аналогичный вывод можно сделать и по ряду : абсолютные приросты не имеют систематической направленности, они примерно стабильны, а следовательно, ряд характеризуется линейной тенденцией.
Так как ряды динамики имеют общую тенденцию к росту, то для построения регрессионной модели спроса на товар в зависимости от дохода необходимо устранить тенденцию. С этой целью модель может строиться по первым разностям, т.е. , если ряды динамики характеризуются линейной тенденцией.
Другой возможный путь учета тенденции при построении моделей — найти по каждому ряду уравнение тренда:
и отклонения от него:
Далее модель строится по отклонениям от тренда:
При построении эконометрических моделей чаще используется другой путь учета тенденции — включение в модель фактора времени. Иными словами, модель строится по исходным данным, но в нее в качестве самостоятельного фактора включается время, т.е. .
Модель имеет вид
Для определения параметров и применяется МНК. Система нормальных уравнений следующая:
Применительно к нашим данным имеем
Решая эту систему, получим:
откуда модель имеет вид
Коэффициент регрессии
Он означает, что с ростом прироста душевого дохода на 1%-ный пункт расходы на товар увеличиваются со средним ускорением, равным 0,565 руб.
Модель имеет вид
Применяя МНК, получим систему нормальных уравнений:
Расчеты оформим в виде табл. 4.5.
Система уравнений примет вид
Решая ее, получим
Уравнение регрессии имеет вид
Параметр фиксирует силу связи и . Его величина означает, что с ростом дохода на одного члена семьи на 1%-ный пункт при условии неизменной тенденции расходы на товар А возрастают в среднем на 0,322 руб. Параметр характеризует среднегодовой абсолютный прирост расходов на товар под воздействием прочих факторов при условии неизменного дохода.
Пример задачи №15
По данным за 30 месяцев некоторого временного ряда были получены значения коэффициентов автокорреляции уровней;
Требуется:
- Охарактеризовать структуру этого ряда, используя графическое изображение.
- Для прогнозирования значений в будущие периоды предполагается построить уравнение авторегрессии. Выбрать наилучшее уравнение, обосновать выбор. Указать общий вид этого уравнения.
Решение:
- Так как значения всех коэффициентов автокорреляции достаточно высокие, ряд содержит тенденцию. Поскольку наибольшее абсолютное значение имеет коэффициент автокорреляции 4-го порядка , ряд содержит периодические колебания, цикл этих колебаний равен 4.
Наиболее целесообразно построение уравнения авторегрессии:
так как значение = 0,97 свидетельствует о наличии очень тесной связи между уровнями ряда с лагом в 4 месяца.
Кроме того, возможно построение и множественного уравнения авторегрессии от и , так как = 0,72:
Сравнить полученные уравнения и выбрать наилучшее решение можно с помощью скорректированного коэффициента детерминации.
Пример задачи №16
На основе помесячных данных о числе браков (тыс.) в регионе за последние три года была построена аддитивная модель временного ряда. Скорректированные значения сезонной компоненты за соответствующие месяцы приводятся в табл. 4.6.
Уравнение тренда выглядит следующим образом:
при расчете параметров тренда использовались фактические моменты времени .
Требуется:
- Определить значение сезонной компоненты за декабрь.
- На основе построенной модели дать прогноз общего числа браков, заключенных в течение первого квартала следующего года.
Решение:
- Сумма значений сезонной компоненты внутри одного цикла должна быть равна нулю (в соответствии с методикой построения аддитивной модели временного ряда). Следовательно, значение сезонной компоненты за декабрь составит:
Число браков, заключенных в первом квартале следующего года, есть сумма числа браков, заключенных в январе в феврале и в марте .
Для расчета трендовых значений воспользуемся уравнением тренда, указанным в условии задачи:
Соответствующие значения сезонных компонент составят:
Таким образом,
Количество браков, заключенных в первом квартале следующего года, составит: 2,61 + 5,64 + 3,17 = 11,42 тыс., или 11420.
Пример задачи №17
Динамика выпуска продукции Финляндии характеризуется данными (млн долл.), представленными в табл. 4.7.
Требуется:
- Провести расчет параметров линейного и экспоненциального трендов.
- Построить графики ряда динамики и трендов.
- Выбрать наилучший вид тренда на основании графического изображения и значения коэффициента детерминации.
Реализация типовых задач в Excel
Решение с использованием ППП MS Excel
- Для определения параметров линейного тренда по методу наименьших квадратов используется статистическая функция ЛИНЕЙН, для определения экспоненциального тренда -ЛГРФПРИБЛ. Порядок вычисления был рассмотрен в 1-м разделе практикума. В качестве зависимой переменной в данном примере выступает время . Приведем результаты вычисления функций ЛИНЕЙН и ЛГРФПРИБЛ (рис. 4.2 и 4.3).
Запишем уравнения линейного и экспоненциального тренда, используя данные рис. 4.2 и 4.3:
- Построение графиков осуществляется с помощью Мастера диаграмм.
Порядок построения следующий:
1) введите исходные данные или откройте существующий файл, содержащий анализируемые данные;
2) активизируйте Мастер диаграмм любым из следующих способов:
а) в главном меню выберите Вставка/Диаграмма;
б) на панели инструментов Стандартная щелкните по кнопке Мастер диаграмм;
3) в окне Тип выберите График (рис. 4.4); вид графика выберите в поле рядом со списком типов. Щелкните по кнопке Далее;
4) заполните диапазон данных, как показано на рис. 4.5. Установите флажок размещения данных в столбцах (строках). Щелкните по кнопке Далее;
5) заполните параметры диаграммы на разных закладках (рис. 4.6): названия диаграммы и осей, значения осей, линии сетки, параметры легенды, таблица и подписи данных. Щелкните по кнопке Далее;
6) укажите место размещения диаграммы на отдельном или на имеющемся листе (рис. 4.7). Щелкните по кнопке Далее. Готовая диаграмма, отражающая динамику уровней изучаемого ряда, представлена на рис. 4.8.
В ППП MS Excel линия тренда может быть добавлена в диаграмму с областями гистограммы или в график. Для этого:
1) выделите область построения диаграммы; в главном меню выберите Диаграмма/Добавить линию тренда;
2) в появившемся диалоговом окне (рис. 4.9) выберите вид линии тренда и задайте соответствующие параметры. Для полиномиального тренда необходимо задать степень аппроксимирующего полинома, для скользящего среднего — количество точек усреднения.
В качестве дополнительной информации на диаграмме можно отобразить уравнение регрессии и значение среднеквадратического отклонения, установив соответствующие флажки на закладке Параметры (рис. 4.10). Щелкните по кнопке ОК.
На рис. 4.11 — 4.15 представлены различные виды трендов, описывающие исходные данные задачи.
Сравним значения по разным уравнениям трендов: полиномиальный 6-й степени — = 0,9728; экспоненциальный — = 0,9647; линейный — = 0,8841; степенной — = 0,8470; логарифмический — = 0,5886.
Исходные данные лучше всего описывает полином 6-й степени. Следовательно, в рассматриваемом примере для расчета прогнозных значений следует использовать полиномиальное уравнение.
Кстати готовые на продажу задачи тут, и там же теория из учебников может быть вам поможет она.
Пример задачи №18
Имеются данные о динамике товарооборота и доходов населения России за 1997 — 1999 гг. (табл. 4.8).
Требуется:
- Оценить параметры модели с распределенными лагами методом Алмон.
- Постройте таблицу результатов дисперсионного анализа. Оцените значимость построенной модели.
Решение:
Решение с использованием ППП Statistica
- Для построения регрессионной модели с распределенными лагами необходимо априори задать длину максимального лага, для этой задачи выберем длину 3. Тогда уравнение регрессии будет выглядеть следующим образом:
Для оценки параметров этой модели согласно методу Алмон необходимо задать степень аппроксимирующего полинома. Для решения используем соответствующую процедуру ППП Statistica. Порядок расчетов следующий:
1) введите исходные данные или откройте существующий файл другого формата, содержащий анализируемые данные, в опции Data Management в окне переключения модулей (рис. 4.16). Если создаете новый файл данных, в соответствующих ячейках укажите количество строк и столбцов. В нашем случае — 2 столбца, 36 строк;
2) из модуля управления данными перейдите в модуль анализа временных рядов, выбрав в меню пункт Time Series / Forecasting;
3) откройте файл, содержащий данные — Open Data (рис. 4.17);
4) выделите все переменные, используемые для анализа, — Variables. Щелкните по кнопке ОК (рис. 4.18).
5) щелкните по кнопке Distributed lags analysis (см. рис. 4.17);
6) в окне Distributed Lags Analysis (рис. 4.19) выделите название зависимой переменной, в появляющемся окне Independent variable -название независимой переменной. В ячейке Lag length укажите значение максимального лага, в ячейке Almon polynomial lags — степень аппроксимирующего полинома. Степень полинома не должна превышать значение максимального лага. Щелкните по кнопке ОК (Begin analysis);
7) результаты расчетов — оценки регрессионных коэффициентов и значимость уравнения — приведены на рис. 4.20 и 4.21.
Согласно данным таблицы дисперсионного анализа (см. рис. 4.21), полученные значения -критерия Фишера и коэффициента детерминации показывают высокий уровень аппроксимации исходных данных.
Задачи с решением по всем темам эконометрики
Эконометрика – это раздел экономики, занимающийся разработкой и применением статистических методов для измерений взаимосвязей между экономическими переменными.
Эконометрика – это самостоятельная научная дисциплина, объединяющая совокупность теоретических результатов, приемов, методов и моделей.
Парный регрессионный анализ. Функциональная, статистическая и корреляционная зависимости
Из математики известно понятие функциональной зависимости (связи), когда каждому значению одной переменной соответствует вполне определенное значение другой (например, площадь круга в зависимости от радиуса и т.д.).
В экономике в большинстве случаев между переменными величинами существуют зависимости, когда каждому значению одной переменной соответствует не какое-то определенное, а множества возможных значений другой переменной Иначе говоря, каждому значению одной переменной соответствует определенное (условное) распределение другой переменной. Такая зависимость получила название статистической (или стохастической, вероятностной).
Возникновение понятия статистической связи обуславливается тем, что зависимая переменная подвержена влиянию множества неконтролируемых или неучтенных факторов, а таюке тем, что измерение значений переменных сопровождается случайными ошибками. Примером статистической связи является зависимость урожайности от количества внесенных удобрений, производительности труда на предприятии от его энерговооруженности и т.п.
В силу неоднозначности статистической зависимости между и представляет интерес усредненная по схема зависимости, т. е. закономерность в измерении условного математического ожидания (математического ожидания случайной переменной , вычисленного в предположении, что переменная приняла значение ) в зависимости от .
Корреляционной зависимостью между двумя переменными называется функциональная зависимость между значениями одной из них и условным математическим ожиданием другой.
Корреляционная зависимость может быть представлена в виде
где
В регрессионном анализе рассматривается односторонняя зависимость случайной переменной от одной (или нескольких) неслучайной независимой переменной . Такая зависимость от (иногда ее называют регрессионной) может быть представлена в виде модельного уравнения регрессии по (1.1). При этом -зависимую переменную называют также функцией отклика объясняемой, выходной. результирухпцей. эндогенной переменной, результативным признаком, а независимую переменную — объясняющей, входной. предскашлаюгцей, предикторной, экзогенной переменной, фактором, регрессором, факторным признаком.
Уравнение (1.1) называется модельным уравнением регрессии (или просто уравнением регрессии), а функция — модельной функцией регрессии (или просто функцией регрессии), а ее график — модельной линией регрессии (или просто линией регрессии).
Для точного описания уравнения регрессии необходимо знать условный закон распределения зависимой переменной при условии, что переменная примет значение , т.е. . На практике такую информацию получить, как правило, не удается, так как обычно исследователь располагает лишь выборкой пар значений ограниченного объема . В этом случае речь может идти об оценке {приближенном выражении, аппроксимации) по выборке функции регрессии. Такой оценкой является выборочная линия (кривая) регрессии
где —условная (групповая) средняя переменной при фиксированном значении переменной ;
— параметры кривой.
Уравнение (1.2) называется выборочным уравнением регрессии
При правильно определенной аппроксимирующей функции с увеличением объема выборки она будет сходиться по вероятности к функции регрессии
Линейная парная регрессия
Рассмотрим в качестве примера зависимость между сменной добычей угля на одного рабочего (в тоннал) и мощностью пласта (в метрах) по следующим (условным) данным, характеризующим процесс добычи угля в = 10 шахтах.
Изобразим полученную зависимость графически точками координатной плоскости (рис. 1.1). Такое изображение статистической зависимости называется полем корреляции.
По расположению эмпирических точек можно предполагать наличие линейной корреляционной (регрессионной) зависимости между переменными и . Поэтому уравнение регрессии (1.2) будем искать в виде линейного уравнения
Найдем формулы расчета неизвестных параметров уравнения линейной регрессии. Согласно методу наименьших квадратов неизвестные параметры и выбираются таким образом, чтобы сумма квадратов отклонений эмпирических значений от значений найденных по уравнению регрессии (3.3), была минимальной:
На основании необходимого условия экстремума функции двух переменных приравниваем к нулю ее частные производные, т. е.
откуда после преобразований получим систему нормальных уравнений для определения параметров линейной регрессии
Разделив обе части уравнений (1.5) на , получим систему нормальных уравнении в виде:
где соответствующие средние определяются по формулам:
Решая систему (1.6), найдем
Коэффициент называется выборочным коэффициентом регрессии (или просто коэффициентом регрессии) по
Коэффициент регрессии по показывает, на сколько единиц в среднем изменяется переменная при увеличении переменной на одну единицу.
выборочная дисперсия переменной .
выборочная ковариация.
Уравнение регрессии примет вид:
Задача №1.1.
По данным табл. 1.1 найти уравнение регрессии по .
Решение:
Вычислим все необходимые суммы:
Затем находим параметры уравнения регрессии:
Уравнение регрессии по имеет вид:
Из полученного уравнения регрессии (см. рис. I 1) следует, что при увеличении мощности пласта на 1 м добыча угля на одного рабочего увеличивается в среднем на 1,12т .
Коэффициент корреляции
Оценим тесноту корреляционной зависимости. Рассмотрим случай линейной зависимости вида (1.10):
На первый взгляд, подходящим измерителем тесноты связи от является коэффициент регрессии , так как он показывает, на сколько единиц в среднем изменяется , когда увеличивается на одну единицу. Однако зависит от единиц измерения переменных Например, в полученной ранее зависимости он увеличится в 100 раз, если мощность пласта выразить не в метрах, а в сантиметрах. Поэтому для выбора показателя тесноты связи нужна такая система единиц измерения, в которой данные по различным характеристикам оказались бы сравнимы между собой. Представим уравнение (1.10) в эквивалентном виде:
В этом выражении величина показывает на сколько величин изменится в среднем , когда увеличится на одно .
Величина является показателем тесноты связи и называется выборочным коэффициентом корреляции (или просто коэффициентом корреляции). Две корреляционные зависимости переменной от приведены на рис. 1.2. Очевидно, что в случае а) зависимость между переменными менее тесная и коэффициент корреляции должен быть меньше, чем в случае б), так как точки корреляционного поля а) дальше отстоят от линии регрессии, чем точки поля б).
Если то корреляционная связь между переменными называется прямой, если — обратной. При прямой (обратной) связи увеличение одной из переменных ведет к увеличению (уменьшению) условной (групповой) средней другой. Учитывая (1.9), формулу для представим в виде:
Отметим другие модификации формулы :
Выборочный коэффициент корреляции (при достаточно большом объеме выборки ) обладает следующими свойствами.
- Коэффициент корреляции принимает значения на отрезке [-1;1], т.е. . Чем ближе к единице, тем теснее связь.
- При корреляционная связь представляет линейную функциональную зависимость. При этом все наблюдаемые значения располагаются на прямой линии (рис. 1.3 а, 6).
- При линейная корреляционная связь отсутствует. При этом линия регрессии параллельна оси (рис. 1.3 в).
Следует отметить, что является непосредственно оценкой генерального коэффициента корреляции между и лишь в случае двумерного нормального закона распределения случайных величин и . В других случаях (когда распределения и отклоняются от нормального, одна из исследуемых величин, например , не является случайной и т.п.) выборочный коэффициент корреляции не следует рассматривать как строгую меру взаимосвязи переменных.
Возможно эта страница вам будет полезна:
Задача №1.2.
По данным табл. 1.1 вычислить коэффициент корреляции между переменными и
Решение:
В примере 1.1 были вычислены суммы
Вычислим сумму:
Вычислим коэффициент корреляции:
т. е. связь между переменными достаточно тесная
Основные положения регрессионного анализа. Оценка параметров парной регрессионной модели
Рассматриваемая в регрессионном анализе зависимость от может быть представлена в виде молельного уравнения регрессии (1.1), но из-за воздействия неучтенных случайных факторов и причин отдельные наблюдения переменной будут в большей или меньшей мере отклоняться от функции регрессии . В этом случае уравнение взаимосвязи двух переменных может быть представлено в виде:
где — случайная переменная (случайный член), характеризующая отклонение от функции регрессии. Эту переменную будем называть возмущающей или просто возмущением (либо ошибкой). Таким образом, в регрессионной модели зависимая переменная есть некоторая функция с точностью до случайного возмущения .
Рассмотрим линейный регрессионный анализ, для которого функция линейна относительно оцениваемых параметров:
Предположим, что для оценки параметров линейной функции регрессии (1.16) взята выборка, содержащая пар значений переменных , где . В этом случае линейная парная регрессионная модель имеет вид:
Отметим основные предпосылки регрессионного анализа.
(или математическое ожидание зависимой переменной — равно линейной функции регрессии:
или
условие гомоскедастичности или равноизменчивости возмущения (зависимой переменной)).
В этом случае модель (1.17) называется классической нормальной линейной регрессионной моделью.
Для получения уравнения регрессии достаточно предпосылок 1-4. Требование выполнения предпосылки 5 (т. е. рассмотрение «нормальной регрессии») необходимо для оценки точности уравнения регрессии и его параметров.
Оценкой модели (1.17) по выборке является уравнение регрессии
Параметры этого уравнения и определяются на основе метода наименьших квадратов.
Воздействие неучтенных случайных факторов и ошибок наблюдений в модели (1.17) определяется с помощью дисперсии возмущений (ошибок) или остаточной дисперсии . Несмещенной оценкой этой дисперсии является выборочная остаточная дисперсия
где — групповая средняя, найденная по уравнению регрессии; — выборочная оценка возмущения или остаток репрессии.
В знаменателе выражения (1.18) стоит число степеней свободы , так как две степени свободы теряются при определении двух параметров прямой из системы нормальных уравнений (1.5).
Ответ на вопрос, являются ли оценки параметров «наилучшими», дает следующая теорема.
Теорема Гаусса—Маркова. Если регрессионная модель (1.17) удовлетворяет предпосылкам 1 -4 , то оценки и имеют наименьшую дисперсию в классе всех линейных несмещенных оценок. Таким образом, оценки и в определенном смысле являются наиболее эффективными линейными оценками параметров и .
Интервальная оценка функции регрессии и ее параметров
Построим доверительный интервал для функции регрессии, т.е. для условного математического ожидания , который с заданной надежностью (доверительной вероятностью) накрывает неизвестное значение .
Найдем дисперсию групповой средней представляющей выборочную оценку . С этой целью уравнение регрессии (1.10) представим в виде:
На рис. 1.4 линия регрессии (1.19) изображена графически. Для произвольного наблюдаемого значения выделены его составляющие: средняя , приращение , образующие расчетное значение и остаток .
Дисперсия групповой средней равна сумме дисперсий двух независимых слагаемых выражения (1.19):
Здесь учтено, что — неслучайная величина, при вынесении которой за знак дисперсии ее необходимо возвести в квадрат.
Дисперсии выборочной средней и параметра находятся по формулам
Оценка дисперсии групповых средних вычисляется по формуле:
Основываясь на предпосылках 1 — 5 регрессионного анализа можно показать, что статистика имеет — распределение Стьюдента с степенями свободы и построить доверительный интервал для условного математического ожидания :
где — стандартная ошибка групповой средней . Из формул (1.22) и (1.23) видно, что величина (длина) доверительного интервала зависит от значения объясняющей переменной : три она минимальна, а по мере удаления от величина доверительного интервала увеличивается (рис. 1.5). Таким образом, прогноз значений (определение неизвестных значений) зависимой переменной по уравнению регрессии оправдан, если значение объясняющей переменной не выходит за диапазон ее значений по выборке (причем тем более точный, чем ближе к ). Другими словами, экстраполяция кривой регрессии, т.е. ее использование вне пределов обследованного диапазона значений объясняющей переменной (даже если она оправдана для рассматриваемой переменной исходя из смысла решаемой задачи) может привести к значительным погрешностям
Определим доверительный интервал для индивидуальных значений зависимой переменной. Построенная доверительная область для (см. рис. 1.5) определяет местоположение модельной линии регрессии (т.е. условного математического ожидания), но не отдельных возможных значений зависимой переменной, которые отклоняются от средней. Поэтому при определении доверительного интервала для индивидуальных значений зависимой переменной необходимо учитывать еще один источник вариации рассеяние вокруг линии регрессии, т.е. в оценку суммарной дисперсии следует включить величину . В результате оценка дисперсии индивидуальных значений при равна
а соответствующий доверительный интервал для прогнозов индивидуальных значений будет определятся по формуле:
Построим доверительный интервал для параметров регрессионной модели, в частности для параметров регрессионной модели и .
При выполнении предпосылки 5 регрессионного анализа статистика имеет нормальный закон распределения, а статистика
имеет -распределение Стьюдента с степенями свободы.
Поэтому интервальная опенка параметра на уровне значимости а имеет вид:
При построении доверительного интервала для параметра снисходят из того, что статистика имеет -распределение с степенями свободы. Поэтому интервальная оценка для на уровне значимости имеет вид :
доверительный интервал выбирается таким образом, чтобы
Задача №1.3.
По данным табл. 1.1 требуется:
1) оценить сменную среднюю добычу угля на одного рабочего для шахт с мощностью пласта 8 м;
2) найти 95% — ные доверительные интервалы для индивидуального и среднего значений сменной добычи угля на 1 рабочего для таких же шахт;
3) найти с надежностью 0,95 интервальные оценки коэффициента рецессии и дисперсии .
Решение:
Уравнение регрессии по было получено в примере ранее , т.е. при увеличении мощности пласта на 1м добыча угля на одного рабочего увеличивается в среднем на 1,12 т.
Для построения доверительного интервала для необходимо знать дисперсию его оценки, т.е. . Составим вспомогательную таблицу подставив значение в полученное уравнению регрессии.
Подставим из таблицы найденные значения в формулы
Следовательно
По таблице значений -критерия Стьюдента находим . Искомый доверительный интервал имеет вид
Средняя сменная добыча угля на одного рабочего для шахт с мощностью пласта 8м с надежностью 0,95 находится в пределах от 2,77 до 6,03 т. 2. Чтобы построить доверительный интервал для индивидуального значения найдем дисперсию его оценки по формуле:
Искомый доверительный интервал примет вид:
Таким образом, индивидуальная сменная добыча угля на одного рабочего для шахт с мощностью пласта 8м с надежностью 0,95 находится в пределах от 0,57 до 8,23 т.
- Найдем 95% -ный доверительный интервал для параметра по формуле (1.27)
т. е. с надежностью 0,95 при изменении мощности пласта на 1м суточная выработка будет изменяться на величину, заключенную в интервале от 0,332 до 1,907 (т).
Найдем 95%-ный доверительный интервал для параметра
Учитывая, что , найдем по таблице значений -критерия Пирсона
Подставим найденные значения в формулу для оценки интервала получим:
Таким образом, с надежностью 0,95 дисперсия возмущений заключена в пределах от 1,29 до 10,36, а их стандартное отклонение — от 1,13 до 3,22 (т).
Оценка значимости уравнения регрессии. Коэффициент детерминации
Проверить значимость уравнения регрессии — значит установить, соответствует ли математическая модель, выражающая зависимость между переменными, экспериментальным данным и достаточно ли включенных в уравнение объясняющих переменных (одной или нескольких) для описания зависимой переменной.
Проверка значимости уравнения регрессии производится на основе дисперсионного анализа.
Согласно основной идее дисперсионного анализа
или
где — общая сумма квадратов отклонений зависимой переменной от средней; — сумма квадратов, обусловленная регрессией; — остаточная сумма квадратов, характеризующая влияние неучтенных факторов
Нетрудно убедиться, что третье слагаемое
Представим полученные соотношения в виде таблицы 1.3
Средние квадраты и представляют собой несмещенные оценки дисперсий зависимой переменной, обусловленных соответственно регрессий или объясняющей переменной и воздействием неучтенных случайных факторов и ошибок; — число оцениваемых параметров уравнения регрессии; — число наблюдений.
Уравнение регрессии значимо на уровне , если фактически наблюдаемое значение статистики
Задача №1.4.
По данным табл. 1.1 оценить на уровне значимость уравнения регрессии по .
Решение:
Ранее, были
Вычислим суммы квадратов для определения компонент дисперсии:
Находим значение — распределения
По таблице значений -распределения Фишера определяем табличное значение
Так как
то уравнение регрессии значимо.
Одной из наиболее эффективных оценок адекватности регрессионной модели, мерой качества уравнения регрессии, (или, как говорят, мерой качества подгонки регрессионной модели к найденным значениям ), характеристикой прогностической анализируемой регрессионной модели является коэффициент детерминации, определяемый по формуле
Величина показывает, какая часть (доля) вариации зависимой переменной обусловлена вариацией объясняющей переменной.
Так как , то Чем ближе к единице, тем лучше регрессия аппроксимирует эмпирические данные, тем теснее наблюдения примыкают к линии регрессии. Если , то эмпирические точки лежат на линии регрессии (см. рис. 1.3 а.б) и между переменными и существует линейная функциональная зависимость. Если то (вариация зависимой переменной полностью обусловлена воздействием неучтенных в модели переменных, и линия регрессии параллельна оси абсцисс (рис. 1.3 в).
Заметим, что коэффициент имеет смысл рассматривать только при наличии свободного члена в уравнении регрессии, так как лишь в этом случае, как уже отмечалось, верно, равенство (1.29), а следовательно, и соотношение (1.32).
Если известен коэффициент детерминации , то критерий значимости (1.30) уравнения регрессии или самого коэффициента детерминация может быть записан в виде
В случае парной линейной регрессионной модели коэффициент детерминации равен квадрату коэффициента корреляции, т. е. .
Задача №1.5.
По данным табл. 1.1 найти коэффициент детерминации и пояснить его смысл.
Решение:
В примере 1.4 было получено . Находим
Коэффициент детерминации можно было вычислить и иначе, если учесть, что в примере 1.2 был вычислен коэффициент корреляции . Так как для парной линейной регрессионной модели , то .
Это означает, что вариация зависимой переменной — сменной добычи угля на одного рабочего — на 62% объясняется изменчивостью объясняющей переменной — мощностью пласта.
Множественный регрессионный анализ. Классическая нормальная линейная модель множественной регрессии
Экономические явления, как правило, определяются большим числом одновременно и совокупно действующих факторов. В связи с этим часто возникает задача исследования зависимости одной зависимой переменной от нескольких объясняющих переменных . Эта задача решается с помощью множественного регрессионного анализа.
Обозначим -е наблюдение зависимой переменной а объясняющих переменных — . Тогда модель множественной линейной регрессии можно представить в виде:
где
— удовлетворяет приведенным выше (см. Главу 1) предпосылкам 1-5.
Включение в регрессионную модель новых объясняющих переменных приводит к целесообразности использования матричных обозначений. Магричное описание регрессии облегчает как теоретические концепции анализа, так и необходимые расчетные процедуры.
Введем обозначения:
— матрица-столбец, или вектор значений зависимой переменной размерности ;
матрица значений объясняющих переменных, или матрица плана размерности (в матрицу дополнительно введен столбец, все элементы которого равны 1, т.е. условно полагается, что в модели свободный член умножается на фиктивную переменную принимающую значение 1 дня всех ;
— матрица-столбец, или вектор параметров размерности ,
— матрица-столбец, или вектор, возмущений (случайных ошибок, остатков) размера .
Тогда в матричной форме модель примет вид:
Оценкой этой модели по выборке является уравнение
где
Оценка параметров классической регрессионной модели методом наименьших квадратов
Для оценки вектора неизвестных параметров применим метод наименьших квадратов.
Условие минимизации остаточной суммы квадратов запишется в виде:
На основании необходимого условия экстремума функции нескольких переменных необходимо приравнять нулю частные производные по этим переменным или в матричной форме— вектор частных производных
После вычисления вектора частных производных приравняем его 0 — , откуда получаем систему нормальных уравнений в матричной форме для определения вектора :
Для решения этого матричного уравнения относительно вектора оценок параметров введём еще одну предпосылку о том, что матрица является неособенной, т. е. ее определитель не равен нулю. Следовательно, ранг матрицы равен ее порядку, т.е. но , значит, (ранг матрицы плана равен числу ее столбцов). В соответствии с этим сформулируем упомянутую выше предпосылку множественного регрессионного анализа в следующем виде:
Кроме того, полагают, что число имеющихся наблюдений (значений) каждой из объясняющих и зависимой переменных превосходит ранг-матрицы , т. е. или , ибо в противном случае в принципе невозможно получение сколько-нибудь надежных статистических выводов.
В новых терминах приведенные ранее предпосылки для множественного регрессионного анализа могут быть записаны следующим образом:
Модель (2.2), удовлетворяющая приведенным предпосылкам 1-6, называется классической нормальной линейной моделью множественной регрессии, если же среди приведенных не выполняется лишь предпосылка о нормальном законе распределения вектора возмущений с , то модель называется просто классической линейной моделью множественной рефессии.
Решением уравнения (2.4) является вектор
где — матрица, обратная матрице , — матрица-столбец, или вектор ее свободных членов.
Рассмотренная выше для парной регрессионной модели теорема Гаусса — Маркова оказывается верной для модели (2.2) множественной регрессии и может быть сформулирована в следующем виде
При выполнении предпосылок множественного регрессионного анализа оценка метода наименьших квадратов является наиболее эффективной, т е обладает наименьшей дисперсией в классе линейных несмещенных оценок.
Зная вектор , выборочное уравнение множественной регрессии представим в виде:
где групповая (условная) средняя переменной при заданном векторе значений объясняющей переменной
Задача №2.1.
Имеются следующие данные о сменной добыче угля на одного рабочего (т), мощности пласта (м) и уровне механизации работ (%), характеризующие процесс добычи угля в 10 шахтах. Предполагая, что между переменными , и существует линейная корреляционная зависимость, найти ее аналитическое выражение (уравнение регрессии по и ).
Решение:
Обозначим
(в матрицу вводится дополнительный столбец чисел, состоящий из единиц).
Для удобства вычислений составляем вспомогательную таблицу.
Вычислим матрицы:
Умножим матрицу на вектор и получим
Уравнение множественной регрессии имеет вид:
Оно показывает, что при увеличении только мощности пласта (при неизменном ) на 1м добыча угля на одного рабочего увеличивается в среднем на 0,660 т, а при увеличении только уровня механизации работ (при неизменной ) — в среднем на 0,90 т.
Добавление в регрессионную модель новой объясняющей переменной изменило коэффициент регрессии ( по ) с 1,12 для парной регрессии (см. пример 1.1) до 0,66 — для множественной регрессии. В случае парной регрессии учитывает воздействие на не только переменной но и косвенно корреляционно связанной с ней переменной .
Ковариационная матрица и ее выборочная оценка
Вариации оценок параметров определяют точность уравнения множественной регрессии. Для их измерения в многомерном регрессионном анализе рассматривают так называемую ковариационную матрицу вектора оценок параметров , являющуюся матричным аналогом дисперсии одной переменной
где элементы — ковариации (или корреляционные моменты) оценок параметров и . Ковариация двух переменных определяется как математическое ожидание произведения отклонений этих переменных от их математических ожиданий:
Учитывая, что оценки , полученные методом наименьших квадратов, являются несмещенными оценками параметров , т. е. выражение примет вид
Ковариация характеризует как степень рассеяния значений двух переменных относительно их математических ожиданий, так и взаимосвязь этих переменных.
Определение доверительных интервалов для коэффициентов и функции регрессии
Доверительный интервал для параметров регрессионной модели
Оценка дисперсии коэффициента регрессии определяется по формуле:
где — несмещенная оценка параметра ;
— диагональный элемент матрицы Среднее квадратическое отклонение (стандартная ошибка) коэффициента регрессии вычисляется по формуле:
Учитывая, что статистика имеет -распределение Стьюдента с степенями свободы, можно проверить значимость коэффициента регрессии . Гипотеза о равенстве параметра нулю отвергается, если , где табличное значение -критерия Стьюдента, определенное на уровне значимости при числе степеней свободы , т. е. отличается от нуля на уровне значимости .
В обшей постановке гипотеза о равенстве параметра заданному числу отвергается, если
Доверительный интервал для параметра имеет вид.
- Доверительный интервал для функции репрессии или для условного математического ожидания зависимой переменной
где — групповая средняя, определяемая по уравнению регрессии;
— ее стандартная ошибка, определяемая по формуле:
- Доверительный интервал для индивидуальных значений зависимой переменной
где
- Доверительный интервал для параметра .
В множественной регрессии он строится аналогично парной модели с соответствующим изменением числа степеней свободы с критерия
Задача №2.2
По данным примера 2.1 оценить сменную добычу угля на одного рабочего для шахт с мощностью пласта 8 м и уровнем механизации работ 6%; наши 95%-ные доверительные интервалы для индивидуального и среднего значений сменной добычи угля на одного рабочего для таких же шахт. Проверить значимость коэффициентов регрессии и построить для них 95%-ные доверительные интервалы. Найти интервачьную оценку для дисперсии .
Решение:
В примере 2.1 уравнение регрессии получено в виде
По условию надо оценить , где . Выборочной оценкой является групповая средняя, которую найдем по уравнению регрессии:
Для построения доверительного инггерала для воспользуемся формулой (2.11). Вначале найдем дисперсию . При ей вычислении используем две последних строки табл. 2.2 (групповые средние в них определяются по полученному уравнению регрессии).
Находим
Вычисляем
По таблице значений — критерия Стьюдента при числе степеней свободы
находим . Следовательно, доверительный интервал для равен
Итак, с надежностью 0,95 средняя сменная добыча угля на одного рабочего для шахт с мощностью пласта 8 м и уровнем механизации работ 6% находится в пределах от 4,27 до 7,29 т.
Сравнивая новый доверительный интервал для функции регрессии , полученный с учетом двух объясняющих переменных, с аналогичным интервалом с учетом одной объясняющей переменной (см пример 1.3), можно заметить некоторое уменьшение его величины.
Это связано с тем, что включение в модель новой объясняющей переменной позволяет несколько повысить точность модели за счет увеличения взаимосвязи зависимой и объясняющей переменных.
Найдем доверительный интервал для индивидуального значения при
Вычислим
Итак, с надежностью 0,95 индивидуальное значение сменной добычи угля в шахтах с мощностью пласта 8 м и уровнем механизации работ 6% находится в пределах от 2,80 до 8,76 (т).
Проверим значимость коэффициентов регрессии и . Для стандартная ошибка равна
Так как
тo коэффициент значим.
Аналогично для стандартная ошибка, равна
т. е. коэффициент значим.
Доверительный интервал коэффициента регрессии имеет вид;
Доверительный интервал коэффициента регрессии имеет вид:
Итак, с надежностью 0,95 за счет изменения на 1 м мощности пласта (при неизменном ) сменная добыча угля на одного рабочего будет изменяться в пределах от 0,15 до 1,17 (т), а за счёт изменения на 1% механизации работ (при неизменном ) значения будут изменяться в пределах от 0,27 до 1,53 (т).
Найдем 95%-ный доверительный интервал для параметра . Учитывая, что
степени свободы найдем по таблице значений критерия Пирсона
С помощью формулы (2.14) находим интервал
Таким образом, с надежностью 0,95 дисперсия возмущений заключена в пределах от 0,738 до 6,99, а их стандартное отклонение — от 0,859 до 2,64(т).
Оценка значимости множественной регрессии. Коэффициенты детерминации R²
В модели множественной регрессии, как и в случае парной регрессионной модели, общая вариация — сумма квадратов отклонений зависимой переменной от средней может быть разложена на две составляющие:
где — соответственно сумма квадратов отклонений, обусловленная регрессией, и остаточная сумма квадратов, характеризующая влияние неучтенных факторов. Они вычисляются по следующим формулам:
Уравнение множественной регрессии значимо (иначе — гипотеза о равенстве нулю параметров регрессионной модели, т. е.
отвергается), если
где — табличное значение -критерия Фишера — Снелекора.
Коэффициент детерминации является оценкой адекватности модели, мерой качества уравнения регрессии, характеристикой его прогностической силы Множественный коэффициент детерминации определяется по формулам;
Величина характеризует долю вариации зависимой переменной, обусловленной регрессией или изменчивостью объясняющих переменных; чем ближе к единице, тем лучше регрессия описывает зависимость между объясняющими и зависимой переменными.
Вместе с тем использование только одного коэффициента детерминации для выбора наилучшего уравнения регрессии может оказаться недостаточным. Недостатком коэффициента детерминации является то, что он, вообще говоря, увеличивается при добавлении новых объясняющих переменных, хотя это и не обязательно означает улучшение качества регрессионной модели. На практике встречаются случаи, когда плохо определенная модель регрессии может дать сравнительно высокий коэффициент .
Поэтому предпочтительнее использовать скорректированный (адаптированный, поправленный) коэффициент детерминации определяемый по формулам:
Из формул следует, что чем больше число объясняющих переменных , тем меньше по сравнению с . В отличие от скорректированный коэффициент может уменьшаться при введении в модель новых объясняющих переменных, не оказывающих существенного влияния на зависимую переменную. Однако даже увеличение скоррекгированного коэффициента детерминации при введении в модель новой объясняющей переменной не всегда получается, что ее коэффициент регрессии значим (это происходит, как можно показать, только в случае, если соответствующее значение -статистики больше единицы (по абсолютной величине), т. е. . Другими словами, увеличение еще не означает улучшения качества регрессионной модели.
Если известен коэффициент детерминации , то критерий значимости уравнения регрессии может быть записан в виде:
где , т. к. в уравнении множественной регрессии вместе со свободным членом оценивается параметров
Возможно эта страница вам будет полезна:
Задача №2.3.
По данным примера 2.1 определить множественный коэффициент детерминации и проверить значимость полученного уравнения регрессии по и на уровне .
Решение:
Вычислим произведения векторов (см. пример 2.1):
По формуле (2 18) определим множественный коэффициент детерминации
Коэффициент детерминации свидетельствует о том, что вариация исследуемой зависимой переменной У — сменной добычи угля на одного рабочего на 69,1% объясняется изменчивостью включенных в модель объясняющих переменных— мощности пласта и уровня механизации работ .
Зная , проверим значимость уравнения регрессии. Вычислим фактическое значение критерия:
Оно больше табличного , определенного на уровне значимости при степенях свободы, т. е. уравнение регрессии значимо, следовательно, исследуемая зависимая переменная достаточно хорошо описывается включенными в регрессионную модель переменными и .
Временные ряды и прогнозирование. Общие сведения о временных рядах и задачах их анализа
Под временным рядом (динамическим рядом, или рядом динамики) в экономике подразумевается последовательность наблюдений некоторого признака (случайной величины) в последовательные моменты времени. Отдельные наблюдения называются уровнями ряда, которые будем обозначать , где — число уровней.
В табл. 3.1 приведены данные, отражающие спрос на некоторый товар за восьмилетний период (усл. ед.), т. е. временной ряд спроса .
На рис. 3.1 временной ряд изображен графически ломаной линией.
Методы исследования моделей, основанных на данных пространственных выборок и временных рядов, вообще говоря, отличаются Объясняется это Tev что в отличие от пространственных выборок наблюдения во временных ряда как правило, нельзя считать независимыми.
При анализе точности этих моделей и определении интервальных ошибок прогноза на их основе, будем полагать, что рассматриваемые в главе регрессионные модели временных рядов удовлетворяют условиям классической модели.
В общем виде при исследовании экономического временного ряда выделяются несколько составляющих:
где — тренд, плавно меняющаяся компонента, описывающая чистое влияние долговременных факторов, т. е. длительную тенденцию изменения признака (например, показатели экономического развития, рост населения, и т. п.);
— сезонная компонента, отражающая повторяемость экономических процессов в течение не очень длительного периода (года, месяца, недели и т. д., например, объем продаж туристических путевок или перевозок авиапассажиров в различные времена года);
— циклическая компонента, отражающая повторяемость экономических процессов в течение длительных периодов (например, влияние волн экономической активности Кондратьева, демографических «ям», циклов солнечной активности и т. п.);
— случайная компонента, отражающая влияние не поддающихся учету и регистрации случайных факторов.
Первые три составляющие (компоненты) и , в отличие от , являются закономерными, неслучайными.
Важнейшей классической задачей при исследовании экономических временных рядов является выявление и статистическая оценка основной тенденции развития изучаемого процесса и отклонений от нее.
Основные этапы анализа временных рядов:
графическое представление и описание поведения временного ряда; выделение и удаление закономерных (неслучайных) составляющих временного ряда (тренда, сезонных и циклических сост авляющих);
сглаживание и фильтрация (удаление низко — или высокочастотных составляющих временного ряда);
исследование случайной составляющей временного ряда, построение и проверка адекватности математической модели для ее описания;
прогнозирование развития изучаемого процесса на основе имеющегося временного ряда;
исследование взаимосвязи между различными временными рядами. Наиболее распространенными методами анализа временных рядов являются корреляционный и спектральный анализ, модели авторегрессии и скользящей средней
Временной ряд рассматривается как одна из реализаций (траекторий) случайного процесса . Вместе с тем следует иметь в виду принципиальные отличия временного ряда от последовательности наблюдений образующих случайную выборку. Во-первых, в отличие от элементов случайной выборки члены временного ряда, как правило, не являются статистически независимыми. Во-вторых, члены временного ряда не являются одинаково распределенными. Выборка рассматривается как одна из реализаций случайной величины .
Стационарные временные ряды и их характеристики. Автокорреляционная функция
Важное значение в анализе временных рядов имеют стационарные временные ряды, вероятностные свойства которых не изменяются во времени.
Временной ряд называется строго стационарным (или стационарным в узком смысле), если совместное распределение вероятностей наблюдений такое же, как и наблюдений при любых и . Другими словами, свойства строю стационарных рядов не зависят от момента , т е закон распределения и его числовые характеристики не зависят от . Следовательно, математическое ожидание среднее квадратическое отклонение могут быть оценены по наблюдениям по формулам:
Степень тесноты связи между последовательностями наблюдений временного ряда
(сдвинутых относительно друг друга на единиц, или, как говорят, с лагом ) может быть определена с помощью коэффициента корреляции
Коэффициент измеряет корреляцию между членами одного и того же ряда, поэтому его называют коэффициентом автокорреляции, а зависимость — автокор реляционной функцией. В силу стационарности временного ряда автокорреляционная функция зависит только от лага , причем , т. е. при изучении можно ограничиться рассмотрением только положительных значений .
Статистической оценкой является выборочный коэффициент автокорреляции , определяемый по формуле:
Функция называется выборочной автокорреляционной функцией, а ее график — коррелограимой.
При расчете необходимо учитывать, что с увеличением число пар наблюдений уменьшается, поэтому лаг должен быть таким, чтобы число было достаточным для определения . Обычно принимается .
Для стационарного временного ряда с увеличением лага г взаимосвязь членов временного ряда и ослабевает , и автокорреляционная функция должна убывать по абсолютной величине, а для ее выборочного (эмпирического) аналога , особенно при небольшом числе пар наблюдений , свойство монотонного убывания (по абсолютной величине) при возрастании может нарушаться.
Наряду с автокорреляционной функцией при исследовании стационарных временных рядов рассматриваем частная автокорреляционная функция , где есть частный коэффициент корреляции между членами временного ряда и , т. е. коэффициент корреляции между и при устранении влияния промежуточных (между и ) членов.
Статистической оценкой является выборочная частная автокорреляционная функция , где — выборочный частный коэффициент корреляции Например, выборочный частный коэффициент автокорреляции 1-го порядка между членами временного, ряда и при устранении влияния может быть вычислен по формуле:
где — выборочные коэффициенты автокорреляции между соответственно.
Задача №3.1
По данным табл. 1 для временного ряда у, найти среднее чначение, среднее квадратическое отклонение, коэффициенты автокорреляции (для лагов г=1;2) и частный коэффициент автокорреляции I-го порядка.
Решение:
Среднее значение временного ряда находим по формуле (3.1):
Дисперсию и среднее квадратическое отклонение вычислим, воспользовавшись соотношением:
Найдем коэффициент автокорреляции временного ряда (для лага ), т. е. коэффициент корреляции между последовательностями семи пар наблюдений , представленных в табл. 3.2.
Сначала вычисляем необходимые суммы:
Затем подставим их в формулу:
при
получим:
Коэффициенты автокорреляции для лага между членами ряда и по шести парам наблюдений и между членами ряда и вычисляются аналогично:
Для определения частного коэффициента корреляции 1-го порядка между членами ряда и при исключении влияния найденные значения подставим в формулу:
Знание автокорреляционных функций и может оказать существенную помощь при подборе и идентификации модели анализируемого временного ряда и статистической оценке его параметров.
Аналитическое выравнивание (сглаживание) временного ряда
Одной из важнейших задач исследования экономического временного ряда является выявление основной тенденции изучаемого процесса, выраженной неслучайной составляющей (тренда либо тренда с циклической или (и) сезонной компонентой).
Для решения этой задачи вначале необходимо выбрать вид функции Часто используются следующие функции:
При выборе соответствующей функции используют содержательный анализ (который может установить характер динамики процесса), а также визуальные наблюдения (на основе графического изображения временного ряда). Из двух функций предпочтение обычно отдается той, при которой меньше сумма квадратов отклонений фактических данных от расчетных на основе этих функций. Следует заметить, что для любого ряда из точек можно подобрать полином (-1)-й степени, проходящий через все точки, и соответственно с минимальной ( нулевой ) суммой квадратов отклонений, однако в этом случае не следует говорить о выделении основной тенденции, учитывая случайный характер этих точек. Поэтому при прочих равных условиях предпочтение следует отдавать более простым функциям.
При использовании метола наименьших квадратов для выявления основной тенденции значения временного ряда рассматриваются как зависимая переменная, а время — как объясняющая:
где — возмущения, удовлетворяющие основным предпосылкам регрессионного анализа, т. е. представляющие независимые и одинаково распределенные случайные величины, распределение которых предполагаем нормальным.
Для линейной функции согласно методу наименьших квадратов параметры прямой находятся из системы нормальных уравнений
Задача №3.2.
По данным табл. 3.1 найти уравнение неслучайной составляющей (тренда) для временного ряда у, полагая тренд линейным.
Решение:
Вначале вычислим необходимые суммы:
Система нормальных уравнений имеет вид:
Решая эту систему, находим уравнение тренда:
Это значит, что спрос (см. рис 3.1) ежегодно увеличивается в среднем на 26,5 ед.
Уравнение регрессии с учётом зависимостей (1.7) — (1.10) и (3.7) можно представить в виде:
Проверим значимость полученного уравнения тренда по -критерию на 5%-ном уровне значимости. Вначале подставим в формулу (1.29) соотношения из (3.8) и вычислим:
а) сумму квадратов, обусловленную регрессией
б) общую сумму квадратов отклонений зависимой переменной от средней
в) остаточную сумму квадратов, характеризующую влияние неучтённых факторов
Затем найдем по формуле (1.30) при значение статистики:
По таблице значений критерия Фишера-Снсдекора определяем .
Так как , то условие неравенства (1.31) выполняется и уравнение тренда значимо.
Другим методом выравнивания (сглаживания) временного ряда является метод скользящих средних. Он основан на переходе от начальных значений членов ряда к их средним значениям на интервале времени, длина которого определена заранее. При что и сам выбранный интервал времени «скользит» вдоль ряда.
Получаемый таким образом ряд скользящих средних ведет себя более гладко, чем исходный ряд, из-за усреднения отклонений ряда.
Действительно, если разброс значений члена временного ряда , около своего среднего значения характеризуется дисперсией , то разброс-средней из членов временного ряда около того же значения а будет характеризоваться существенно меньшей величиной дисперсии, равной . Для усреднения могут быть использованы средняя арифметическая (простая и с некоторыми весами), медиана и др
Задача №3.3.
Провести сглаживание временного ряда по данным табл 3.1 методом скользящих средних, используя простую среднюю арифметическую с интервалом сглаживания года.
Решение:
Скользящие средние вычисляем по формуле:
При получим .
Для находим
Для находим
В результате получим сглаженный ряд, представленный в табл. 3.3.
На рис. 3.1 этот ряд изображен графически в виде пунктирной линии
Прогнозирование на основе моделей временных рядов
Одна из нажнейших задач (этапов) анализа временного (динамического) ряда состоит в прогнозировании на его основе развития изучаемого процесса. При этом исходят из того, что тенденция развития, установленная в прошлом, может быть распространена (экстраполирована) на будущий период.
Задача ставится так: имеется временной ряд и требуется дать прогноз уровня этого ряда на момент . Выше, в § 1.5, 2.2, 2.4, мы рассматривали точечный и интервальный прогноз значений зависимой переменной , т. е определение точечных и интервальных оценок , полученных для парной и множественной регрессий для значений объясняющих переменных , расположенных вне пределов обследованного диапазона значений .
Если рассматривать временной ряд как регрессионную модель изучаемого признака по переменной «время», то к нему могут быть применены рассмотренные выше методы анализа. Следует, однако, вспомнить, что одна из основных предпосылок регрессионного анализа состоит в том, что возмущения представляют собой независимые случайные величины с математическим ожиданием (средним значением), равным нулю. А при работе с временными рядами такое допущение оказывается во многих случаях неверным. В данной главе мы полагаем, что возмущения удовлетворяют предпосылкам регрессионного анализа, т. е. условиям нормальной классической регрессионной модели.
Задача №3.4.
По данным табл. 3.1 дать точечную и с надежностью 0,95 интервальную оценки прогноза среднего и индивидуального значений спроса на некоторый товар на момент (девятый год). (Полагаем, что тренд линейный, а возмущения удовлетворяют требованиям классической модели).
Решение:
Выше, в примере 3.2, получено уравнение регрессии т. е. ежегодно спрос на товар увеличивался в среднем на 26,5 ед. Надо оценить условное математическое ожидание .
Оценкой является групповая средняя
Найдем оценку дисперсии
Находим табличное значение . Подставив найденные значения в (1.23) определим интервальную оценку прогноза среднего значения спроса
или
Для нахождения интервальной оценки прогноза индивидуального значения по формуле (1.24) вычислим дисперсию его оценки:
Интервальная оценка для :
или
Итак, с надежностью 0,95 среднее значение спроса на товар на девятый год будет заключено от 345,9 до 468,9 (ед ), а ею индивидуальное значение -от 307,3 до 507,5 (ед ).
Как правило, прогноз развития изучаемого процесса на основе экстраполяции временных рядов оказывается эффективным, r рамка, краткосрочного или среднесрочного периода прогнозирования.
Автокорреляция остатков временного ряда
При моделировании реальных экономических процессов част возникают ситуации, в которых условия классической линейной модели регрессии оказываются нарушенными В частности, могут не выполняться предпосылки 3 и 4 регрессионного анализа (см. § 1.4) о том, что случайные возмущения (ошибки) модели имеют постоянную дисперсию и не коррелированны между собой. Так, например, при рассмотрении зависимости расходов на потребление от уровня доходов семей можно ожидать, что в более обеспеченных семьях вариация расходов выше, чем в малообеспеченных, т. е. дисперсии возмущений не одинаковы.
При анализе временных рядов мы часто сталкиваемся с ситуацией, когда наблюдаемые в данный момент значения зависимой переменной коррелированны с их значениями в предыдущие моменты времени, т. е. имеется корреляция между возмущениями в разные моменты времени.
Рассмотрим регрессионную модель временного (динамического) ряда. Упорядоченность наблюдений оказывается существенной в том случае, если прослеживается механизм влияния результатов предыдущих наблюдений на результаты последующих. Математически это выражается в том, что случайные величины в регрессионной модели не оказываются независимыми, в частности, условие не выполняется Такие модели называются моделями с наличием автокорреляции (сериальной корреляции). Рассмотрим в качестве примера /6 / временной ряд — ряд последовательных значений курса ценной бумаги , наблюдаемых в моменты времени 1,…. 100. Результаты наблюдений графически изображены на рис. 3.2. Из рисунка видно, что курс ценной бумаги имеет тенденцию к росту.
Оценивая методом наименьших квадратов зависимость курса от времени (номера наблюдений), получим следующие результаты:
Естественно предположить, что результаты предыдущих торгов оказывают влияние на результаты последующих: если в какой-то момент курс окажется завышенным по сравнению с реальным, то скорее всего он будет завышен на следующих торгах, т. е. имеет место положительная автокорреляция. Графически (см. рис 3.2) положительная автокорреляция выражается в чередовании тех зон, где наблюдаемые значения оказываются выше объясненных (лежащих на прямой ), с зонами, где наблюдаемые значения ниже.
Отрицательная автокорреляция встречается в тех случаях, когда завышенные значения в предыдущих наблюдениях приводят к занижению их в наблюдениях последующих (наблюдения действуют друг на друга по принципу «маятника»). Графически это выражается в том, что результаты наблюдений и оказываются по разные стороны относительно прямой .
Метод наименьших квадратов при наличии коррелированности ошибок регрессии даст несмещенные и состоятельные (разумеется, неэффективные) оценки коэффициентов регрессии, однако, оценки их дисперсий несостоятельные и смешенные (как правило, в сторону занижения), т. е. результаты тестирования гипотез оказываются недостоверными.
Как правило, если автокорреляция присутствует, то наибольшее влияние на последующее наблюдение оказывает результат предыдущего наблюдения Так, например, если рассматривается ряд значений курса какой-либо ценной бумаги, то, очевидно, именно результат последних торгов служит основой для формирования курса на следующих торгах. Ситуация, когда на значение наблюдения у, оказывает основное влияние не результат , а более ранние значения, является достаточно редкой Чаще всего при этом влияние носит циклический характер, например, если наблюдения осуществляются ежедневно и имеют недельный цикл (например, сбор кинотеатра). В этом случае можно составить ряды наблюдений отдельно по субботам, воскресеньям и так далее, после чего наиболее сильная корреляция будет наблюдаться между соседними членами.
Таким образом, отсутствие корреляции между соседними членами позволяет считать, что корреляция отсутствует в целом, и обычный метод наименьших квадратов дает адекватные и эффективные результаты.
Наличие автокорреляции между соседними членами можно определить с помощью теста Дарбина- Уотсона. Этот критерий (тест) Дарбина- Уотсона основан на простой идее: если корреляция ошибок регрессии не равна нулю, то она присутствует и в остатках регрессии получающихся в результате применения обычного метода наименьших квадратов. В тесте Дарбина -Уотсона для оценки корреляции используется статистика вида
В случае отсутствия автокорреляции выборочный коэффициент будет близким к нулю, а значение статистики — близко к двум, близость наблюдаемого значения к нулю должна означать наличие положительной автокорреляции, к четырем — отрицательной..
Тест Дарбина-Уотсона имеет один существенный недостаток -распределение статистики зависит не только от числа наблюдений, но и от значений регрессоров Это означает, что тест Дарбина -Уотсона, вообще говоря, не представляет собой статистический критерий, в том смысле, что нельзя указать критическую область, которая позволяла бы отвергнуть гипотезу об отсутствии корреляции, если бы оказалось, что в эту область попало наблюдаемое значение статистики .
Однако существуют два пороговых значения и зависящие только от числа наблюдений, числа регрессоров и уровня значимости, такие, что выполняются следующие условия.
Если фактически наблюдаемое значение :
а) то гипотеза об отсутствии автокорреляции не отвергается (принимается);
б) , то вопрос об отвержении или принятии гипотезы остается открытым (область неопределенности критерия);
в) , то принимается альтернативная гипотеза о положительной автокорреляции;
г) , то принимается альтернативная гипотеза об отрицательной автокорреляции
Графическая иллюстрация теста Дарбина-Уотсона приведена на рис. 3.3:
Для -статистики найдены верхняя и нижняя границы на уровнях значимости
Недостатками критерия Дарбина -Уотсона является наличие области неопределенности критерия и то, что критические значения -статистики определены для объемов выборки не менее 15. Тем не менее, тест Дарбина -Уотсона является наиболее употребляемым.
Задача №3.5.
Выявить на уровне значимости 0,05 наличие втокорреляции возмущений для временного ряда_у, по данным табл. 3.1.
Решение:
В примере 3.2 получено уравнение тренда
В табл. 3.4 приведен расчет данных, необходимых для вычисления ^-статистики.
Находим суммы
подставляем в формулу (3.9) и вычисляем значение статистики
По таблице значений критерия Дарбина — Уотсона при определим критические значения: . Фактически найденное находится в пределах от до . При критических значений -статистики в таблице нет, но судя по тенденции их изменений с уменьшением , можно предполагать, что найденное значение останется в игтервале .
Для рассматриваемого временного ряда спроса на уровне значимости 0,05 гипотеза об отсутствии автокорреляции возмущений принимается.
Готовые задачи по эконометрике
Эконометрика – это самостоятельная научная дисциплина, объединяющая совокупность теоретических результатов, приемов, методов и моделей, предназначенных для того, чтобы на базе экономической теории, экономической статистики и экономических измерений, математико-статистического инструментария придавать конкретное количественное выражение общим (качественным) закономерностям, обусловленным экономической теорией.
Эконометрика – одна из базовых дисциплин экономического образования во всем мире.
Эконометрические модели парной регрессии
Эконометрика является одной из важнейших составляющих современного экономического образования. Применение эконометрических методов является необходимым условием проведения качественных экономических исследований.
Современную эконометрику можно разделить на два направления: теоретическую и прикладную.
Теоретическая эконометрика занимается изучением специальных вероятностных (т.н. регрессионных) моделей, используя при этом аппарат теории вероятностей и математической статистики.
В основе прикладной эконометрики лежит применение вероятностных моделей для количественного описания и анализа экономических явлений и процессов.
Между этими направления существует глубокая двусторонняя взаимосвязь. Основные результаты теоретической эконометрики в виде статистических тестов и новых классов вероятностных моделей находят свое применение при решении прикладных задач. С другой стороны, в прикладной эконометрике в процессе исследования экономических явлений возникают ситуации или наблюдаются эффекты, которые не описываются существующими моделями. Это является предпосылкой для дальнейшего развития теоретического аппарата.
Термин «эконометрика» дословно читается как «измерения в экономике». Однако не каждое измерение в экономике относится к эконометрике, поэтому дадим точное определение.
Эконометрика (или эконометрия) изучает методы оценивания параметров моделей, характеризующих количественную взаимосвязь между экономическими показателями, а также рассматривает основные направления применения этих моделей в экономических исследованиях.
Предметом изучения эконометрики являются социально-экономические системы, процессы или явления, описываемые моделями. Методы исследования — математические методы, базирующиеся на теории вероятностей и математической статистике (далее ТВиМС), и других разделах математики. Структурно эконометрические исследования приведены на рис. 1.1.
Построение эконометрической модели условно делят на четыре этапа:
- спецификация модели, т.е. её запись в математической форме;
- сбор и подготовка экономической информации;
- оценивание параметров модели;
- проверка модели на достоверность.
Этапы 1) и 2) взаимозаменяемы. Полученную модель применяют для прогнозирования, планирования и с другими целями.
Термин «эконометрика» был введен в научный оборот в начале 20-го века. В 1928 г. была опубликована работа Ч. Кобба и П. Дугласа, посвященная исследованию производственной функции, связывающей объём выпуска продукции в отрасли, затраты труда и затраты капитала. Модель производственной функции Кобба-Дугласа является, пожалуй, первым примером использования эконометрики и отражает классический подход к эконометрическому анализу.
Окончательное становление эконометрики относят к 1930 году, когда европейскими и американскими учёными было основано «Эконометриче-ское сообщество». С 1933 г. выходит журнал «Эконометрия», издающийся этим сообществом.
Основателями эконометрии считаются Р. Фриш, Я. Тинберген, И. Шумпетер, Л. Клейн, Р. Стоун и другие учёные. Их целью было объединение экономической теории с математическими и статистическими методами. Модели, предложенные этими учеными, способствовали развитию математического и статистического аппарата и расширению области применения эконометрики.
После Второй мировой войны были построены комплексные эконо-метрические модели на макроуровне, в которых основное внимание уделялось спросу, финансовому состоянию, налогам, прибылям, ценам и другим важнейшим экономическим показателям.
Наиболее используемыми в эконометрии являются: производственные функции; функции потребления различных групп населения; функции предпочтения потребителей; межотраслевые модели производства, распределения и потребления продукции; модели экономического равновесия.
Помимо экономических исследований, эконометрические методы успешно применяются в биологии, истории, социологии и некоторых других общественных и естественных науках, где необходимо оценивать взаимосвязи между большим количеством переменных.
Важность данной науки подчеркивает тот факт, что за эконометрические исследования многократно присуждалась Нобелевская премия в области экономики.
В настоящее время эконометрия продолжает динамично развиваться и охватывает всё новые сферы экономических знаний.
Особенности эконометрических моделей
Математическая модель социально-экономической системы, процесса или явления представляет собой абстрактную запись основных его закономерностей с помощью математических формул и соотношений. Эконометрические модели относятся к функциональным стохастическим моделям. Они количественно описывают корреляционно-регрессионную связь между исследуемыми показателями.
Эконометрическая модель содержит три группы элементов: вектор — неизвестные характеристики объекта, которые необходимо определить; вектор — характеристики внешних по отношению к объекту условий, которые, изменяясь, влияют на изучаемые параметры; матрица — совокупность внутренних параметров объекта.
В данном случае и являются экзогенными параметрами (т.е., параметрами, которые определяются вне модели), a — эндогенный параметр, значения которого определяются из модели.
В общем виде эконометрическую модель можно записать в виде:
Здесь — входные экономические показатели, — случайная (стохастическая) составляющая, которые посредством функции регрессии влияют на .
Для построения эконометрической модели необходимо выполнение следующих условий:
наличие достаточно большой совокупности наблюдений;
- однородность совокупности наблюдений;
- точность входных данных.
В отношении оценивания степени однородности совокупности наблюдений существует много различных подходов. Впрочем, все исследователи согласны с тем, что экономические наблюдения, как правило, неоднородны. Поэтому речь может идти лишь о достижении определенной степени однородности, которая обеспечит достоверность экономических выводов.
Различают качественную и количественную однородность. Под первой подразумевается однотипность экономических объектов, их одинаковое качество и определенное назначение. Под второй — однородность группы единиц совокупности, которая определяется на основе количественных показателей.
В математической статистике есть ряд критериев, которые позволяют сделать вывод, являются ли рассматриваемые случайные выборки однородными и можно ли их объединять в одну совокупность для проведения эконометрических исследований.
Точность выходных данных существенно влияет на выводы, которые могут быть сделаны на основе эконометрического моделирования. Погрешности могут возникать при формировании алгоритма расчёта показателей, при округлении, повторном учёте тех или иных показателей и др. Все ошибки делят на систематические, т.е. такие, которые имеют постоянную величину, либо изменяются, подчиняясь определенной функциональной зависимости, и случайные, которые обусловлены влиянием случайных факторов при формировании показателей.
При формировании совокупности наблюдений необходимо обращать внимание и на наличие ошибок во входных данных. Если нет возможности избежать этих ошибок, то необходимо применять специальные методы оценивания параметров эконометрической модели.
Наиболее часто используемым методом для количественной оценки взаимосвязей в эконометрии является корреляционно-регрессионный анализ. Суть метода заключается в определении оценок количественного влияния показателей на исследуемую величину и построении на этой основе строгой зависимости между ними, которая в общем виде записывается в виде некоторой функции:
где — исследуемая величина, — показатели, влияющие на исследуемую величину.
Чаще всего с этой целью используется линейная функция. Однако возможны и другие формы зависимостей: экспоненциальная, степенная, гиперболическая и другие.
Каждая из рассматриваемых функций может быть сведена к линейной с помощью алгебраических преобразований или путем замены. По этой причине именно исследованию линейной зависимости уделяется значительное внимание.
В реальной ситуации наблюдаемые величины отклоняются от данной функциональной формы связи, поэтому в регрессионную модель включается стохастическая составляющая , которую еще называют отклонением или остатком.
В классической линейной эконометрической модели переменная s интерпретируется как случайная переменная, которая имеет нормальный закон распределения с математическим ожиданием, равным нулю, и постоянной дисперсией.
Парная регрессия. Однофакторные линейные эконометрические модели
Простейшими эконометрическими моделями являются модели парной регрессии. Парная регрессия представляет собой зависимость между двумя переменными — и , т.е. модель вида:
Здесь — зависимая переменная (результативный признак); -независимая, или объясняющая, переменная (признак-фактор). Знак означает, что между переменными и нет строгой функциональной зависимости, поэтому величина у складывается из двух составляющих:
Таким образом, — фактическое значение результативного признака; — теоретическое значение результативного признака, найденное по уравнению регрессии; — случайная величина, характеризующая отклонения между и . Случайная величина s включает влияние не учтённых в модели факторов, случайных ошибок и особенностей измерения.
В парной регрессии выбор вида математической функции (спецификация) может быть осуществлён тремя способами:
1) графическим;
2) аналитическим, т.е. исходя из теории изучаемой взаимосвязи;
3) экспериментальным.
Чаще всего эти способы применяют комплексно.
Графический способ основан на внешнем виде корреляционного поля. Напомним, что корреляционным полем называют множество точек в декартовой системе координат. Здесь — номер наблюдения, — количество наблюдений (объём статистической выборки).
Если точки корреляционного поля выстраиваются как бы вдоль гипотетической прямой, то в качестве модели парной регрессии следует брать линейную модель:
В противном случае нужно выбирать нелинейную модель.
Аналитический способ выбора типа уравнения регрессии основан на изучении материальной природы связи исследуемых признаков. Здесь важную роль играет опыт экономиста, который знаком с наработанными схемами зависимостей между социально-экономическими показателями.
При использовании экспериментального способа сравнивают величины остаточной дисперсии, рассчитанной для разных моделей:
Чем меньше величина остаточной дисперсии , тем меньше влияние не учтённых в уравнении регрессии факторов и тем лучше уравнение регрессии подходит к исходным данным.
В эконометрическом моделировании следует придерживаться принципа — чем сложнее модель, тем большее количество наблюдений требуется для её построения.
Сложность модели можно определить показателем — количеством неизвестных параметров, которые являются множителями при переменной или при функциях от переменной .
Например, для следующих моделей:
Соответственно для моделей:
При построении эконометрической модели необходимо придерживаться статистического правила:
Таким образом, если , то . Следовательно, модель можно строить, имея не менее семи наблюдений. При соответственно имеем .
Простейшими эконометрическими моделями являются однофакторные линейные модели парной регрессии. В этом случае предполагается, что между двумя исследуемыми показателями существует линейная корреляционная зависимость. В общем виде однофакторная линейная эконометрическая модель имеет вид:
где — зависимая переменная, — независимая переменная, -оцениваемые параметры, — отклонение линии регрессии от фактических наблюдений.
Чтобы найти уравнение регрессии, необходимо найти неизвестные параметры и . Их оценка осуществляется на основании статистических данных (совокупности наблюдений).
При нахождении оценок параметров уравнения регрессии возникает вопрос, каким критерием следует воспользоваться, чтобы найденная прямая наиболее точно отражала зависимость между показателями. В любом случае расчетные значения зависимой переменной, найденные с помощью уравнения регрессии, будут отклоняться истинных наблюдений.
В качестве критерия можно было бы рассматривать сумму этих отклонений. Однако, поскольку одни имеют разные знаки, то при суммировании будут взаимно «погашаться». Чтобы избежать этого, в качестве критерия предлагается рассматривать сумму квадратов этих отклонений. Этот принцип и лежит в основе метода наименьших квадратов (МНК).
Постановка задачи следующая. Уравнение регрессии будем искать в виде:
где — оценки величин и . Необходимо подобрать такие значения , которые минимизируют сумму квадратов отклонении расчетного значения от наблюдаемого , т.е. .
Заметим, что применение МНК возможно при выполнении следующих условий:
- Математическое ожидание остатков (ошибок) равно нулю.
- Случайные величины имеют одинаковую дисперсию.
- Остатки распределены по нормальному закону с математическим ожиданием, равным нулю и постоянной дисперсией.
Рассмотрим сумму квадратов отклонений как функцию двух переменных :
Для того чтобы найти минимум этой функции, вычислим ее частные производные первого порядка по переменным и приравняем их к нулю:
После преобразований получаем систему нормальных уравнений:
Решаем её относительно и , и получаем формулы, для вычисления параметров уравнения регрессии:
Отметим следующее свойство оценок МНК: линия регрессии всегда проходит через среднюю точку то есть: . С учётом этого оценку параметра можно найти, воспользовавшись соотношением:
Преобразовав формулу, имеем:
Умножив числитель и знаменатель на , получаем ещё одну формулу оценки коэффициента регрессии:
Рассмотрим экономический смысл этого коэффициента. Если в уравнении регрессии в качестве аргумента взять , то получим:
Таким образом, коэффициент регрессии в линейной модели показывает, на сколько единиц в среднем изменится зависимая переменная, если независимую переменную увеличить на единицу при прочих неизменных условиях. Значению свободного члена объяснений не дают.
Задача №1.1.
В таблице 1.1 приведены данные за восемь лет об объёме прямых иностранных инвестициях (далее ПИИ) в экономику страны и объёме валового внутреннего продукта (далее ВВП).
Необходимо найти уравнение линейной регрессии, отражающее зависимость ВВП от ПИИ.
Решение:
Введём в MS Excel данные. С помощью «Мастера диаграмм» построим точечную диаграмму — корреляционное поле (рис. 1.2).
Для упрощения расчётов составим таблицу 1.2.
Найдём оценки параметров уравнения регрессии, используя формулы:
Уравнение регрессии имеет вид:
Коэффициент регрессии показывает, что при увеличении ПИИ на 1 млрд. долларов, ВВП увеличится в среднем на 23,5982 млрд. долл.
Проверка адекватности однофакторной линейной эконометрической модели, значимости её параметров и построение прогнозов
Следующий этап эконометрического моделирования заключается в оценке качества полученного уравнения и его параметров.
Для оценки тесноты и направления связи между двумя показателями используется коэффициент парной корреляции. Его можно вычислить по формуле:
где — ковариация, а — дисперсия и соответственно.
Для вычисления коэффициента парной корреляции можно также использовать преобразованную формулу:
В отличие от коэффициента регрессии, коэффициент корреляции является показателем относительной меры связи между двумя показателями. Значения коэффициента корреляции всегда находятся в пределах:
Положительное значение коэффициента свидетельствует о прямой связи, т.е. с увеличением независимой переменной , увеличивается в среднем и значение . Если коэффициент корреляции отрицательный, то связь обратная.
Если модуль коэффициента парной корреляции близок к 1 , то линейная связь между показателями тесная. Если же коэффициент близок к 0 , то связь практически отсутствует.
Если , то между случайными величинами и существует линейная функциональная зависимость. Коэффициент корреляции равен нулю, когда случайные величины и независимы
В случае, когда и , то между случайными величинами и существует корреляционная зависимость. Причём, чем ближе значение коэффициента по модулю к единице, тем теснее линейная связь между показателями.
Таким образом, коэффициент парной корреляции характеризует тесноту и направление линейной связи между показателями. Следует отметить, что знак коэффициента корреляции всегда совпадает со знаком коэффициента регрессии.
Связь между коэффициентом парной корреляции и коэффициентом регрессии выражается следующей формулой:
Ещё одним показателем адекватности линейной модели является коэффициент детерминации . Он определяется по формуле:
где — общая дисперсия, а — дисперсия, объясняемая регрессией.
Эти показатели вычисляются по формулам:
Таким образом, коэффициент детерминации — это часть дисперсии, которая объясняет регрессию. Величина коэффициента детерминации изменяется в пределах от нуля до единицы:
Если значение близко к единице, то модель адекватна, если близко к нулю, то неадекватна.
Кроме того, коэффициент детерминации показывают, какая часть вариации (изменения) зависимой переменной объясняется вариацией независимой переменной . Для определения доли вариации за счет неучтенных в модели факторов рассчитывается т.н. коэффициент остаточной детерминации:
Рассмотренные выше коэффициенты парной корреляции и детерминации, как показатели адекватности модели, имеют между собой связь, которая выражается формулой:
т.е. коэффициент детерминации равен квадрату коэффициента корреляции.
Осуществляется также проверка значимости коэффициента корреляции, которая подразумевает проверку статистической гипотезы против альтернативной гипотезы , т.е. проверяется гипотеза, заключающаяся в том, что случайные величины и не коррелируют друг с другом.
Для проверки гипотезы рассчитывается -статистика Стьюдента:
где — число степеней свободы.
Для заданного уровня значимости (допустимой вероятности ошибки) и числа степеней свободы находится табличное значение критерия. Если , то гипотеза об отсутствии корреляционной связи между переменными отвергается, в противном случае — принимает.
Для проверки значимости параметров уравнения парной регрессии и также используется -статистика Стьюдента. Расчётные значения критерия можно найти по формулам:
В знаменателях этих дробей стоят случайные ошибки параметров эконометрической модели:
где — несмещенная оценка дисперсии остатков.
Найденные расчётные значения берут по модулю и сравнивают с табличным , которое определено по уровню значимости и числу степеней свободы . Если модуль расчётного значения больше табличного, то соответствующий параметр является значимым. В противном случае он не значим.
Замечание 1.1. Требование значимости коэффициента регрессии является обязательным. Свободный член носит вспомогательный характер. Его незначимость по критерию Стьюдента не является критичным для эконометрической модели.
Для проверки адекватности эконометрической модели используют -критерий Фишера. Расчётное значение критерия находится по формуле:
Данное число сравнивается с табличным значением распределения Фишера, найденного по заданному уровню значимости и числам степеней свободы . Если расчётное значение -критерия превышает табличное, то нулевая гипотеза о равенстве нулю коэффициента регрессии отвергается, и модель признаётся адекватной. В противном случае — гипотеза принимается.
Возможно эта страница вам будет полезна:
Задача №1.2.
По данным примера 1.1 найти значение коэффициентов парной корреляции и детерминации. Проверить значимость коэффициента корреляции, параметров регрессии и значимость модели в целом при уровне значимости = 0,05.
Согласно таблице 1.1, объём ПИИ в последнем временном периоде составлял млрд. долл. Предполагается, что прогнозное значение ПИИ в следующем году составит 120% от , т.е. млрд. долл. Требуется построить точечный и интервальный прогнозы для объёма ВВП на следующий год.
Решение:
Рассчитаем линейный коэффициент корреляции:
Близость коэффициента корреляции к единице указывает на тесную линейную связь между признаками. Коэффициент детерминации
показывает, что уравнением регрессии объясняется 98,41% дисперсии результативного признака, а на долю прочих факторов приходится 1,59%.
Проверим значимость коэффициента парной корреляции по критерию Стьюдента. Расчётное значение критерия равно:
По уровню значимости и количеству степеней свободы определим табличное значение критерия .
Расчётное значение, взятое по модулю, больше табличного. Следовательно, коэффициент корреляции является значимым с надёжностью не менее 95% .
Для оценки статистической значимости параметров регрессии рассчитаем -критерий Стьюдента. Вычислим случайные ошибки параметров и фактические значения -статистик:
Табличное значение -критерия Стьюдента при и числе степеней свободы определено выше и составляет .
Модули обоих расчётных значения больше табличного, поэтому признаём статистическую значимость параметров регрессии с надёжностью не менее 95%.
Оценим качество уравнения регрессии в целом с помощью -критерия Фишера. Рассчитаем фактическое значение -критерия:
Количество степеней свободы для критерия Фишера , . При уровне значимости табличное значение критерия равно:
Так как , то найденная эконометрическая модель является статистически значимой с надёжностью не менее 95%.
Для вычисления точечного прогноза объёма ВВП достаточно в уравнение регрессии подставить предполагаемый объём ПИИ, т.е. 30,72 млрд. долл. Точечный прогноз для ВВП будет следующим:
Ошибка прогноза составляет:
Интервальный прогноз для оценивают по формуле .
Поэтому доверительный интервал будет следующим:
Замечание 1.2. Эконометрическую модель можно считать достоверной, если построенные с помощью неё прогнозы отклоняются от фактических данных не более, чем на 10%. Модель из Задача 1.1 была построена по статистическим данным 2007-2014 гг. Фактические данные за 2015 г. составили млрд. долл. и млрд. долл. Подставив в найденное уравнение регрессии , мы оценим теоретическое (прогнозное) значение у, т.е.
Абсолютное отклонение составит:
Относительное отклонение:
Так как , то построенную модель парной регрессии можно считать адекватной и пригодной для краткосрочных прогнозов.
Оценивание параметров в однофакторных нелинейных эконометрических моделях
Необходимость построения нелинейных моделей парной регрессии приводит к некоторому усложнению преобразований данных и вычислений. Однако при современном развитии информационных технологий эти трудности вполне преодолимы.
Задача №1.3.
В таблице 1.3 приведены данные по десяти однотипным заводам, специализирующихся на ремонте шахтного оборудования в Донецком регионе. Годовой объём выпуска продукции (млн. руб.) зависит от фонда оплаты труда (млн. руб.).
Требуется:
1) средствами MS Excel построить нелинейные уравнения парной регрессии от ;
2) выбрать лучшую модель.
Решение:
Принято различать два класса уравнений нелинейных регрессий. Первый из них включает нелинейные уравнения относительно объясняющих переменных, но линейные по оцениваемым параметрам.
К ним, например, относятся: многочлены (полиномы) различных степеней
и т.д.; равносторонняя гипербола
полулогарифмическая функция
Регрессии первого класса приводятся к линейному виду заменой переменных. Дальнейшая оценка параметров производится с помощью МНК.
Например, парабола второй степени
приводится к линейному виду с помощью замены:
В результате приходим к двухфакторному уравнению
оценка параметров которого осуществляется при помощи МНК.
Равносторонняя гипербола
может быть использована для характеристики связи удельных расходов сырья, материалов, топлива от объёма выпускаемой продукции, времени обращения товаров от величины товарооборота, процента прироста заработной платы от уровня безработицы (кривая Филипса), расходов на непродовольственные товары от доходов или общей суммы расходов (кривые Энгеля) и в других случаях. Гипербола приводится к линейному уравнению заменой: . Аналогичным образом приводятся к линейному виду зависимости , и др.
Второй класс нелинейных уравнений — регрессии, нелинейные по оцениваемым параметрам. К ним, например, относятся: степенная ; показательная ; экспоненциальная . Эти модели приводятся к линейному виду логарифмированием и заменой переменных.
Покажем, как это делается на примере степенной функции :
где
Таким образом, мы применяем МНК к преобразованным данным, а затем потенцированием (обратная замена) находим искомое уравнение.
Широкое использование степенной функции связано с тем, что параметр в ней имеет чёткое экономическое истолкование — он является коэффициентом эластичности.
Такие задачи удобно решать в MS Excel. Для этого нужно выполнить следующую последовательность действий:
• ввести экспериментальные данные в столбцы (или построчно);
• на основании введённых данных построить точечную диаграмму;
• активизировать данные диаграммы, щелкнув по точкам левой кнопкой «мыши»;
• в пункте меню «Диаграмма» выбрать опцию «Добавить линию тренда…»;
• в пункте меню «Тип» выбрать «Полиномиальная (степень 2-я)» или «Логарифмическая», или «Степенная», или «Экспоненциальная»;
• в пункте «Параметры» — «Показывать уравнение на диаграмме» и «Поместить на диаграмму величину достоверности аппроксимации (R1)».
Для величины достоверности аппроксимации выполняется неравенство: . Формула расчёта (см. справку MS Excel) содержит сумму квадратов отклонений. Чем ближе к единице, тем лучше модель описывает фактические данные.
На рис. 1.3-1.6 поместим корреляционное поле, соответствующую линию регрессии, уравнение регрессии и величину достоверности аппроксимации .
Наибольшую величину достоверности аппроксимации имеет полиномиальная модель второй степени (рис. 1.4). Поэтому, на первый взгляд, эту модель можно признать лучшей.
Однако ранее было приведено статистическое правило:
Полиномиальная модель второй степени
имеет два неизвестных параметра и , которые являются множителями при переменной или при функциях от переменной . Поэтому и должно выполняться условие .
Т.к. в Задаче 1.3 имеем , то признать данную модель лучшей было бы некорректно. Отвергаем полиномиальную модель второй степени и рассматриваем остальные.
Среди оставшихся моделей наибольшую величину достоверности аппроксимации имеет экспоненциальная модель (рис. 1.6):
Введём замену и запишем модель в виде, который используется в MS Excel:
Логарифмируя обе части уравнения, получим
Следовательно, экспоненциальная модель имеет один неизвестный параметр , который является множителем при переменной . Поэтому и условие выполняется,т.к. .
Значит, лучшей моделью является экспоненциальная модель (рис. 1.6),
Задача 1.3 выполнена.
Заканчивая эту главу, заметим, что, эконометрические модели парной регрессии описаны во многих учебниках и учебных пособиях. Несмотря на свою простоту, эти модели весьма востребованы в практических задачах экономики.
Множественная регрессия в эконометрических задачах. Производственная функция Кобба-Ду гласа в эконометрическом моделировании
Американский экономист Пол Дуглас в 30-е годы XX в. наблюдал за данными перерабатывающей промышленности США на протяжении двадцати лет и заметил зависимость между экономическими показателями. Он не сумел определить функцию, описывающую эту зависимость, и обратился в 1927 г. к математику Чарльзу Коббу, который предложил следующую функцию:
где — объём выпущенной продукции; — затраты труда; — затраты производственных фондов; и — неизвестные параметры модели, определяемые с помощью МНК на основе эмпирических данных.
Так появилась производственная функция Кобба-Дугласа, принадлежащая к наиболее известным производственным функциям, широко применяемым в экономических исследованиях.
С точки зрения эконометрии эта функция — не что иное, как двух-факторная нелинейная регрессионная модель. С точки зрения математики — мультипликативная степенная функция.
Для определения неизвестных параметров этой модели прологарифмируем левую и правую части функции:
Введём замены
и получим линейную модель
С помощью МНК будем искать параметры и Система нормальных уравнений имеет вид:
Продемонстрируем на конкретных данных этапы построения производственной функции Кобба-Дугласа.
Задача №2.1.
Финансово-промышленная группа «Росслад» владеет шестнадцатью заводами по производству сахара. Имеются данные (табл. 9.3) прошлого года о выпуске продукции у (млн. руб.), затратах труда (млн. руб.) и затратах производственных фондов (ПФ) (млн. руб.).
Требуется:
A) Построить производственную функцию Кобба-Дугласа. Б) Рассчитать характеристики:
1) среднюю производительность труда;
2) среднюю фондоотдачу;
3) предельную производительность труда;
4) предельную фондоотдачу;
5) эластичность выпуска продукции по затратам труда;
6) эластичность выпуска продукции по ПФ;
7) потребность в ресурсах труда;
потребность в ПФ;
9) фондовооружённость труда;
10) предельную норму замещения затрат труда производственными фондами;
11) эластичность замещения ресурсов.
B) Найти прогноз выпуска для заданных значений . руб. и . руб.
Решение:
А) Составим расчётную таблицу 2.2.
Для наших данных система нормальных уравнений будет следующей:
Введём в рассмотрение матрицы
Запишем систему в матричном виде
Согласно методу обратной матрицы
Обратную матрицу находим с помощью Microsoft Excel. Напомним, что операции с матрицами желательно завершать нажатием клавиши «F2» и «Ctrl+Shift+Enter». Итак, имеем:
Так как
Значения неизвестных параметров:
Производственная функция Кобба-Дугласа имеет вид:
Б) Рассчитаем основные характеристики производственной функции: 1) средняя производительность труда равна:
Следовательно, с увеличением затрат труда (при неизменных затратах ПФ ) средняя производительность труда снижается. И, наоборот, увеличение затрат ПФ (при неизменных затратах труда) ведёт к росту средней производительности труда;
2) средняя фондоотдача равна:
Таким образом, с увеличением затрат ПФ (при неизменных затратах труда) средняя фондоотдача снижается. Увеличение же затрат труда (при неизменных затратах ПФ) ведёт к росту средней фондоотдачи; 3) предельная производительность труда:
Следовательно, с увеличением затрат труда (при неизменных затратах ПФ) предельная производительность труда снижается. Наоборот, увеличение затрат ПФ (при неизменных затратах труда) ведёт к росту предельной производительности труда;
4) предельная фондоотдача:
Таким образом, с увеличением затрат ПФ (при неизменных затратах труда) предельная фондоотдача снижается. Увеличение же затрат труда (при неизменных затратах ПФ) ведёт к росту предельной фондоотдачи; 5) эластичность выпуска продукции по затратам труда:
Данный показатель указывает на то, что при увеличении затрат труда на 1% выпуск продукции у предельно увеличивается на 0,2743%; 6) эластичность выпуска продукции по ПФ:
При увеличении ПФ на 1% выпуск продукции может предельно увеличиться на 0,6892%;
7) производственная функция позволяет рассчитать потребность в одном из ресурсов при заданном объеме выпуска продукции и заданной величине другого ресурса.
Потребность в ресурсах труда:
потребность в ПФ:
9) производственная функция позволяет исследовать вопросы соотношения, замещения, взаимодействия ресурсов. В частности, определяется важный экономический показатель — фондовооружённость труда:
10) взаимодействующие в рамках производственной функции ресурсы могут замещать друг друга. Предельная норма замещения затрат труда производственными фондами равна:
Предельная норма замещения зависит не только от параметров и производственной функции Кобба-Дугласа, но и от соотношения объёмов ресурсов. Знак «минус» означает, что при фиксированном объёме выпуска продукции необходимо при уменьшении одного ресурса увеличивать другой.
11) влияние соотношения объемов ресурсов на предельную норму замещения находит свое выражение в эластичности замещения ресурсов. Этот показатель определяется как отношение относительных приращений фондовооружённости труда и предельной нормы замещения ресурсов:
Эластичность замещения ресурсов для производственной функции Кобба-Дугласа всегда равна единице. Т.е. изменению фондовооружённости труда на 1% соответствует изменение предельной нормы замещения также на 1%.
В) Найдём точечный прогноз выпуска продукции для заданных значений
Задача 2.1 решена полностью.
Многофакторные линейные эконометрические модели
Ввиду чёткой интерпретации результатов наиболее широко в множественной регрессии используется линейная функция.
Рассмотрим многофакторную линейную эконометрическую модель:
Ей соответствует линейное уравнение множественной регрессии
Параметры, являющиеся множителями при независимых переменных, называются коэффициентами «чистой» регрессии. Они характеризуют среднее изменение результата с изменением соответствующего фактора на единицу при неизмененном значении других факторов.
Классический подход к оцениванию параметров линейной модели множественной регрессии основан на МНК:
Задача №2.2.
Открытое акционерное общество «РосСельхозХолдинг» более десяти лет производит пшеницу в своих тридцати агроцехах, расположенных в разных областях Российской Федерации. Имеются данные прошлого года (табл. 9.5) о прибыли предприятия (млн. руб.), среднегодовом
удельном весе сельскохозяйственных рабочих в составе агроцеха , среднегодовой численности персонала (тыс. чел.), среднесуточном времени простоя техники в рабочее время (часы), среднемесячных выплатах за вредность труда на одного работника (руб.), среднегодовой текучести кадров (%).
Предполагая, что между переменной и независимыми переменными существует линейная зависимость, требуется:
- Найти линейное уравнение множественной регрессии;
- С помощью алгоритма пошаговой регрессии построить эконометрическую модель с максимальным числом значимых коэффициентов при уровне значимости 0,05.
- Построить точечный и интервальный прогнозы для при допущении, что средние показатели по независимым переменным будут превышены на 5%.
Решение:
В Microsoft Excel имеется пункт меню «Сервис», который содержит надстройку «Анализ данных». В нём выбираем инструмент анализа «Регрессия». Вводим входной интервал для у и входной интервал для . Т.к. в условии задан уровень значимости , то выбираем уровень надёжности 95% . В параметрах вывода отмечаем «Новый рабочий лист» и жмём «ОК». Результаты вычислений, округлённые до четвёртого знака приведены на рис. 2.1.
- Столбец «Коэффициенты» (рис. 2.1) содержит найденные параметры уравнения регрессии. Т.о. линейная пятифакторная регрессионная модель имеет вид:
По коэффициентам регрессии можно давать объяснения. Например, если текучесть кадров увеличится на 1%, то прибыль предприятия снизится в среднем на 0,1714 млн. руб. При этом значения переменных должны оставаться неизменными. Значение свободного члена не объясняют.
- Прокомментируем данные отчета на рис. 9.8.
Множественный коэффициент корреляции характеризует тесноту линейной связи рассматриваемого набора факторов с исследуемым признаком . Границы изменения коэффициента множественной корреляции от 0 до 1. Чем ближе его значение к 1 (в нашем примере ), тем теснее линейная связь результативного признака со всем набором исследуемых факторов.
Множественный коэффициент детерминации , то дисперсия (т.е. разброс) прибыли у на 99,48% объясняется регрессией, т.е. зависимостью от показателей . Величина (т.е. 0,52%) характеризует долю дисперсии , вызванную влиянием не учтённых в модели факторов.
В разделе «Дисперсионный анализ» (рис. 9.8) на пересечении строки «Остаток» и столбца «MS» находится несмещённая оценка дисперсии остатков . Извлекая квадратный корень, получим среднее квадратическое отклонение — стандартную ошибку . В следующей строке располагается число наблюдений .
Раздел «Дисперсионный анализ» называют ANOVA-таблицей (analysis of variance). Она содержит обозначение (degree of freedom) — число степеней свободы. В уравнение регрессии входит независимых переменных (строка «Регрессия»), в строке «Остаток» содержится , что в сумме (строка «Итого») составляет .
Значимость уравнения множественной регрессии в целом определяется с помощью статистического -критерия Фишера. Вероятность того, что будет меньше фактического значения , можно оценить по формуле
Для нашей задаче:
Эту вероятность сравниваем с заданным уровнем значимости . Так как , т.е. вероятность ошибки не превысила 5%, то пятифак-торное уравнение регрессии значимо с надёжностью не менее 95%.
Последний раздел отчёта на рис. 9.8 содержит коэффициенты регрессии
В столбце «Стандартная ошибка» расположены
Для проверки значимости коэффициентов регрессии применяют статистический -критерий Стьюдента. Пусть — случайная величина, имеющая распределение Стьюдента с числом степеней свободы . Вычисляются фактические значения -критерия Стьюдента:
Они помещены в столбце «-статистика»:
Заметим, что свободный член обычно не проверяется на статистическую значимость. Вероятность того, что будет меньше фактического значения , можно оценить по формуле
Для нашей задачи (столбец «-Значение») имеем:
Эти вероятности сравниваем с заданным уровнем значимости . Так как
то оценки коэффициентов регрессии
не являются значимыми. Т.к.
то оценки коэффициентов регрессии
значимы с надёжностью не менее 95%.
Среди незначимых оценок наибольшая вероятность ошибки
поэтому переменная должна быть исключена из модели. Эта процедура повторяется до тех пор, пока все оценки коэффициентов регрессии не будут статистически значимыми.
Такой подход называют алгоритмом пошагового регрессионного анализа. После завершения алгоритма мы получим уравнение регрессии с максимальным числом значимых коэффициентов.
На рис. 9.8 в столбцах «Нижние 95%» и «Верхние 95%» содержит интервальные оценки коэффициентов регрессии. Т.к. среди этих параметров оказались незначимые, то нет смысла давать объяснения их интервальным оценкам. Это будет сделано после построения окончательной модели.
Повторяем те же действия, что и в начале решения задачи. В Microsoft Excel в пункте меню «Сервис» выбираем пакет прикладных программ «Анализ данных». Пользуемся инструментом анализа «Регрессия». Вводим входной интервал для у и входной интервал для при уровне надёжности 95%. Результаты вычислений округляем до четвёртого знака и приводим отчет на рис. 2.2.
Получена линейная четырёхфакторная эконометрическая модель:
Т.к. множественный коэффициент корреляции близок к 1, то наблюдается высокая теснота линейной связи факторов с исследуемым признаком . Т.к. множественный коэффициент детерминации , то дисперсия прибыли на 99,47% объясняется найденной регрессией. Величина (т.е. 0,53%) характеризует долю дисперсии у, вызванную влиянием не учтённых в модели факторов.
Фактическое значение критерия Фишера составляет . Оценена вероятность . Эту вероятность сравниваем с заданным уровнем значимости . Т.к. , то четырёхфакторное уравнение регрессии значимо с надёжностью не менее 95%.
Найденная вероятность больше уровня значимости . Оценка коэффициента регрессии не является значимой, поэтому переменная должна быть исключена из модели.
Вводим входной интервал для и входной интервал для при уровне надёжности 95%. Округляем данные до четвёртого знака и приводим отчёт на рис. 2.3.
Линейная трёхфакторная эконометрическая модель имеет вид:
Отчет на рис. 9.10 содержит следующую информацию. Множественный коэффициент корреляции близок к 1. Следовательно, наблюдается высокая теснота линейной связи факторов с признаком . Множественный коэффициент детерминации . Значит, дисперсия у на 99,46% объясняется найденной регрессией. Величина (т.е. 0,54%) характеризует долю дисперсии у, вызванную влиянием не учтённых в модели факторов.
Фактическое значение критерия Фишера . Получена вероятность . Т.к. , то трёхфакторное уравнение регрессии значимо с надёжностью не менее 95%.
Столбец « -Значение» содержит вероятности для коэффициентов регрессии
(свободный член не анализируется). Все вероятности оказалась меньше уровня значимости . Следовательно, все оценки коэффициентов регрессии значимы.
Алгоритм пошагового регрессионного анализа завершён. Построенная трёхфакторная модель — это уравнение регрессии с максимальным числом значимых коэффициентов.
В столбцах «Нижние 95%» и «Верхние 95%» содержит интервальные оценки параметров уравнения регрессии. Они вычислены по данным столбцов «Коэффициенты» и «Стандартная ошибка»:
Численные значения доверительных интервалов объясняют следующим образом. Например, точеная оценка с надёжностью не менее 95% может колебаться от 5,7325 до 8,8249.
- Построим точечный и интервальный прогнозы для прибыли предприятия v при допущении, что средние показатели по будут превышены на 5%.
Так как
то предполагаемые значения:
Вектор предполагаемых значений:
Точечный прогноз для среднего значения прибыли агроцеха:
Вычислим дисперсию прогноза:
Извлекая квадратный корень, найдём среднеквадратическую ошибку прогноза .
Доверительный интервал для среднего значения (математического ожидания) прогноза зависимой переменной находим по формуле:
Рассчитаем дисперсию и среднее квадратическое отклонение индивидуального прогноза:
Доверительный интервал для индивидуального значения прогноза:
Задачи 2.2 выполнено полностью.
Возможно эта страница вам будет полезна:
Границы применимости классического метода наименьших квадратов в эконометрнческом моделировании
Рассмотрим многофакторную линейную эконометрическую модель:
При построении такой модели предполагают, что выполняются следующие гипотезы.
- Спецификация модели:
где — номер наблюдения.
- Числовые значения независимых переменных являются детерминированными (не случайными) величинами. Векторы
являются линейно независимыми в пространстве . 3. Случайные величины удовлетворяют условиям. Их математические ожидания равны нулю:
Дисперсии:
Причём значения математических ожиданий и дисперсий ошибок не зависят от номера наблюдений .
- При ковариации ошибок равны нулю:
Т.е. для разных наблюдений имеет место статистическая независимость (некоррелированность) ошибок.
При выполнении гипотез 1 — 5 эконометрическая модель называется нормальной линейной регрессионной моделью.
Важнейшую роль в эконометрическом анализе играет следующая теорема, формулировка которой приводится без доказательства.
Теорема Гаусса-Маркова. Предположим, что для линейной модели множественной регрессии выполняются гипотезы 1 — 4. Тогда оценки коэффициентов регрессии , найденные с помощью МНК, являются наиболее эффективными (в смысле наименьшей дисперсии) среди всех линейных несмещённых оценок.
Заметим, что при невыполнении отдельных гипотез теорема Гаусса-Маркова становится неприменимой. Следовательно, и классический МНК не будет давать достоверных результатов.
Нарушение условия линейной независимости векторов (гипотеза
2) приводит к нежелательному явлению, называемому мультиколлинеар-ностью. Условие независимости дисперсии ошибок от номера наблюдения (гипотеза 3) называется гомоскедастичностью. Нарушение данного условия называют гетероскедастичностью. Невыполнение гипотезы 4 называется автокорреляцией остатков.
В эконометрическом моделировании надо уметь выявлять эти нежелательные явления и устранять их. При невозможности устранения — научиться моделировать в условиях невозможности применения классического МНК.
Мультиколлинеарность в массиве независимых переменных эконометрической модели
Мультиколлинеарность означает существование тесной линейной зависимости, или сильной корреляции, между двумя или более объясняющими переменными.
Она негативно влияет на количественные характеристики эконометриче-ской модели, или делает её построение вообще невозможным.
Задача №2.3.
На производительность труда однотипных малых предприятий влияет ряд факторов, среди которых: удельный вес рабочих на предприятии ; премии и другие вознаграждения на одного работника (ден. ед.); оборачиваемость нормируемых оборотных средств (дни). Исследовать на мультиколлинеарность переменные . При наличии мультиколлинеарности предложить меры по её устранению. Статистические данные по десяти предприятиям приведены в табл. 2.4. Уровень значимости .
Решение:
Исследуем мультпколлинеарность в массиве независимых переменных при помощи алгоритма Фаррара-Глобера. Расчёты проведём в Microsoft Excel, округляя числа до четвёртого знака после запятой.
- Нахождение корреляционной матрицы выполним с помощью встроенной функции «Корреляция» (Сервиз—>Анализ данных —> Корреляция), которая позволяет находить коэффициенты корреляции более чем двух факторов:
Её определитель: Он вычислен с помощью функции МОПРЕД().
При имеется полная мультиколлинеарность, а если , то мультиколлинеарность отсутствует. В нашем случае , поэтому продолжим исследование на наличие мультиколлинеарности.
- Определим фактическое значение критерия «хи»-квадрат Пирсона:
Фактическое значение критерия сравнивается с табличным значением при степенях свободы и уровне значимости : Т.к. то в массиве объясняющих переменных существует мультиколлинеарность.
- С помощью функции МОБР() определим обратную матрицу:
- Вычисление -критериев Фишера осуществляем по формуле
где — диагональные элементы матрицы . Имеем
Фактические значения критериев сравниваются с табличным при степенях свободы и уровне значимости :
Т.к. , то независимые переменные и мультиколлинеарны с другими.
- Находим частные коэффициенты корреляции по формуле
где — элемент матрицы , содержащийся в -ой строке и -ом столбце; и — диагональные элементы матрицы . Получаем:
Вычисление -критериев Стьюдента осуществляем по формуле
Имеем
Фактические значения критериев сравниваются с табличным при степенях свободы и уровне значимости .
Т.к. , то между независимыми переменными и существует мультиколлинеарность.
Для того, чтобы избавиться от мультиколлинеарности, можно исключить одну из переменных мультиколлинеарной пары и . Удалить следует переменную , т.к. у неё больше значение -критерия. Следовательно, она больше влияет на общую мультиколлинеарность модели. Однако этот шаг не должен противоречить экономическому смыслу задачи.
Гетсроскедастичность в эконометрическом моделировании
Условие независимости дисперсии ошибок от номера наблюдения называется гомоскедастичностью. Нарушение данного условия вызывает нежелательное явление, называемое гетероскедастичиостью.
Гетероскедастичность возникает, когда значения переменных в уравнении регрессии сильно отличаются в разных наблюдениях, т.е. если анализируемые объекты неоднородны. Неоднородность объектов может отражаться в несопоставимости их «размеров».
Например, в одну выборку объединены крупные и мелкие банки, у которых анализируется зависимость прибыли от величины активов . В этом случае можно ожидать, что для крупных банков колебание прибыли будет выше, чем для мелких. Величина колебаний повлияет на дисперсию ошибок.
Неоднородность может также проявляться, когда в одну выборку объединяются предприятия разного профиля деятельности.
Часто при исследовании совокупности данных на гетероскедастичность предполагается, что дисперсия остатков пропорциональна квадрату значений одной из независимых переменных .
В этом случае наиболее эффективен параметрический тест Гольд-фельда-Квандта. Опишем его алгоритм.
Задача №2.4.
В таблице 2.5 приведены данные по зависимой переменной и независимым переменным . Требуется проверить наличие гетероскедастичности с помощью параметрического теста Гольд-фельда-Квандта при уровне значимости .
Решение:
Применим параметрический тест Гольдфельда-Квандта.
Предположим, что дисперсия остатков пропорциональна квадрату значений одной из независимых переменных . Графически определим эту переменную. Построим поля парной корреляции (рис. 2.4 — 2.6).
Как видно из рис. 2.4 — 2.6 источником гетероскедастичности является, скорее всего, переменная .
Данные примут вид (табл. 2.6).
В MS Excel в пункте меню «Сервис» выбираем надстройку «Анализ данных». Пользуемся инструментом анализа «Регрессия». Вводим входной интервал для и входной интервал для при уровне надёжности 95%. Имеем следующие модели:
Здравствуйте на этой странице я собрала теорию и практику с примерами решения задач по предмету эконометрика с решением по каждой теме, чтобы вы смогли освежить знания!
Если что-то непонятно — вы всегда можете написать мне в WhatsApp и я вам помогу!
Эконометрика
Эконометрика — это наука, изучающая конкретные количественные и качественные взаимосвязи экономических объектов и процессов с помощью математических и статистических методов и моделей.
Эконометрика — эффективный инструмент научного анализа и моделирования в профессиональной деятельности экономиста, менеджера и инженера
Парная регрессия и корреляция
Парная регрессия — уравнение связи двух переменных и :
где — зависимая переменная (результативный признак);
— независимая, объясняющая переменная (признак-фактор).
Различают линейные и нелинейные регрессии.
Линейная регрессия :
Нелинейные регрессии делятся на два класса: регрессии, нелинейные относительно включенных в анализ объясняющих переменных, но линейные по оцениваемым параметрам, и регрессии, нелинейные по оцениваемым параметрам.
Возможно эта страница вам будет полезна:
Регрессии, нелинейные по объясняющим переменным:
• полиномы разных степеней
• равносторонняя гипербола
Регрессии, нелинейные по оцениваемым параметрам’.
• степенная
• показательная
• экспоненциальная
Построение уравнения регрессии сводится к оценке ее параметров. Для оценки параметров регрессий, линейных по параметрам, используют метод наименьших квадратов (МНК). МНК позволяет получить такие оценки параметров, при которых сумма квадратов отклонений фактических значений результативного признака от теоретических минимальна, т.е.
Для линейных и нелинейных уравнений, приводимых к линейным, решается следующая система относительно и :
Можно воспользоваться готовыми формулами, которые вытекают из этой системы:
Тесноту связи изучаемых явлений оценивает линейный коэффициент парной корреляции для линейной регрессии :
и индекс корреляции — для нелинейной регрессии :
Оценку качества построенной модели даст коэффициент (индекс) детерминации, а также средняя ошибка аппроксимации.
Средняя ошибка аппроксимации — среднее отклонение расчетных значений от фактических:
Допустимый предел значений — не более 8 — 10%.
Средний коэффициент эластичности показывает, на сколько процентов в среднем по совокупности изменится результат у от своей средней величины при изменении фактора на 1% от своего среднего значения:
Задача дисперсионного анализа состоит в анализе дисперсии зависимой переменной:
где — общая сумма квадратов отклонений;
— сумма квадратов отклонений, обусловленная регрессией («объясненная» или «факторная»);
— остаточная сумма квадратов отклонений.
Долю дисперсии, объясняемую регрессией, в общей дисперсии результативного признака у характеризует коэффициент (индекс) детерминации :
Коэффициент детерминации — квадрат коэффициента или индекса корреляции.
-тест — оценивание качества уравнения регрессии — состоит в проверке гипотезы о статистической незначимости уравнения регрессии и показателя тесноты связи. Дня этого выполняется сравнение фактического и критического (табличного) значений -критерия Фишера. определяется из соотношения значений факторной и остаточной дисперсий, рассчитанных на одну степень свободы:
где — число единиц совокупности;
— число параметров при переменных .
— это максимально возможное значение критерия под влиянием случайных факторов при данных степенях свободы и уровне значимости . Уровень значимости — вероятность отвергнуть правильную гипотезу при условии, что она верна. Обычно принимается равной 0,05 или 0,01.
Если , то — гипотеза о случайной природе оцениваемых характеристик отклоняется и признается их статистическая значимость и надежность. Если , то гипотеза не отклоняется и признается статистическая незначимость, ненадежность уравнения регрессии.
Для оценки статистической значимости коэффициентов регрессии и корреляции рассчитываются -критерий Стьюдента и доверительные интервалы каждого из показателей. Выдвигается гипотеза о случайной природе показателей, т.е. о незначимом их отличии от нуля. Оценка значимости коэффициентов регрессии и корреляции с помощью -критерия Стьюдента проводится путем сопоставления их значений с величиной случайной ошибки:
Случайные ошибки параметров линейной регрессии и коэффициента корреляции определяются по формулам:
Сравнивая фактическое и критическое (табличное) значения -статистики — и — принимаем или отвергаем гипотезу .
Связь между -критерием Фишера и -статистикой Стьюдента выражается равенством
Если то отклоняется, т.е. и не случайно отличаются от нуля и сформировались под влиянием систематически действующего фактора . Если , то гипотеза не отклоняется и признается случайная природа формирования или .
Для расчета доверительного интервала определяем предельную ошибку для каждого показателя:
Формулы для расчета доверительных интервалов имеют следующий вид:
Если в границы доверительного интервала попадает ноль, т.е. нижняя граница отрицательна, а верхняя положительна, то оцениваемый параметр принимается нулевым, так как он не может одновременно принимать и положительное, и отрицательное значения.
Прогнозное значение определяется путем подстановки в уравнение регрессии соответствующего (прогнозного) значения . Вычисляется средняя стандартная ошибка прогноза и строится доверительный интервал прогноза :
где
Пример задачи №1
По семи территориям Уральского района за 199Х г. известны значения двух признаков (табл. 1.1).
Требуется:
а)линейной;
б) степенной;
в) показательной;
г) равносторонней гиперболы.
Оценить каждую модель через среднюю ошибку аппроксимации и -критерий Фишера.
Решение:
1а. Для расчета параметров и линейной регрессии
решаем систему нормальных уравнений относительно и :
По исходным данным рассчитываем
Уравнение регрессии:
С увеличением среднедневной заработной платы на 1 руб. доля расходов на покупку продовольственных товаров снижается в среднем на 0,35 %-ных пункта. Рассчитаем линейный коэффициент парной корреляции:
Связь умеренная, обратная.
Определим коэффициент детерминации:
Вариация результата на 12,7% объясняется вариацией фактора . Подставляя в уравнение регрессии фактические значения , определим теоретические (расчетные) значения . Найдем величину средней ошибки аппроксимации :
В среднем расчетные значения отклоняются от фактических на 8,1%.
Рассчитаем -критерий:
поскольку , следует рассмотреть
Полученное значение указывает на необходимость принять гипотезу о случайной природе выявленной зависимости и статистической незначимости параметров уравнения и показателя тесноты связи.
- Построению степенной модели предшествует процедура линеаризации переменных. В примере линеаризация производится путем логарифмирования обеих частей уравнения:
Для расчетов используем данные табл. 1.3.
Рассчитаем и :
Получим линейное уравнение:
Выполнив его потенцирование, получим:
Подставляя в данное уравнение фактические значения , получаем теоретические значения результата . По ним рассчитаем показатели: тесноты связи — индекс корреляции и среднюю ошибку аппроксимации :
Характеристики степенной модели указывают, что она несколько лучше линейной функции описывает взаимосвязь.
1в. Построению уравнения показательной кривой предшествует процедура линеаризации переменных при логарифмировании обеих частей уравнения:
где
Для расчетов используем данные табл. 1.4.
Значения параметров регрессии и составили:
Получено линейное уравнение:
Произведем потенцирование полученного уравнения и запишем его в обычной форме:
Тесноту связи оценим через индекс корреляции :
Связь умеренная.
, что говорит о повышенной ошибке аппроксимации, но в допустимых пределах. Показательная функция чуть хуже, чем степенная, она описывает изучаемую зависимость.
1г. Уравнение равносторонней гиперболы линеаризуется при замене:. Тогда .
Для расчетов используем данные табл. 1.5.
Значения параметров регрессии и составили:
Получено уравнение:
Индекс корреляции:
. По уравнению равносторонней гиперболы полумена наибольшая оценка тесноты связи: =0,3944 (по сравнению с линейной, степенной и показательной регрессиями). остается на допустимом уровне:
где
Следовательно, принимается гипотеза о статистически незначимых параметрах этого уравнения. Этот результат можно объяснить сравнительно невысокой теснотой выявленной зависимости и небольшим числом наблюдений.
Пример задачи №2
По территориям региона приводятся данные за 199Х г. (табл. 1.6).
Требуется:
- Построить линейное уравнение парной регрессии у от х.
- Рассчитать линейный коэффициент парной корреляции и среднюю ошибку аппроксимации.
- Оценить статистическую значимость параметров регрессии и корреляции.
- Выполнить прогноз заработной платы у при прогнозном значении среднедушевого прожиточного минимумах, составляющем 107% от среднего уровня.
- Оценить точность прогноза, рассчитав ошибку прогноза и его доверительный интервал.
Решение:
- Для расчета параметров уравнения линейной регрессии строим расчетную таблицу (табл. 1.7).
Получено уравнение регрессии:
С увеличением среднедушевого прожиточного минимума на 1 руб. среднедневная заработная плата возрастает в среднем на 0,92 руб.
- Тесноту линейной связи оценит коэффициент корреляции:
Это означает, что 52% вариации заработной платы () объясняется вариацией фактора — среднедушевого прожиточного минимума. Качество модели определяет средняя ошибка аппроксимации:
Качество построенной модели оценивается как хорошее, так как не превышает 8 — 10%.
- Оценку статистической значимости параметров регрессии проведем с помощью -статистики Стьюдента и путем расчета доверительного интервала каждого из показателей.
Выдвигаем гипотезу о статистически незначимом отличии показателей от нуля:
для числа степеней свободы
составит 2,23.
Определим случайные ошибки :
Тогда
Фактические значения -статистики превосходят табличные значения:
поэтому гипотеза отклоняется, т.е. и не случайно отличаются от нуля, а статистически значимы.
Рассчитаем доверительный интервал для и . Для этого определим предельную ошибку для каждого показателя:
Доверительные интервалы:
Анализ верхней и нижней границ доверительных интервалов приводит к выводу о том, что с вероятностью
параметры и , находясь в указанных границах, не принимают нулевых значений, т.е. не являются статистически незначимыми и существенно отличны от нуля.
Полученные оценки уравнения регрессии позволяют использовать его для прогноза. Если прогнозное значение прожиточного минимума составит:
тогда прогнозное значение прожиточного минимума составит:
5. Ошибка прогноза составит:
Предельная ошибка прогноза, которая в 95% случаев не будет превышена, составит:
Доверительный интервал прогноза:
Выполненный прогноз среднемесячной заработной платы оказался надежным
но неточным, так как диапазон верхней и нижней границ доверительного интервала составляет 1,95 раза:
Пример задачи №3
По группе предприятий, производящих однородную продукцию, известно, как зависит себестоимость единицы продукции у от факторов, приведенных в табл. 1.8.
Требуется:
- Определить с помощью коэффициентов эластичности силу влияния каждого фактора на результат.
- Ранжировать факторы по силе влияния.
Решение:
- Для уравнения равносторонней гиперболы
Для уравнения прямой
Для уравнения степенной зависимости
Для уравнения показательной зависимости
Сравнивая значения , ранжируем по силе их влияния на себестоимость единицы продукции:
Для формирования уровня себестоимости продукции фуппы предприятий первоочередное значение имеют цены на энергоносители; в гораздо меньшей степени влияют трудоемкость продукции и отчисляемая часть прибыли. Фактором снижения себестоимости выступает размер производства: с ростом его на 1% себестоимость единицы продукции снижается на -0,97%.
Пример задачи №4
Зависимость потребления продукта А от среднедушевого дохода по данным 20 семей характеризуется следующим образом:
уравнение регрессии
индекс корреляции
остаточная дисперсия
Требуется:
Провести дисперсионный анализ полученных результатов.
Решение:
Результаты дисперсионного анализа приведены в табл. 1.9.
В силу того что
гипотеза о случайности различий факторной и остаточной дисперсий отклоняется. Эти различия существенны, статистически значимы, уравнение надежно, значимо, показатель тесноты связи надежен и отражает устойчивую зависимость потребления продукта от среднедушевого дохода.
Реализация типовых задач в Excel
Решение с помощью ППП Excel
- Встроенная статистическая функция ЛИНЕЙН определяет параметры линейной регрессии . Порядок вычисления следующий:
1) введите исходные данные или откройте существующий файл, содержащий анализируемые данные;
2) выделите область пустых ячеек 5×2 (5 строк, 2 столбца) для вывода результатов регрессионной статистики или область 1×2 — для получения только оценок коэффициентов регрессии;
3) активизируйте Мастер функций любым нз способов:
а) в главном меню выберите Вставка/Функция;
б) на панели инструментов Стандартная щелкните по кнопке Вставка функции;
4) в окне Категория (рис. 1.1) выберите Статистические, в окне Функция — ЛИНЕЙН. Щелкните по кнопке ОК;
5) заполните аргументы функции (рис. 1.2):
Известные значенияу — диапазон, содержащий данные результативного признака;
Известные значения_х — диапазон, содержащий данные факторов независимого признака;
Константа — логическое значение, которое указывает на наличие или на отсутствие свободного члена в уравнении; если Константа = 1, то свободный член рассчитывается обычным образом, если Константа = 0, то свободный член равен 0; Статистика — логическое значение, которое указывает, выводить дополнительную информацию по регрессионному анализу или нет. Если Статистика = 1, то дополнительная информация выводится, если Статистика — 0, то выводятся только оценки параметров уравнения. Щелкните по кнопке ОК;
6) в левой верхней ячейке выделенной области появится первый элемент итоговой таблицы. Чтобы раскрыть всю таблицу, нажмите на клавишу , а затем — на комбинацию клавиш
Дополнительная регрессионная статистика будет выводиться в порядке, указанном в следующей схеме:
Для вычисления параметров экспоненциальной кривой в MS Excel применяется встроенная статистическая функция ЛГРФПРИБЛ. Порядок вычисления аналогичен применению функции ЛИНЕЙН.
Для данных из примера 2 результат вычисления функции ЛИНЕЙН представлен на рис. 1.3, функции ЛГРФПРИБЛ — на рис. 1.4.
- С помощью инструмента анализа данных Регрессия, помимо результатов регрессионной статистики, дисперсионного анализа и доверительных интервалов, можно получить остатки и графики подбора линии регрессии, остатков и нормальной вероятности. Порядок действий следующий:
1) проверьте доступ к пакету анализа. В главном меню последовательно выберите Сервис /Надстройки. Установите флажок Пакет анализа (рис. 1.5);
2) в главном меню выберите Сервис/Анализ данных/Регрессия. Щелкните по кнопке ОК;
3) заполните диалоговое окно ввода данных и параметров вывода (рис. 1.6):
Входной интервал — диапазон, содержащий данные результативного признака;
Входной интервал — диапазон, содержащий данные факторов независимого признака;
Метки — флажок, который указывает, содержит ли первая строка названия столбцов или нет;
Константа — ноль — флажок, указывающий на наличие или отсутствие свободного члена в уравнении;
Выходной интервал — достаточно указать левую верхнюю ячейку будущего диапазона;
Новый рабочий лист — можно задать произвольное имя нового листа.
Если необходимо получить информацию и графики остатков, установите соответствующие флажки в диалоговом окне. Щелкните по кнопке ОК.
Результаты регрессионного анализа для данных из примера 2 представлены на рис. 1.7.
Решение с помощью ППП Statgraphics
Порядок вычислений при использовании функции Simple Regression следующий:
1) введите исходные данные (рис. 1.8) или откройте существующий файл, содержащий исходные данные;
2) в главном меню последовательно выберите Relate/Simple Regression;
3) заполните диалоговое окно ввода данных. В поле «» введите название столбца, содержащего зависимую переменную, в поле «» -название столбца, содержащего значения факторного признака. Щелкните по кнопке ОК;
4) в окне табличных настроек поставьте флажок напротив Analysis Summary.
Результаты вычислений появятся в отдельном окне. Для данных из примера 2 результат применения функции Simple Regression представлен на рис. 1.9.
Как видим, результаты вычислений вручную и с помощью компьютера совпадают.
Возможно эта страница вам будет полезна:
Множественная регрессия и корреляция
Множественная регрессия — уравнение связи с несколькими независимыми переменными:
где — зависимая переменная (результативный признак);
— независимые переменные (факторы).
Для построения уравнения множественной регрессии чаще используются следующие функции:
• линейная —
• степенная —
• экспонента —
• гипербола —
Можно использовать и другие функции, приводимые к линейному виду.
Для оценки параметров уравнения множественной регрессии применяют метод наименьших квадратов (МНК). Для линейных уравнений и нелинейных уравнений, приводимых к линейным, строится следующая система нормальных уравнений, решение которой позволяет получить оценки параметров регрессии:
Для ее решения может быть применен метод определителей:
где
определитель системы.
— частные определители; которые получаются путем замены соответствующего столбца матрицы определителя системы данными левой части системы.
Другой вид Уравнения множественной регрессии — уравнение регрессии в стандартизованном масштабе:
у-у
где — стандартизованные переменные;
— стандартизованные коэффициенты регрессии.
К уравнению множественной регрессии в стандартизованном масштабе применим МНК. Стандартизованные коэффициенты регрессии (-коэффициенты) определяются из следующей системы уравнений:
Связь коэффициентов множественной регрессии со стандартизованными коэффициентами описывается соотношением
Параметр определяется как
Средние коэффициенты эластичности для линейной регрессии рассчитываются по формуле
Для расчета частных коэффициентов эластичности применяется следующая формула:
Тесноту совместного влияния факторов на результат оценивает индекс множественной корреляции:
Значение индекса множественной корреляции лежит в пределах от 0 до 1 и должно быть больше или ранно максимальному парному индексу корреляции:
Индекс множественной корреляции для уравнения в стандартизованном масштабе можно записать и виде
При линейной зависимости коэффициент множественной корреляции можно определить через матрицу парных коэффициентов корреляции:
где
определитель матрицы парных коэффициентов корреляии;
определитель матрицы межфакторной корреляции.
Частные коэффициенты (или индексы) корреляции, измеряющие влияние на у фактора при неизменном уровне других факторов, можно определить по формуле
или по рекуррентной формуле:
Частные коэффициенты корреляции изменяются в пределах от —1 до 1.
Качество построенной модели в целом оценивает коэффициент (индекс) детерминации. Коэффициент множественной детерминации рассчитывается как квадрат индекса множественной корреляции:
Скорректированный индекс множественной детерминации содержит поправку на число степеней свободы и рассчитывается по формуле
где — число наблюдений; — число факторов.
Значимость уравнения множественной регрессии в целом оценивается с помощью -критерия Фишера:
Частный -критерий оценивает статистическую значимость присутствия каждого из факторов в уравнении. В общем виде для фактора частный -критерий определится как
Оценка значимости коэффициентов чистой регрессии с помощью -критерия Стьюдента сводится к вычислению значения
где — средняя квадратичсская ошибка коэффициента регрессии она может быть определена по следующей формуле:
При построении уравнения множественной регрессии может возникнуть проблема мупьтиколлинеарности факторов, их тесной линейной связанности.
Считается, что две переменные явно коллинеарны, т.е. находятся между собой в линейной зависимости, если .
По величине парных коэффициентов корреляции обнаруживается лишь явная коллинеарность факторов. Наибольшие трудности в использовании аппарата множественной регрессии возникают при наличии мультиколлинеарности факторов. Чем сильнее мультикол-линеарность факторов, тем менее надежна оценка распределения суммы объясненной вариации по отдельным факторам с помощью метода наименьших квадратов.
Для оценки мультиколлинеарности факторов может использоваться определитель матрицы парных коэффициентов корреляции между факторами.
Если бы факторы не коррелировали между собой, то матрица парных коэффициентов корреляции между факторами была бы единичной матрицей, поскольку все недиагональные элементы были бы равны нулю. Так, для включающего три объясняющих переменных уравнения
матрица коэффициентов корреляции между факторами имела бы определитель, равный 1:
так как
Если же наоборот, между факторами существует полная линейная зависимость и все коэффициенты корреляции равны 1, то определитель такой матрицы равен 0:
Чем ближе к 0 определитель матрицы межфакторной корреляции, тем сильнее мультиколлинеарность факторов и ненадежнее результаты множественной регрессии. И наоборот, чем ближе к 1 определитель матрицы межфакторной корреляции, тем меньше мультиколлинеарность факторов.
Проверка мультиколлинеарности факторов может быть проведена методом испытания гипотезы о независимости переменных
Доказано, что величина
имеет приближенное распределение
степенями свободы. Если фактическое значение превосходит табличное (критическое) то гипотеза отклоняется. Это означает, что , недиагональные ненулевые коэффициенты корреляции указывают на коллинеарность факторов. Мультиколлинеарность считается доказанной.
Для применения МНК требуется, чтобы дисперсия остатков была гомоскедастичной. Это значит, что для каждого значения фактора остатки имеют одинаковую дисперсию. Если это условие не соблюдается, то имеет место гетероскедастичность.
При нарушении гомоскедастичности мы имеем неравенства
При малом объеме выборки для оценки гетероскедастичности может использоваться метод Гольдфельда Кнандта. Основная идея теста Гольдфельда — Квандта состоит в следующем:
1) упорядочение и наблюдений по мере возрастания переменной ;
2) исключение из рассмотрения центральных наблюдений; при этом , где — число оцениваемых параметров;
3) разделение совокупности из наблюдений на две группы (соответственно с малыми и с большими значениями фактора ) и определение по каждой из групп ураннсний регрессии;
4) определение остаточной суммы киндратов для первой и второй групп и нахождение их отношения:
При выполнении нулевой гипотезы о гомоскедастичности отношение будет удовлетворять -критерию со степенями свободы для каждой остаточной суммы квадратов. Чем больше величина превышает табличное значение -критерия, тем более нарушена предпосылка о равенстве дисперсий остаточных величин.
Уравнения множественной регрессии могут включать в качестве независимых переменных качественные признаки (например, профессия, пол, образование, климатические условия, отдельные регионы и т.д.). Чтобы ввести такие переменные в регрессионную модель, их необходимо упорядочить и присвоить им те или иные значения, т.е. качественные переменные преобразовать в количественные.
Такого вида сконструированные переменные принято в эконометрике называть фиктивными переменными. Например, включать в модель фактор «пол» в виде фиктивной переменной можно в следующем виде:
Коэффициент регрессии при фиктивной переменной интерпретируется как среднее изменение зависимой переменной при переходе от одной категории (женский пол) к другой (мужской пол) при неизменных значениях остальных параметров. На основе -критерия Стьюдента делается вывод о значимости влияния фиктивной переменной, существенности расхождения между категориями.
Пример задачи №5
По 30 территориям России имеются данные, представленные в табл. 2.1.
Требуется:
- Построить уравнение множественной регрессии в стандартизованной и естественной форме; рассчитать частные коэффициенты эластичности, сравнить их с и пояснить различия между ними.
- Рассчитать линейные коэффициенты частной корреляции и коэффициент множественной корреляции, сравнить их с линейными коэффициентами парной корреляции, пояснить различия между ними.
- Рассчитать общий и частные -критерии Фишера.
Решение:
Линейное уравнение множественной регрессии от и имеет вид:
Для расчета его параметров применим метод стандартизации переменных и построим искомое уравнение в стандартизованном масштабе:
Расчет -коэффициентов выполним по формулам
Получим уравнение
Для построения уравнения в естественной форме рассчитаем и , используя формулы для перехода от к ;
Значение а определим из соотношения
Для характеристики относительной силы влияния и на рассчитаем средние коэффициенты эластичности:
С увеличением средней заработной платы на 1% от ее среднего уровня средний душевой доход у возрастает на 1,02% от своего среднего уровня; при повышении среднего возраста безработного на 1% среднедушевой доход у снижается на 0,87% от своего среднего уровня. Очевидно, что сила влияния средней заработной платы на средний душевой доход у оказалась большей, чем сила влияния среднего возраста безработного . К аналогичным выводам о силе связи приходим при сравнении модулей значений и :
Различия в силе влияния фактора на результат, полученные при сравнении и объясняются тем, что коэффициент эластичности исходит из соотношения средних:
-коэффициент — из соотношения средних квадратических отклонений:
- Линейные коэффициенты частной корреляции здесь рассчитываются по рекуррентной формуле:
Если сравнить значения коэффициентов парной и частной корреляции, то приходим к выводу, что из-за слабой межфакторной связи коэффициенты парной и частной корреляции отличаются незначительно: выводы о тесноте и направлении связи на основе коэффициентов парной и частной корреляции совпадают:
Расчет линейного коэффициента множественной корреляции выполним с использованием коэффициентов и :
Зависимость от и характеризуется как тесная, в которой 72% вариации среднего душевого дохода определяются вариацией учтенных в модели факторов: средней заработной платы и среднего возраста безработного. Прочие факторы, не включенные в модель, составляют соответственно 28% от общей вариации .
Сравнивая приходим к выводу о необходимости отклонить гипотезу , так как
С вероятностью делаем заключение о статистической значимости уравнения в целом и показателя тесноты связи которые сформировались под неслучайным воздействием факторов и .
Частные -критерии — и оценивают статистическую значимость присутствия факторов и в уравнении множественной регрессии, оценивают целесообразность включения в уравнение одного фактора после другого фактора, т.е. оценивает целесообразность включения в уравнение фактора после того, как в него был включен фактор . Соответственно указывает на целесообразность включения в модель фактора после фактора :
Сравнивая приходим к выводу о целесообразности включения в модель фактора после’ фактора , так как
Гипотезу о несущественности прироста за счет включения дополнительного фактора отклоняем и приходим к выводу о статистически подтвержденной целесообразности включения фактора после фактора .
Целесообразность включения в модель фактора после фактора проверяет :
Низкое значение (немногим больше 1) свидетельствует о статистической незначимости прироста за счет включения в модель фактора после фактора . Следовательно, подтверждается нулевая гипотеза нецелесообразности включения в модель фактора (средний возраст безработного). Это означает, что парная регрессионная модель зависимости среднего дохода от средней заработной платы является достаточно статистически значимой, надежной и что нет необходимости улучшать ее, включая дополнительный фактор (средний возраст безработного).
Пример задачи №6
По 20 территориям России изучаются следующие данные (табл. 2.2): зависимость среднегодового душевого дохода у (тыс. руб.) от доли занятых тяжелым физическим трудом в общей численности занятых (%) и от доли экономически активного населения в численности всего населения (%).
Требуется:
- Составить таблицу дисперсионного анализа для проверки при уровне значимости статистической значимости уравнения множественной регрессии и его показателя тесноты связи.
- С помощью частных -критериев Фишера оценить, насколько целесообразно включение в уравнение множественной регрессии фактора после фактора и насколько целесообразно включение после .
- Оценить с помощью -критерия Стыодента статистическую значимость коэффициентов при переменных и множественного уравнения регрессии.
Решение:
- Задача дисперсионного анализа состоит в проверке нулевой гипотезы о статистической незначимости уравнения регрессии в целом и показателя тесноты связи.
Анализ выполняется при сравнении фактического и табличного (критического) значений -критерия Фишера
определяется из соотношения значений факторной и остаточной дисперсий, рассчитанных на одну степень свободы:
где — число единиц совокупности;
— число факторов в уравнении линейной регрессии; — фактическое значение результативного признака; — расчетное значение результативного признака.
Результаты дисперсионного анализа представлены в табл. 2.3.
Сравнивая приходим к выводу о необходимости отклонить гипотезу и сделать вывод о статистической значимости уравнения регрессии в целом и значения , так как они статистически надежны и сформировались под систематическим действием неслучайных причин. Вероятность того, что допускаются ошибки при отклонении нулевой гипотезы, не превышает 5%, и это является достаточно малой величиной.
Возможно эта страница вам будет полезна:
Результаты дисперсионного анализа представлены в табл. 2.4.
Включение фактора после фактора оказалось статистически значимым и оправданным: прирост факторной дисперсии (в расчете на одну степень свободы) оказался существенным, т.е. следствием дополнительного включения в модель систематически действующего фактора так как
Аналогично проверим целесообразность включения в модель дополнительного фактора после включенного ранее фактора . Расчет выполним с использованием показателей тесноты связи
В силу того что
приходим к выводу, что включение после оказалось бесполезным: прирост факторной дисперсии в расчете на одну степень свободы был несуществен, статистически незначим, т.е. влияние не является устойчивым, систематическим. Вполне возможно было ограничиться построением линейного уравнения парной регрессии у от .
Табличные (критические) значения -критерия Стьюдента зависят от принятого уровня значимости (обычно это 0,1; 0,05 или 0,01) и от числа степеней свободы , где — число единиц совокупности, — число факторов в уравнении.
В нашем примере при
Сравнивая , приходим к выводу, что так как коэффициент регрессии является статистически значимым, надежным, на него можно опираться в анализе и в прогнозе. Так как
приходим к заключению, что величина является статистически незначимой, ненадежной в силу того, что она формируется преимущественно под воздействием случайных факторов. Еще раз подтверждается статистическая значимость влияния (доли занятых тяжелым физическим трудом) на у (среднедушевой доход) и ненадежность, незначимость влияния (доли экономически активного населения в численности всего населения).
Возможно эта страница вам будет полезна:
Пример задачи №7
Зависимость спроса на свинину от цены на нее и от цены на говядину представлена уравнением
Требуется:
- Представить данное уравнение в естественной форме (не в логарифмах).
- Оценить значимость параметров данного уравнения, если известно, что -критерий для параметра при составил 0,827, а для параметра при — 1,015.
Решение:
- Представленное степенное уравнение множественной регрессии приводим к естественной форме путём потенцирования обеих частей уравнения:
Значения коэффициентов регрессии и в степенной функции равны коэффициентам эластичности результата от и .
Спрос на свинину сильнее связан с ценой на говядину — он увеличивается в среднем на 2,83% при росте цен на 1%. С ценой на свинину спрос на нее связан обратной зависимостью: с ростом цен на 1% потребление снижается в среднем на 0,21%.
- Это весьма небольшие значения -критерия, которые свидетельствуют о случайной природе взаимосвязи, о статистической ненадежности всего уравнения, поэтому применять полученное уравнение для прогноза не рекомендуется.
Возможно эта страница вам будет полезна:
Пример задачи №8
По 20 предприятиям региона (табл. 2.5) изучается зависимость выработки продукции на одного работника у (тыс. руб.) от ввода в действие новых основных фондов (% от стоимости фондов на конец года) и от удельного веса рабочих высокой квалификации в общей численности рабочих (%).
Требуется:
- Оценить показатели вариации каждого признака и сделать вывод о возможностях применения МНК для их изучения.
- Проанализировать линейные коэффициенты парной и частной корреляции.
- Написать уравнение множественной регрессии, оценить значимость его параметров, пояснить их экономический смысл.
- С помощью -критерия Фишера оценить статистическую надежность уравнения регрессии и . Сравнить значения скорректированного и нескорректированного линейных коэффициентов множественной детерминации.
- С помощью частных -критериев Фишера оценить целесообразность включения в уравнение множественной регрессии фактора после и фактора после .
- Рассчитать средние частные коэффициенты эластичности и дать на их основе сравнительную оценку силы влияния факторов на результат.
Возможно эта страница вам будет полезна:
Реализация типовых задач в Excel
- Решение примера проведем с использованием ППП MS Excel и Statgraphics.
Решение с помощью ППП Excel
Сводную таблицу основных статистических характеристик для одного или нескольких массивов данных можно получить с помощью инструмента анализа данных Описательная статистика. Для этого выполните следующие шаги:
1) введите исходные данные или откройте существующий файл, содержащий анализируемые данные;
2) в главном меню выберите последовательно пункты Сервис / Анализ данных / Описательная статистика, после чего щелкните по кнопке ОК;
3) заполните диалоговое окно ввода данных и параметров вывода (рис. 2.1):
Входной интервал — диапазон, содержащий анализируемые данные, это может быть одна или несколько строк (столбцов); Группирование — по столбцам или по строкам — необходимо указать дополнительно;
Метки — флажок, который указывает, содержит ли первая строка названия столбцов или нет;
Выходной интервал — достаточно указать левую верхнюю ячейку будущего диапазона;
Новый рабочий лист — можно задать произвольное имя нового листа.
Если необходимо получить дополнительную информацию Итоговой статистики, Уровня надежности, k-го наибольшего и наименьшего значений, установите соответствующие флажки в диалоговом окне. Щелкните по кнопке ОК.
Результаты вычисления соответствующих показателей для каждого признака представлены на рис. 2.2.
Решение с помощью ППП Statgraphics
Для проведения многофакторного анализа в ППП Statgraphics используется пункт меню Multiple Variable Analysis. Для получения показателей описательной статистики необходимо проделать следующие операции:
1) ввести исходные данные или открыть существующий файл, содержащий анализируемые данные;
2) в главном меню выбрать Describe/Numeric Data/Multiple Variable Analysis;
3) заполнить диалоговое окно ввода данных (рис. 2.3). Ввести названия всех столбцов, значения которых вы хотите включить в анализ; щелкнуть по кнопке ОК;
4) в окне табличных настроек поставить флажок напротив Summary Statistics (рис. 2.4). Итоговая статистика — показатели вариации -появится в отдельном окне.
Для данных примера 4 результат применения функции Multiple Variable Analysis представлен на рис. 2.5.
Сравнивая значения средних квадратических отклонений и средних величин и определяя коэффициенты вариации:
приходим к выводу о повышенном уровне варьирования признаков, хотя и в допустимых пределах, не превышающих 35%. Совокупность предприятий однородна, и для ее изучения могут использоваться метод наименьших квадратов и вероятностные методы оценки статистических гипотез.
- Значения линейных коэффициентов парной корреляции определяют тесноту попарно связанных переменных, использованных в данном уравнении множественной регрессии. Линейные коэффициенты частной корреляции оценивают тесноту связи значений двух переменных, исключая влияние всех других переменных, представленных в уравнении множественной регрессии.
Решение с помощью ППП Excel
К сожалению, в ППП MS Excel нет специального инструмента для расчета линейных коэффициентов частной корреляции. Матрицу парных коэффициентов корреляции переменных можно рассчитать, используя инструмент анализа данных Корреляция. Для этого:
1) в главном меню последовательно выберите пункты Сервис / Анализ данных / Корреляция. Щелкните по кнопке ОК;
2) заполните диалоговое окно ввода данных и параметров вывода (см. рис. 2.1);
3) результаты вычислений — матрица коэффициентов парной корреляции — представлены на рис. 2.6.
Решение с помощью ППП Stat graphics
При проведении многофакторного анализа — Multiple Variable Analysis — вычисляются линейные коэффициенты парной корреляции и линейные коэффициенты частной корреляции. Последовательность операций описана в п.1 этого примера. Для отображения результатов вычисления на экране необходимо установить флажки напротив Correlations и Partial Correlations в окне табличных настроек (рис. 2.7).
В результате получим матрицы коэффициентов парной и частной корреляции (рис. 2.8).
Значения коэффициентов парной корреляции указывают на весьма тесную связь выработки у как с коэффициентом обновления основных фондов — , так и с долей рабочих высокой квалификации
Но в то же время межфакторная связь весьма тесная и превышает тесноту связи с . В связи с этим для улучшения данной модели можно исключить из нее фактор как малоинформативный, недостаточно статистически надежный.
Коэффициенты частной корреляции дают более точную характеристику тесноты связи двух признаков, чем коэффициенты парной корреляции, так как очищают парную зависимость от взаимодействия данной пары признаков с другими признаками, представленными в модели. Наиболее тесно связаны и :
связь и гораздо слабее:
а межфакторная зависимость и выше, чем парная и :
Все это приводит к выводу о необходимости исключить фактор — доля высококвалифицированных рабочих — из правой части уравнения множественной регрессии.
Если сравнить коэффициенты парной и частной корреляции, то можно увидеть, что из-за высокой межфакторной зависимости коэффициенты парной корреляции дают завышенные оценки тесноты связи:
Именно по этой причине рекомендуется при наличии сильной коллинеарности (взаимосвязи) факторов исключать из исследования тот фактор, у которого теснота парной зависимости меньше, чем теснота межфакторной связи.
- Вычисление параметров линейного уравнения множественной регрессии.
Решение с помощью ППП Excel
Эта операция проводится с помощью инструмента анализа данных Регрессия. Она аналогична расчету параметров парной линейной регрессии, описанной в 1-м разделе практикума, только в отличие от парной регрессии в диалоговом окне при заполнении параметра входной интервал и следует указать не один столбец, а все столбцы, содержащие значения факторных признаков. Результаты анализа представлены на рис. 2.9.
Для вычисления параметров множестнсшшП регрессии можно использовать процедуру Multiple Regression. Дни »нно:
1) введите исходные данные или откройте сущее i иун>щи11 файл;
2) в главном меню последовательно выберите Heinle / Multiple Regression;
3) заполните диалоговое окно ввода данных. II ноне Depended Variable введите название столбца, содержащею шичпш» зависимой переменной, в поле Independed Variable — нашими* i ишбцов, содержащих значения факторов. Щелкните по кнопке ОК
Результаты вычисления функции Multiple КсЦ1 гм1«ш появятся в отдельном окне (рис. 2.10).
По результатам вычислений составим урцниемн* множественной регрессии вида
Значения случайных ошибок параметров с учетом округления:
Они показывают, какое значение данной характеристики сформировалось под влиянием случайных факторов. Эти значения используются для расчета -критерия С п.юдснта:
Если значения -критерия больше 2-3, можно сделать вывод о существенности данного параметра, который формируется под воздействием неслучайных причин. Здесь статистически значимыми являются и , а величина сформировалась под воздействием случайных причин, поэтому фактор силу влияния которого оценивает , можно исключить как несущественно влияющий, неинформативный.
На это же указывает показатель вероятности случайных значений параметров регрессии: если а меньше принятого нами уровня (обычно 0,1; 0,05 или 0,01; это соответствует 10%; 5% или 1% вероятности), делают вывод о неслучайной природе данного значения параметра, т.е. о том, что он статистически значим и надежен. В противном случае принимается гипотеза о случайной природе значения коэффициентов уравнения. Здесь
что позволяет рассматривать как неинформативный фактор и удалить его для улучшения данного уравнения.
Величина оценивает агрегированное влияние прочих (кроме учтенных в модели факторов и ) факторов на результату.
Величины и указывают, что с увеличением и на единицу их значений результат увеличивается соответственно на 0,9459 и на 0,0856 млн руб. Сравнивать эти значения не следует, так как они зависят от единиц измерения каждого признака и потому несопоставимы между собой.
Оценку надежности уравнения регрессии в целом и показателя тесноты связи дает -критерий Фишера:
По данным таблиц дисперсионного анализа, представленным на рис. 2.9 и 2.10, . Вероятность случайно получить такое значение -критерия составляет 0,0000, что не превышает допустимый уровень значимости 5%; об этом свидетельствует величина — значения из этих же таблиц. Следовательно, полученное значение не случайно, оно сформировалось под алюминием существенных факторов, т.е. подтверждается статистически значимость всего уравнения и показателя тесноты связи .
Значения скорректированного и нескорремирпианпого линейных коэффициентов множественной детерминации приведены на рис. 2.9 и 2.10 в рамках регрессионной статистики.
Нескорректированный коэффициент множественной детерминации
оценивает долю вариации результата за счет представленных в уравнении фактором в общей вариации результата. Здесь эта доля составляет 94,7% и указывает на весьма высокую степень обусловленности вариации вариацией факторов, иными словами — на весьма теси> i факторов с результатом.
Скорректированный коэффициент множественной детерминации
определяет тесноту связи с учетом степеней свободы общей и остаточной дисперсий. Он дает такую оценку тесноты связи, которая не зависит от числа факторов и потому может сравниваться по разным моделям с разным что ном факторов. Оба коэффициента указывают на весьма высокую (Ооиес 90%) детерминированность результата в модели факторами.
1) введите исходные данные или откройте существующий файл;
2) в главном меню последовательно выберите пункты Relate / Multiple Regression;
3) заполните диалоговое окно ввода данных. В поле Depended Variable введите название столбца, содержащего значения зависимой переменной, в поле Independed Variable — названия столбцов, содержащих значения факторов, в том порядке, в котором будет проводиться анализ целесообразности включения факторов в модель. Чтобы оценить статистическую значимость включения в модель фактора после фактора , сначала введите фактор затем . Для оценки обратного порядка включения факторов в модель после введите , затем . Щелкните по кнопке ОК;
4) в окне табличных настроек поставьте флажок напротив поля Conditional Sums of Squares.
Результаты вычисления показаны на рис. 2.11.
Частный -критерий — показывает статистическую значимость включения фактора в модель после того, как в нее включен фактор .
= 2 . Вероятность случайной природы его значения (-значение = 0,1750) составляет 17,5% против принятого уровня значимости (5%). Следовательно, включение в модель фактора — доля высококвалифицированных рабочих — после того, как в уравнение включен фактор — коэффициент обновления основных фондов — статистически нецелесообразно: прирост факторной дисперсии за счет дополнительного признака оказывается незначимым, несущественным; фактор включать в уравнение после фактора не следует.
Если поменять первоначальный порядок включения факторов в модель и рассмотреть вариант включения после , то результат расчета частного -критерия для будет иным.
Вероятность его случайного формирования составила 0,04%, это значительно меньше принятого стандарта (5%). Следовательно, значение частного -критерия для дополнительно включенного фактора не случайно, является статистически значимым, надежным, достоверным: прирост факторной дисперсии за счет дополнительного фактора является существенным. Фактор должен присутствовать в уравнении, в том числе в варианте, когда он дополнительно включается после фактора .
Общий вывод состоит в том, что множественная модель с факторами и с
содержит неинформативный фактор . Если исключить фактор , то можно (ограничиться уравнением парной регрессии:
более простым, хорошо детерминированным, ириголным для анализа и для прогноза.
- Средние частные коэффициенты эластичности показывают, на сколько процентов от значения своей средней изменяется результат при изменении фактора на 1% от своей средней и
при фиксированном воздействии на у всех прочих факторов, включенных в уравнение регрессии. Для линейной зависимости
где — коэффициент регрессии при в уравнении множественной регрессии. Здесь
По значениям частных коэффициентов эластичности можно сделать вывод о более сильном влиянии на результат у признака фактора , чем признака фактора :0,6% против 0,2%.
Возможно эта страница вам будет полезна:
Система эконометрических уравнений
Сложные экономические процессы описывают с помощью системы взаимосвязанных (одновременных) уравнений.
Различают несколько видов систем уравнений: • система независимых уравнений — когда каждая зависимая переменная рассматривается как функция одного и того же набора факторов :
Для решения этой системы и нахождения ее параметров используется метод наименьших квадратов;
• система рекурсивных уравнений — когда зависимая переменная одного уравнения выступает в виде фактора в другом уравнении:
Для решения этой системы и нахождения ее параметров используется метод наименьших квадратов;
• система взаимосвязанных (совместных) уравнений — когда одни и те же зависимые переменные в одних уравнениях входят в левую часть, а в других — в правую:
Такая система уравнений называется структурной формой модели.
Эндогенные переменные — взаимозависимые переменные, которые определяются внутри модели (системы) .
Экзогенные переменные — независимые переменные, которые определяются вне системы .
Предопределенные переменные — экзогенные и лаговые (за предыдущие моменты времени) эндогенные переменные системы.
Коэффициенты и при переменных — структурные коэффициенты модели.
Система линейных функций эндогенных переменных от всех предопределенных переменных системы — приведенная форма модели.
где — коэффициенты приведенной формы модели.
Необходимое условие идентификации — выполнение счетного правила:
— уравнение идентифицируемо;
— уравнение неидентифицируемо;
— уравнение сверхидентифицируемо,
где — число эндогенных переменных в уравнении,
— число предопределенных переменных, отсутствующих в уравнении, но присутствующих в системе.
Достаточное условие идентификации — определитель матрицы, составленной из коэффициентов при переменных, отсутствующих в исследуемом уравнении, не равен нулю, и ранг этой матрицы не менее числа эндогенных переменных системы без единицы.
Для решения идентифицируемого уравнения применяется косвенный метод наименьших квадратов, для решения сверхидентифицированных — двухшаговый метод наименьших квадратов.
Косвенный МНК состоит в следующем:
• составляют приведенную форму модели и определяют численные значения параметров каждого ее уравнения обычным МНК;
• путем алгебраических преобразований переходят от приведенной формы к уравнениям структурной формы модели, получая тем самым численные оценки структурных параметров.
Двухшаговый МНК заключается в следующем:
• составляют приведенную форму модели и определяют численные значения параметров каждого ее уравнения обычным МНК;
• выявляют эндогенные переменные, находящиеся в правой части структурного уравнения, параметры которого определяют двухша-говым МНК, и находят расчетные значения по соответствующим уравнениям приведенной формы модели;
• обычным МНК определяют параметры структурного уравнения, используя в качестве исходных данных фактические значения предопределенных переменных и расчетные значения эндогенных переменных, стоящих в правой части данного структурного уравнения.
Пример задачи №9
Требуется:
- Оценить следующую структурную модель на идентификацию:
- Исходя из приведенной формы модели уравнений
найти структурные коэффициенты модели.
Решение:
Проверим каждое уравнение системы на необходимое (Н) и достаточное (Д) условия идентификации.
Первое уравнение. Н: эндогенных переменных — , отсутствующих экзогенных — . Выполняется необходимое равенство: 2 = 1 + 1, следовательно, уравнение точно идентифицируемо.
Д: в первом уравнений отсутствуют и . Построим матрицу из коэффициентов при них в других уравнениях системы:
Определитель матрицы не равен 0, ранг матрицы равен 2; следовательно, выполняется достаточное условие идентификации, и первое уравнение точно идентифицируемо.
Второе уравнение.
Н: эндогенных переменных — , отсутствующих экзогенных —
Выполняется необходимое равенство: 3 = 2+ 1, следовательно, уравнение точно идентифицируемо.
Д: во втором уравнении отсутствуют и . Построим матрицу из коэффициентов при них в других уравнениях системы:
Определитель матрицы не равен 0, ранг матрицы равен 2, следовательно, выполняется достаточное условие идентификации, и второе уравнение точно идентифицируемо.
Третье уравнение.
Н: эндогенных переменных — , отсутствующих экзогенных — .
Выполняется необходимое равенство: 2=1 + 1, следовательно, уравнение точно идентифицируемо.
Д: в третьем уравнении отсутствуют и . Построим матрицу из коэффициентов при них в других уравнениях системы:
Определитель матрицы не равен 0, ранг матрицы равен 2, следовательно, выполняется достаточное условие идентификации, и третье уравнение точно идентифицируемо.
Следовательно, исследуемая система точно идентифицируема и может быть решена косвенным методом наименьших квадратов.
- Вычислим структурные коэффициенты модели:
1)из третьего уравнения приведенной формы выразим (так как его нет в первом уравнении структурной формы):
Данное выражение содержит переменные которые нужны для первого уравнения структурной формы модели (СФМ). Подставим полученное выражение в первое уравнение приведенной формы модели (ПФМ):
2) во втором уравнении СФМ нет переменных и . Структурные параметры второго уравнения СФМ можно будет определить в два этапа:
Первый этап: выразим в данном случае из первого или третьего уравнения ПФМ. Например, из первого уравнения:
Подстановка данного выражения во второе уравнение ПФМ не решило бы задачу до конца, так как в выражении присутствует , которого нет в СФМ.
Выразим из третьего уравнения ПФМ:
Подставим его в выражение :
Второй этап: аналогично, чтобы выразить через искомые и и , заменим в выражении значение на полученное из первого уравнения ПФМ:
Следовательно,
Подставим полученные и во второе уравнение ПФМ:
Это уравнение можно получить из ПФМ иным путем. Суммируя все уравнения, получим
Далее из первого и второго уравнений ПФМ исключим домножив первое уравнение на 3, а второе — на (-2) и просуммировав их:
Затем аналогичным путем из полученных уравнений исключаем , а именно:
3) из второго уравнения ПФМ выразим , так как его нет в третьем уравнении СФМ:
Подставим полученное выражение в третье уравнение ПФМ:
Таким образом, СФМ примет вид
Пример задачи №10
Изучается модель вида
где — валовой национальный доход;
— валовой национальный доход предшествующего года;
— личное потребление;
— конечный спрос (помимо личного потребления);
— случайные составляющие.
Информация за девять лет о приростах всех показателей дана в табл. 3.1*.
Для данной модели была получена система приведенных уравнений:
Требуется:
- Провести идентификацию модели.
- Рассчитать параметры первого уравнения структурной модели.
Решение:
В данной модели две эндогенные переменные ( и ) и две экзогенные переменные ( и ). Второе уравнение точно идентифицировано, так как содержит две эндогенные переменные и не содержит одну экзогенную переменную из системы. Иными словами, для второго уравнения имеем по счетному правилу идентификации равенство: 2=1 + 1.
Первое уравнение сверхидентифицировано, так как в нем на параметры при и наложено ограничение: они должны бьггь равны. В этом уравнении содержится одна эндогенная переменная . Переменная в данном уравнении не рассматривается как эндогенная, так как она участвует в уравнении не самостоятельно, а вместе с переменной . В данном уравнении отсутствует одна экзогенная переменная, имеющаяся в системе. По счетному правилу идентификации получаем: 1 + 1 = 2: + 1 > Н. Это больше, чем число эндогенных переменных в данном уравнении, следовательно, система сверх-идентифицирована.
- Для определения параметров сверхидентифицированной модели используется двухшаговый метод наименьших квадратов.
Шаг 1. На основе системы приведенных уравнений по точно идентифицированному второму уравнению определим теоретические значения эндогенной переменной . Для этого в приведенное уравнение
подставим значения и , имеющиеся в условии задачи. Получим:
Шаг 2. По сверхидентифицированному уравнению структурной формы модели заменяем фактические значения на теоретические и рассчитываем новую переменную + (табл. 3.2).
Далее к сверхидентифицированному уравнению применяется метод наименьших квадратов. Обозначим новую переменную + через . Решаем уравнение
Система нормальных уравнений составит:
Итак, первое уравнение структурной модели будет таким:
Пример задачи №11
Имеются данные за 1990-1994 гг. (табл. 3.3).
Требуется: Построить модель вида
рассчитав соответствующие структурные коэффициенты.
Решение:
Система одновременных уравнений с двумя эндогенными и двумя экзогенными переменными имеет вид
В каждом уравнении две эндогенные и одна отсутствующая экзогенная переменная из имеющихся в системе. Для каждого уравнения данной системы действует счетное правило 2=1 + 1. Это означает, что каждое уравнение и система в целом идентифицированы.
Для определения параметров такой системы применяется косвенный метод наименьших квадратов.
С этой целью структурная форма модели преобразуется в приведенную форму:
в которой коэффициенты при определяются методом наименьших квадратов.
Для нахождения значений и запишем систему нормальных уравнений:
При ее решении предполагается, что и выражены через отклонения от средних уровней, т. е. матрица исходных данных составит:
Применительно к ней необходимые суммы оказываются следующими:
Система нормальных уравнений составит:
Решая ее, получим:
Итак, имеем
Аналогично строим систему нормальных уравнений для определения коэффициентов и :
Следовательно,
тогда второе уравнение примет вид
Приведенная форма модели имеет вид
Из приведенной формы модели определяем коэффициенты структурной модели:
Итак, структурная форма модели имеет вид
Пример задачи №12
Рассматривается следующая модель:
где
Требуется:
- В предположении, что имеются временные ряды данных по всем переменным модели, предложите способ оценки ее параметров.
- Как изменится ваш ответ на вопрос п. 1, если из модели исключить тождество дохода?
Решение:
- Модель представляет собой систему одновременных уравнений. Для ответа на вопрос о способе оценки параметров модели проверим каждое ее уравнение на идентификацию.
Модель включает четыре эндогенные переменные и четыре предопределенные переменные (две экзогенные переменные — и и две лаговые эндогенные переменные — и ).
Проверим необходимое условие идентификации для уравнений модели уравнение.
Это уравнение включает две эндогенные переменные и одну предопределенную переменную . Следовательно, число предопределенных переменных, не входящих в это уравнение, плюс 1, больше числа эндогенных переменных, входящих в уравнение: 3 + 1 > 2. Уравнение сверх идентифицировано.
II уравнение.
Уравнение II включает две эндогенные переменные, и не включает три предопределенные переменные. Как и I уравнение, оно сверхидентифицировано.
III уравнение.
Уравнение III тоже включает две эндогенные переменные и не включает три предопределенные переменные. Это уравнение сверхидентифицировано.
IV уравнение.
Уравнение IV представляет собой тождество, параметры которого известны. Необходимости в его идентификации нет.
Проверим для каждого из уравнений достаточное условие идентификации. Для этого составим матрицу коэффициентов при переменных модели:
В соответствии с достаточным условием идентификации определитель матрицы коэффициентов при переменных, не входящих в исследуемое уравнение, не должен быть равен нулю, а ранг матрицы должен быть равен числу эндогенных переменных модели минус 1, т.е. 4-1=3.
I уравнение.
Матрица коэффициентов при переменных, не входящих в уравнение, имеет вид
Ее ранг равен 3, так как определитель квадратной подматрицы 3×3 этой матрицы не равен нулю:
Достаточное условие идентификации для I уравнения выполняется.
II уравнение.
Выпишем матрицу коэффициентов при переменных, не входящих в уравнение:
Ее ранг равен трем, так как определитель квадратной подматрицы 3 х 3 этой матрицы не равен нулю:
Достаточное условие идентификации для II уравнения выполняется.
Ill уравнение.
Выпишем матрицу коэффициентов при переменных, не входящих в уравнение:
Ее ранг равен трем, так как определитель квадратной подматрицы 3 х 3 этой матрицы не равен нулю:
Достаточное условие идентификации для III уравнения выполняется.
Таким образом, все уравнения модели сверхидентифицированы. Для оценки параметров каждого из уравнений будем применять двухшаговый МНК.
Шаг 1. Запишем приведенную форму модели в общем виде:
где — случайные ошибки.
Определим параметры каждого из приведенных выше уравнений в отдельности обычным МНК. Затем найдем расчетные значения
эндогенных переменных , используемых в правой части структурной модели, подставляя в каждое уравнение приведенной формы соответствующее значение предопределенных переменных.
Шаг 2. В исходных структурных уравнениях заменим эндогенные переменные, выступающие в качестве факторных признаков, их расчетными значениями:
Применяя к каждому из полученных уравнений в отдельности обычный МНК, определим структурные параметры
Если из модели исключить тождество дохода, число предопределенных переменных модели уменьшится на 1 (из модели будет исключена переменная ). Число эндогенных переменных модели также снизится на единицу — переменная станет экзогенной. В правых частях функции потребления и функции денежного рынка будут находиться только предопределенные переменные. Функция инвестиций постулирует зависимость эндогенной переменной от эндогенной переменной (которая зависит только от предопределенных переменных) и предопределенной переменной . Таким образом, мы получим рекурсивную систему. Ее параметры можно оценивать обычным МНК, и нет необходимости исследования системы уравнения на идентификацию.
Временные ряды в эконометрических исследованиях
Модели, построенные по данным, характеризующим один объект за ряд последовательных моментов (периодов), называются моделями временных рядов.
Временной ряд — это совокупность значений какого-либо показателя за несколько последовательных моментов или периодов.
Каждый уровень временного ряда формируется из трендовой , циклической и случайной компонент.
Модели, в которых временной ряд представлен как сумма перечисленных компонент, — аддитивные модели, как произведение -мультипликативные модели временного ряда. Аддитивная модель имеет вид:
мультипликативная модель:
Построение аддитивной и мультипликативной моделей сводится к расчету значений для каждого уровня ряда. Построение модели включает следующие шаги:
1) выравнивание исходного ряда методом скользящей средней;
2) расчет значений сезонной компоненты ;
3) устранение сезонной компоненты из исходных уровней ряда и получение выровненных данных в аддитивной или в мультипликативной модели;
4) аналитическое выравнивание уровней или и расчет значений Т с использованием полученного уравнения тренда;
5) расчет полученных по модели значений или ;
6) расчет абсолютных и/или относительных ошибок.
Автокорреляция уровней ряда — это корреляционная зависимость между последовательными уровнями временного ряда:
где
коэффициент автокорреляции уровней ряда первого порядка;
где
коэффициент автокорреляции уровней ряда второго порядка.
Формулы для расчета коэффициентов автокорреляции старших порядков легко получить из формулы линейного коэффициента корреляции.
Последовательность коэффициентов автокорреляции уровней первого, второго и т.д. порядков называют автокорреляционной функцией временного ряда, а график зависимости ее значений от величины лага (порядка коэффициента автокорреляции) — коррело-граммой.
Построение аналитической функции для моделирования тенденции (тренда) временного ряда называют аналитическим выравниванием временного ряда. Для этого чаще всего применяются следующие функции:
• линейная
• гипербола
• экспонента
• степенная функция
• парабола второго и более высоких порядков
Параметры трендов определяются обычным МНК, в качестве независимой переменной выступает время , а в качестве зависимой переменной — фактические уровни временного ряда . Критерием отбора наилучшей формы тренда является наибольшее значение скорректированного коэффициента детерминации .
При построении моделей регрессии по временным рядам для устранения тенденции используются следующие методы.
Метод отклонений от тренда предполагает вычисление трендовых значений для каждого временного ряда модели, например и расчет отклонений от трендов:
Для дальнейшего анализа используют не исходные данные, а отклонения от тренда.
Метод последовательных разностей заключается в следующем: если ряд содержит линейный тренд, тогда исходные данные заменяются первыми разностями:
если параболический тренд — вторыми разностями:
В случае экспоненциального и степенного тренда метод последовательных разностей применяется к логарифмам исходных данных.
Модель, включающая фактор времени, имеет вид
Параметры а и b этой модели определяются обычным МНК.
Автокорреляция в остатках — корреляционная зависимость между значениями остатков за текущий и предыдущие моменты времени.
Для определения автокорреляции остатков используют критерий Дарвина — Уотсона и расчет величины:
Коэффициент автокорреляции остатков первого порядка определяется по формуле
Критерий Дарбина — Уотсона и коэффициент автокорреляции остатков первого порядка связаны соотношением
Эконометрические модели, содержащие не только текущие, но и лаговые значения факторных переменных, называются моделями с распределенным лагом.
Модель с распределенным лагом в предположении, что максимальная величина лага конечна, имеет вид
Коэффициент регрессии при переменной характеризует среднее абсолютное изменение при изменении на 1 ед. своего измерения в некоторый фиксированный момент времени , без учета воздействия лаговых значений фактора . Этот коэффициент называют краткосрочным мультипликатором.
В момент воздействие факторной переменной на результат составит условных единиц; в момент времени воздействие можно охарактеризовать суммой и т.д. Эти суммы называют промежуточными мультипликаторами. Для максимального лага воздействие фактора на результат описывается суммой которая называется долгосрочным мультипликатором.
Величины
называются относительными коэффициентами модели с распределенным лагом. Если все коэффициенты имеют одинаковые знаки, то для любого
Величина среднего лага модели множественной регрессии определяется по формуле средней арифметической взвешенной:
и представляет собой средний период, в течение которого будет происходить изменение результата под воздействием изменения фактора в момент .
Медианный лаг — это период, в течение которого с момента времени будет реализована половина общего воздействия фактора на результат:
где — медианный лаг.
Оценку параметров моделей с распределенными лагами можно проводить согласно одному из двух методов: методу Койка или методу Алмон.
В распределении Койка делается предположение, что коэффициенты при лаговых значениях объясняющей переменной убывают в геометрической прогрессии:
Уравнение регрессии преобразуется к виду
После несложных преобразований получаем уравнение, оценки параметров которого приводят к оценкам параметров исходного уравнения.
В методе Алмон предполагается, что веса текущих и лаговых значений объясняющих переменных подчиняются полиномиальному распределению:
Уравнение регрессии примет вид
Расчет параметров модели с распределенным лагом методом Алмон проводится по следующей схеме:
1) устанавливается максимальная величина лага ;
2) определяется степень полинома , описывающего структуру лага;
3) рассчитываются значения переменных ;
4) определяются параметры уравнения линейной регрессии от ;
5) рассчитываются параметры исходной модели с распределенным лагом.
Модели, содержащие в качестве факторов лаговые значения зависимой переменной, называются моделями авторегрессии, например:
Как и в модели с распределенным лагом, в этой модели характеризует краткосрочное изменение под воздействием изменения на 1 ед. Долгосрочный мультипликатор в модели авторегрессии рассчитывается как сумма краткосрочного и промежуточных мультипликаторов:
Отметим, что такая интерпретация коэффициентов модели авторегрессии и расчет долгосрочного мультипликатора основаны на предпосылке о наличии бесконечного лага в воздействии текущего значения зависимой переменной на ее будущие значения.
Пример задачи №13
По данным за 18 месяцев построено уравнение регрессии зависимости прибыли предприятия (млн руб.) от цен на сырье (тыс. руб. за 1 т) и производительности труда (ед. продукции на 1 работника):
При анализе остаточных величин были использованы значения, приведенные в табл. 4.1.
Требуется:
- По трем позициям рассчитать
- Рассчитать критерий Дарбина — Уотсона.
- Оценить полученный результат при 5%-ном уровне значимости.
- Указать, пригодно ли уравнение для прогноза.
Решение:
- определяется путем подстановки фактических значений и в уравнение регрессии:
Остатки рассчитываются по формуле
Следовательно,
— те же значения, что и , но со сдвигом на один месяц. Результаты вычислений оформим в виде табл. 4.2.
- Критерий Дарбина — Уотсона рассчитывается по формуле
4-4 = 4-3,81 =0,19,
что значительно меньше, чем . Это означает наличие в остатках автокорреляции.
- Уравнение регрессии не может быть использовано для прогноза, так как в нем не устранена автокорреляция в остатках, которая может иметь разные причины. Автокорреляция в остатках может означать, что в уравнение не включен какой-либо существенный фактор. Возможно также, что форма связи неточна, а может быть, в рядах динамики имеется общая тенденция.
Пример задачи №14
Имеются следующие данные о величине дохода на одного члена семьи и расхода на товар (табл. 4.3).
Требуется:
- Определить ежегодные абсолютные приросты доходов и расходов и сделать выводы о тенденции развития каждого ряда.
- Перечислить основные пути устранения тенденции для построения модели спроса на товар в зависимости от дохода.
- Построить линейную модель спроса, используя первые разности уровней исходных динамических рядов.
- Пояснить экономический смысл коэффициента регрессии.
- Построить линейную модель спроса на товар , включив в нее фактор времен». Интерпретировать полученные параметры.
Решение:
Обозначим расходы на товар через , а доходы одного члена семьи — через . Ежегодные абсолютные приросты определяются по формулам
Расчеты можно оформить в виде таблицы (табл. 4.4).
Значения не имеют четко выраженной тенденции, они варьируют вокруг среднего уровня, что означает наличие в ряде динамики линейного тренда (линейной тенденции). Аналогичный вывод можно сделать и по ряду : абсолютные приросты не имеют систематической направленности, они примерно стабильны, а следовательно, ряд характеризуется линейной тенденцией.
Так как ряды динамики имеют общую тенденцию к росту, то для построения регрессионной модели спроса на товар в зависимости от дохода необходимо устранить тенденцию. С этой целью модель может строиться по первым разностям, т.е. , если ряды динамики характеризуются линейной тенденцией.
Другой возможный путь учета тенденции при построении моделей — найти по каждому ряду уравнение тренда:
и отклонения от него:
Далее модель строится по отклонениям от тренда:
При построении эконометрических моделей чаще используется другой путь учета тенденции — включение в модель фактора времени. Иными словами, модель строится по исходным данным, но в нее в качестве самостоятельного фактора включается время, т.е. .
Модель имеет вид
Для определения параметров и применяется МНК. Система нормальных уравнений следующая:
Применительно к нашим данным имеем
Решая эту систему, получим:
откуда модель имеет вид
Коэффициент регрессии
Он означает, что с ростом прироста душевого дохода на 1%-ный пункт расходы на товар увеличиваются со средним ускорением, равным 0,565 руб.
Модель имеет вид
Применяя МНК, получим систему нормальных уравнений:
Расчеты оформим в виде табл. 4.5.
Система уравнений примет вид
Решая ее, получим
Уравнение регрессии имеет вид
Параметр фиксирует силу связи и . Его величина означает, что с ростом дохода на одного члена семьи на 1%-ный пункт при условии неизменной тенденции расходы на товар А возрастают в среднем на 0,322 руб. Параметр характеризует среднегодовой абсолютный прирост расходов на товар под воздействием прочих факторов при условии неизменного дохода.
Пример задачи №15
По данным за 30 месяцев некоторого временного ряда были получены значения коэффициентов автокорреляции уровней;
Требуется:
- Охарактеризовать структуру этого ряда, используя графическое изображение.
- Для прогнозирования значений в будущие периоды предполагается построить уравнение авторегрессии. Выбрать наилучшее уравнение, обосновать выбор. Указать общий вид этого уравнения.
Решение:
- Так как значения всех коэффициентов автокорреляции достаточно высокие, ряд содержит тенденцию. Поскольку наибольшее абсолютное значение имеет коэффициент автокорреляции 4-го порядка , ряд содержит периодические колебания, цикл этих колебаний равен 4.
Наиболее целесообразно построение уравнения авторегрессии:
так как значение = 0,97 свидетельствует о наличии очень тесной связи между уровнями ряда с лагом в 4 месяца.
Кроме того, возможно построение и множественного уравнения авторегрессии от и , так как = 0,72:
Сравнить полученные уравнения и выбрать наилучшее решение можно с помощью скорректированного коэффициента детерминации.
Пример задачи №16
На основе помесячных данных о числе браков (тыс.) в регионе за последние три года была построена аддитивная модель временного ряда. Скорректированные значения сезонной компоненты за соответствующие месяцы приводятся в табл. 4.6.
Уравнение тренда выглядит следующим образом:
при расчете параметров тренда использовались фактические моменты времени .
Требуется:
- Определить значение сезонной компоненты за декабрь.
- На основе построенной модели дать прогноз общего числа браков, заключенных в течение первого квартала следующего года.
Решение:
- Сумма значений сезонной компоненты внутри одного цикла должна быть равна нулю (в соответствии с методикой построения аддитивной модели временного ряда). Следовательно, значение сезонной компоненты за декабрь составит:
Число браков, заключенных в первом квартале следующего года, есть сумма числа браков, заключенных в январе в феврале и в марте .
Для расчета трендовых значений воспользуемся уравнением тренда, указанным в условии задачи:
Соответствующие значения сезонных компонент составят:
Таким образом,
Количество браков, заключенных в первом квартале следующего года, составит: 2,61 + 5,64 + 3,17 = 11,42 тыс., или 11420.
Пример задачи №17
Динамика выпуска продукции Финляндии характеризуется данными (млн долл.), представленными в табл. 4.7.
Требуется:
- Провести расчет параметров линейного и экспоненциального трендов.
- Построить графики ряда динамики и трендов.
- Выбрать наилучший вид тренда на основании графического изображения и значения коэффициента детерминации.
Реализация типовых задач в Excel
Решение с использованием ППП MS Excel
- Для определения параметров линейного тренда по методу наименьших квадратов используется статистическая функция ЛИНЕЙН, для определения экспоненциального тренда -ЛГРФПРИБЛ. Порядок вычисления был рассмотрен в 1-м разделе практикума. В качестве зависимой переменной в данном примере выступает время . Приведем результаты вычисления функций ЛИНЕЙН и ЛГРФПРИБЛ (рис. 4.2 и 4.3).
Запишем уравнения линейного и экспоненциального тренда, используя данные рис. 4.2 и 4.3:
- Построение графиков осуществляется с помощью Мастера диаграмм.
Порядок построения следующий:
1) введите исходные данные или откройте существующий файл, содержащий анализируемые данные;
2) активизируйте Мастер диаграмм любым из следующих способов:
а) в главном меню выберите Вставка/Диаграмма;
б) на панели инструментов Стандартная щелкните по кнопке Мастер диаграмм;
3) в окне Тип выберите График (рис. 4.4); вид графика выберите в поле рядом со списком типов. Щелкните по кнопке Далее;
4) заполните диапазон данных, как показано на рис. 4.5. Установите флажок размещения данных в столбцах (строках). Щелкните по кнопке Далее;
5) заполните параметры диаграммы на разных закладках (рис. 4.6): названия диаграммы и осей, значения осей, линии сетки, параметры легенды, таблица и подписи данных. Щелкните по кнопке Далее;
6) укажите место размещения диаграммы на отдельном или на имеющемся листе (рис. 4.7). Щелкните по кнопке Далее. Готовая диаграмма, отражающая динамику уровней изучаемого ряда, представлена на рис. 4.8.
В ППП MS Excel линия тренда может быть добавлена в диаграмму с областями гистограммы или в график. Для этого:
1) выделите область построения диаграммы; в главном меню выберите Диаграмма/Добавить линию тренда;
2) в появившемся диалоговом окне (рис. 4.9) выберите вид линии тренда и задайте соответствующие параметры. Для полиномиального тренда необходимо задать степень аппроксимирующего полинома, для скользящего среднего — количество точек усреднения.
В качестве дополнительной информации на диаграмме можно отобразить уравнение регрессии и значение среднеквадратического отклонения, установив соответствующие флажки на закладке Параметры (рис. 4.10). Щелкните по кнопке ОК.
На рис. 4.11 — 4.15 представлены различные виды трендов, описывающие исходные данные задачи.
Сравним значения по разным уравнениям трендов: полиномиальный 6-й степени — = 0,9728; экспоненциальный — = 0,9647; линейный — = 0,8841; степенной — = 0,8470; логарифмический — = 0,5886.
Исходные данные лучше всего описывает полином 6-й степени. Следовательно, в рассматриваемом примере для расчета прогнозных значений следует использовать полиномиальное уравнение.
Кстати готовые на продажу задачи тут, и там же теория из учебников может быть вам поможет она.
Пример задачи №18
Имеются данные о динамике товарооборота и доходов населения России за 1997 — 1999 гг. (табл. 4.8).
Требуется:
- Оценить параметры модели с распределенными лагами методом Алмон.
- Постройте таблицу результатов дисперсионного анализа. Оцените значимость построенной модели.
Решение:
Решение с использованием ППП Statistica
- Для построения регрессионной модели с распределенными лагами необходимо априори задать длину максимального лага, для этой задачи выберем длину 3. Тогда уравнение регрессии будет выглядеть следующим образом:
Для оценки параметров этой модели согласно методу Алмон необходимо задать степень аппроксимирующего полинома. Для решения используем соответствующую процедуру ППП Statistica. Порядок расчетов следующий:
1) введите исходные данные или откройте существующий файл другого формата, содержащий анализируемые данные, в опции Data Management в окне переключения модулей (рис. 4.16). Если создаете новый файл данных, в соответствующих ячейках укажите количество строк и столбцов. В нашем случае — 2 столбца, 36 строк;
2) из модуля управления данными перейдите в модуль анализа временных рядов, выбрав в меню пункт Time Series / Forecasting;
3) откройте файл, содержащий данные — Open Data (рис. 4.17);
4) выделите все переменные, используемые для анализа, — Variables. Щелкните по кнопке ОК (рис. 4.18).
5) щелкните по кнопке Distributed lags analysis (см. рис. 4.17);
6) в окне Distributed Lags Analysis (рис. 4.19) выделите название зависимой переменной, в появляющемся окне Independent variable -название независимой переменной. В ячейке Lag length укажите значение максимального лага, в ячейке Almon polynomial lags — степень аппроксимирующего полинома. Степень полинома не должна превышать значение максимального лага. Щелкните по кнопке ОК (Begin analysis);
7) результаты расчетов — оценки регрессионных коэффициентов и значимость уравнения — приведены на рис. 4.20 и 4.21.
Согласно данным таблицы дисперсионного анализа (см. рис. 4.21), полученные значения -критерия Фишера и коэффициента детерминации показывают высокий уровень аппроксимации исходных данных.
Задачи с решением по всем темам эконометрики
Эконометрика – это раздел экономики, занимающийся разработкой и применением статистических методов для измерений взаимосвязей между экономическими переменными.
Эконометрика – это самостоятельная научная дисциплина, объединяющая совокупность теоретических результатов, приемов, методов и моделей.
Парный регрессионный анализ. Функциональная, статистическая и корреляционная зависимости
Из математики известно понятие функциональной зависимости (связи), когда каждому значению одной переменной соответствует вполне определенное значение другой (например, площадь круга в зависимости от радиуса и т.д.).
В экономике в большинстве случаев между переменными величинами существуют зависимости, когда каждому значению одной переменной соответствует не какое-то определенное, а множества возможных значений другой переменной Иначе говоря, каждому значению одной переменной соответствует определенное (условное) распределение другой переменной. Такая зависимость получила название статистической (или стохастической, вероятностной).
Возникновение понятия статистической связи обуславливается тем, что зависимая переменная подвержена влиянию множества неконтролируемых или неучтенных факторов, а таюке тем, что измерение значений переменных сопровождается случайными ошибками. Примером статистической связи является зависимость урожайности от количества внесенных удобрений, производительности труда на предприятии от его энерговооруженности и т.п.
В силу неоднозначности статистической зависимости между и представляет интерес усредненная по схема зависимости, т. е. закономерность в измерении условного математического ожидания (математического ожидания случайной переменной , вычисленного в предположении, что переменная приняла значение ) в зависимости от .
Корреляционной зависимостью между двумя переменными называется функциональная зависимость между значениями одной из них и условным математическим ожиданием другой.
Корреляционная зависимость может быть представлена в виде
где
В регрессионном анализе рассматривается односторонняя зависимость случайной переменной от одной (или нескольких) неслучайной независимой переменной . Такая зависимость от (иногда ее называют регрессионной) может быть представлена в виде модельного уравнения регрессии по (1.1). При этом -зависимую переменную называют также функцией отклика объясняемой, выходной. результирухпцей. эндогенной переменной, результативным признаком, а независимую переменную — объясняющей, входной. предскашлаюгцей, предикторной, экзогенной переменной, фактором, регрессором, факторным признаком.
Уравнение (1.1) называется модельным уравнением регрессии (или просто уравнением регрессии), а функция — модельной функцией регрессии (или просто функцией регрессии), а ее график — модельной линией регрессии (или просто линией регрессии).
Для точного описания уравнения регрессии необходимо знать условный закон распределения зависимой переменной при условии, что переменная примет значение , т.е. . На практике такую информацию получить, как правило, не удается, так как обычно исследователь располагает лишь выборкой пар значений ограниченного объема . В этом случае речь может идти об оценке {приближенном выражении, аппроксимации) по выборке функции регрессии. Такой оценкой является выборочная линия (кривая) регрессии
где —условная (групповая) средняя переменной при фиксированном значении переменной ;
— параметры кривой.
Уравнение (1.2) называется выборочным уравнением регрессии
При правильно определенной аппроксимирующей функции с увеличением объема выборки она будет сходиться по вероятности к функции регрессии
Линейная парная регрессия
Рассмотрим в качестве примера зависимость между сменной добычей угля на одного рабочего (в тоннал) и мощностью пласта (в метрах) по следующим (условным) данным, характеризующим процесс добычи угля в = 10 шахтах.
Изобразим полученную зависимость графически точками координатной плоскости (рис. 1.1). Такое изображение статистической зависимости называется полем корреляции.
По расположению эмпирических точек можно предполагать наличие линейной корреляционной (регрессионной) зависимости между переменными и . Поэтому уравнение регрессии (1.2) будем искать в виде линейного уравнения
Найдем формулы расчета неизвестных параметров уравнения линейной регрессии. Согласно методу наименьших квадратов неизвестные параметры и выбираются таким образом, чтобы сумма квадратов отклонений эмпирических значений от значений найденных по уравнению регрессии (3.3), была минимальной:
На основании необходимого условия экстремума функции двух переменных приравниваем к нулю ее частные производные, т. е.
откуда после преобразований получим систему нормальных уравнений для определения параметров линейной регрессии
Разделив обе части уравнений (1.5) на , получим систему нормальных уравнении в виде:
где соответствующие средние определяются по формулам:
Решая систему (1.6), найдем
Коэффициент называется выборочным коэффициентом регрессии (или просто коэффициентом регрессии) по
Коэффициент регрессии по показывает, на сколько единиц в среднем изменяется переменная при увеличении переменной на одну единицу.
выборочная дисперсия переменной .
выборочная ковариация.
Уравнение регрессии примет вид:
Задача №1.1.
По данным табл. 1.1 найти уравнение регрессии по .
Решение:
Вычислим все необходимые суммы:
Затем находим параметры уравнения регрессии:
Уравнение регрессии по имеет вид:
Из полученного уравнения регрессии (см. рис. I 1) следует, что при увеличении мощности пласта на 1 м добыча угля на одного рабочего увеличивается в среднем на 1,12т .
Коэффициент корреляции
Оценим тесноту корреляционной зависимости. Рассмотрим случай линейной зависимости вида (1.10):
На первый взгляд, подходящим измерителем тесноты связи от является коэффициент регрессии , так как он показывает, на сколько единиц в среднем изменяется , когда увеличивается на одну единицу. Однако зависит от единиц измерения переменных Например, в полученной ранее зависимости он увеличится в 100 раз, если мощность пласта выразить не в метрах, а в сантиметрах. Поэтому для выбора показателя тесноты связи нужна такая система единиц измерения, в которой данные по различным характеристикам оказались бы сравнимы между собой. Представим уравнение (1.10) в эквивалентном виде:
В этом выражении величина показывает на сколько величин изменится в среднем , когда увеличится на одно .
Величина является показателем тесноты связи и называется выборочным коэффициентом корреляции (или просто коэффициентом корреляции). Две корреляционные зависимости переменной от приведены на рис. 1.2. Очевидно, что в случае а) зависимость между переменными менее тесная и коэффициент корреляции должен быть меньше, чем в случае б), так как точки корреляционного поля а) дальше отстоят от линии регрессии, чем точки поля б).
Если то корреляционная связь между переменными называется прямой, если — обратной. При прямой (обратной) связи увеличение одной из переменных ведет к увеличению (уменьшению) условной (групповой) средней другой. Учитывая (1.9), формулу для представим в виде:
Отметим другие модификации формулы :
Выборочный коэффициент корреляции (при достаточно большом объеме выборки ) обладает следующими свойствами.
- Коэффициент корреляции принимает значения на отрезке [-1;1], т.е. . Чем ближе к единице, тем теснее связь.
- При корреляционная связь представляет линейную функциональную зависимость. При этом все наблюдаемые значения располагаются на прямой линии (рис. 1.3 а, 6).
- При линейная корреляционная связь отсутствует. При этом линия регрессии параллельна оси (рис. 1.3 в).
Следует отметить, что является непосредственно оценкой генерального коэффициента корреляции между и лишь в случае двумерного нормального закона распределения случайных величин и . В других случаях (когда распределения и отклоняются от нормального, одна из исследуемых величин, например , не является случайной и т.п.) выборочный коэффициент корреляции не следует рассматривать как строгую меру взаимосвязи переменных.
Возможно эта страница вам будет полезна:
Задача №1.2.
По данным табл. 1.1 вычислить коэффициент корреляции между переменными и
Решение:
В примере 1.1 были вычислены суммы
Вычислим сумму:
Вычислим коэффициент корреляции:
т. е. связь между переменными достаточно тесная
Основные положения регрессионного анализа. Оценка параметров парной регрессионной модели
Рассматриваемая в регрессионном анализе зависимость от может быть представлена в виде молельного уравнения регрессии (1.1), но из-за воздействия неучтенных случайных факторов и причин отдельные наблюдения переменной будут в большей или меньшей мере отклоняться от функции регрессии . В этом случае уравнение взаимосвязи двух переменных может быть представлено в виде:
где — случайная переменная (случайный член), характеризующая отклонение от функции регрессии. Эту переменную будем называть возмущающей или просто возмущением (либо ошибкой). Таким образом, в регрессионной модели зависимая переменная есть некоторая функция с точностью до случайного возмущения .
Рассмотрим линейный регрессионный анализ, для которого функция линейна относительно оцениваемых параметров:
Предположим, что для оценки параметров линейной функции регрессии (1.16) взята выборка, содержащая пар значений переменных , где . В этом случае линейная парная регрессионная модель имеет вид:
Отметим основные предпосылки регрессионного анализа.
(или математическое ожидание зависимой переменной — равно линейной функции регрессии:
или
условие гомоскедастичности или равноизменчивости возмущения (зависимой переменной)).
В этом случае модель (1.17) называется классической нормальной линейной регрессионной моделью.
Для получения уравнения регрессии достаточно предпосылок 1-4. Требование выполнения предпосылки 5 (т. е. рассмотрение «нормальной регрессии») необходимо для оценки точности уравнения регрессии и его параметров.
Оценкой модели (1.17) по выборке является уравнение регрессии
Параметры этого уравнения и определяются на основе метода наименьших квадратов.
Воздействие неучтенных случайных факторов и ошибок наблюдений в модели (1.17) определяется с помощью дисперсии возмущений (ошибок) или остаточной дисперсии . Несмещенной оценкой этой дисперсии является выборочная остаточная дисперсия
где — групповая средняя, найденная по уравнению регрессии; — выборочная оценка возмущения или остаток репрессии.
В знаменателе выражения (1.18) стоит число степеней свободы , так как две степени свободы теряются при определении двух параметров прямой из системы нормальных уравнений (1.5).
Ответ на вопрос, являются ли оценки параметров «наилучшими», дает следующая теорема.
Теорема Гаусса—Маркова. Если регрессионная модель (1.17) удовлетворяет предпосылкам 1 -4 , то оценки и имеют наименьшую дисперсию в классе всех линейных несмещенных оценок. Таким образом, оценки и в определенном смысле являются наиболее эффективными линейными оценками параметров и .
Интервальная оценка функции регрессии и ее параметров
Построим доверительный интервал для функции регрессии, т.е. для условного математического ожидания , который с заданной надежностью (доверительной вероятностью) накрывает неизвестное значение .
Найдем дисперсию групповой средней представляющей выборочную оценку . С этой целью уравнение регрессии (1.10) представим в виде:
На рис. 1.4 линия регрессии (1.19) изображена графически. Для произвольного наблюдаемого значения выделены его составляющие: средняя , приращение , образующие расчетное значение и остаток .
Дисперсия групповой средней равна сумме дисперсий двух независимых слагаемых выражения (1.19):
Здесь учтено, что — неслучайная величина, при вынесении которой за знак дисперсии ее необходимо возвести в квадрат.
Дисперсии выборочной средней и параметра находятся по формулам
Оценка дисперсии групповых средних вычисляется по формуле:
Основываясь на предпосылках 1 — 5 регрессионного анализа можно показать, что статистика имеет — распределение Стьюдента с степенями свободы и построить доверительный интервал для условного математического ожидания :
где — стандартная ошибка групповой средней . Из формул (1.22) и (1.23) видно, что величина (длина) доверительного интервала зависит от значения объясняющей переменной : три она минимальна, а по мере удаления от величина доверительного интервала увеличивается (рис. 1.5). Таким образом, прогноз значений (определение неизвестных значений) зависимой переменной по уравнению регрессии оправдан, если значение объясняющей переменной не выходит за диапазон ее значений по выборке (причем тем более точный, чем ближе к ). Другими словами, экстраполяция кривой регрессии, т.е. ее использование вне пределов обследованного диапазона значений объясняющей переменной (даже если она оправдана для рассматриваемой переменной исходя из смысла решаемой задачи) может привести к значительным погрешностям
Определим доверительный интервал для индивидуальных значений зависимой переменной. Построенная доверительная область для (см. рис. 1.5) определяет местоположение модельной линии регрессии (т.е. условного математического ожидания), но не отдельных возможных значений зависимой переменной, которые отклоняются от средней. Поэтому при определении доверительного интервала для индивидуальных значений зависимой переменной необходимо учитывать еще один источник вариации рассеяние вокруг линии регрессии, т.е. в оценку суммарной дисперсии следует включить величину . В результате оценка дисперсии индивидуальных значений при равна
а соответствующий доверительный интервал для прогнозов индивидуальных значений будет определятся по формуле:
Построим доверительный интервал для параметров регрессионной модели, в частности для параметров регрессионной модели и .
При выполнении предпосылки 5 регрессионного анализа статистика имеет нормальный закон распределения, а статистика
имеет -распределение Стьюдента с степенями свободы.
Поэтому интервальная опенка параметра на уровне значимости а имеет вид:
При построении доверительного интервала для параметра снисходят из того, что статистика имеет -распределение с степенями свободы. Поэтому интервальная оценка для на уровне значимости имеет вид :
доверительный интервал выбирается таким образом, чтобы
Задача №1.3.
По данным табл. 1.1 требуется:
1) оценить сменную среднюю добычу угля на одного рабочего для шахт с мощностью пласта 8 м;
2) найти 95% — ные доверительные интервалы для индивидуального и среднего значений сменной добычи угля на 1 рабочего для таких же шахт;
3) найти с надежностью 0,95 интервальные оценки коэффициента рецессии и дисперсии .
Решение:
Уравнение регрессии по было получено в примере ранее , т.е. при увеличении мощности пласта на 1м добыча угля на одного рабочего увеличивается в среднем на 1,12 т.
Для построения доверительного интервала для необходимо знать дисперсию его оценки, т.е. . Составим вспомогательную таблицу подставив значение в полученное уравнению регрессии.
Подставим из таблицы найденные значения в формулы
Следовательно
По таблице значений -критерия Стьюдента находим . Искомый доверительный интервал имеет вид
Средняя сменная добыча угля на одного рабочего для шахт с мощностью пласта 8м с надежностью 0,95 находится в пределах от 2,77 до 6,03 т. 2. Чтобы построить доверительный интервал для индивидуального значения найдем дисперсию его оценки по формуле:
Искомый доверительный интервал примет вид:
Таким образом, индивидуальная сменная добыча угля на одного рабочего для шахт с мощностью пласта 8м с надежностью 0,95 находится в пределах от 0,57 до 8,23 т.
- Найдем 95% -ный доверительный интервал для параметра по формуле (1.27)
т. е. с надежностью 0,95 при изменении мощности пласта на 1м суточная выработка будет изменяться на величину, заключенную в интервале от 0,332 до 1,907 (т).
Найдем 95%-ный доверительный интервал для параметра
Учитывая, что , найдем по таблице значений -критерия Пирсона
Подставим найденные значения в формулу для оценки интервала получим:
Таким образом, с надежностью 0,95 дисперсия возмущений заключена в пределах от 1,29 до 10,36, а их стандартное отклонение — от 1,13 до 3,22 (т).
Оценка значимости уравнения регрессии. Коэффициент детерминации
Проверить значимость уравнения регрессии — значит установить, соответствует ли математическая модель, выражающая зависимость между переменными, экспериментальным данным и достаточно ли включенных в уравнение объясняющих переменных (одной или нескольких) для описания зависимой переменной.
Проверка значимости уравнения регрессии производится на основе дисперсионного анализа.
Согласно основной идее дисперсионного анализа
или
где — общая сумма квадратов отклонений зависимой переменной от средней; — сумма квадратов, обусловленная регрессией; — остаточная сумма квадратов, характеризующая влияние неучтенных факторов
Нетрудно убедиться, что третье слагаемое
Представим полученные соотношения в виде таблицы 1.3
Средние квадраты и представляют собой несмещенные оценки дисперсий зависимой переменной, обусловленных соответственно регрессий или объясняющей переменной и воздействием неучтенных случайных факторов и ошибок; — число оцениваемых параметров уравнения регрессии; — число наблюдений.
Уравнение регрессии значимо на уровне , если фактически наблюдаемое значение статистики
Задача №1.4.
По данным табл. 1.1 оценить на уровне значимость уравнения регрессии по .
Решение:
Ранее, были
Вычислим суммы квадратов для определения компонент дисперсии:
Находим значение — распределения
По таблице значений -распределения Фишера определяем табличное значение
Так как
то уравнение регрессии значимо.
Одной из наиболее эффективных оценок адекватности регрессионной модели, мерой качества уравнения регрессии, (или, как говорят, мерой качества подгонки регрессионной модели к найденным значениям ), характеристикой прогностической анализируемой регрессионной модели является коэффициент детерминации, определяемый по формуле
Величина показывает, какая часть (доля) вариации зависимой переменной обусловлена вариацией объясняющей переменной.
Так как , то Чем ближе к единице, тем лучше регрессия аппроксимирует эмпирические данные, тем теснее наблюдения примыкают к линии регрессии. Если , то эмпирические точки лежат на линии регрессии (см. рис. 1.3 а.б) и между переменными и существует линейная функциональная зависимость. Если то (вариация зависимой переменной полностью обусловлена воздействием неучтенных в модели переменных, и линия регрессии параллельна оси абсцисс (рис. 1.3 в).
Заметим, что коэффициент имеет смысл рассматривать только при наличии свободного члена в уравнении регрессии, так как лишь в этом случае, как уже отмечалось, верно, равенство (1.29), а следовательно, и соотношение (1.32).
Если известен коэффициент детерминации , то критерий значимости (1.30) уравнения регрессии или самого коэффициента детерминация может быть записан в виде
В случае парной линейной регрессионной модели коэффициент детерминации равен квадрату коэффициента корреляции, т. е. .
Задача №1.5.
По данным табл. 1.1 найти коэффициент детерминации и пояснить его смысл.
Решение:
В примере 1.4 было получено . Находим
Коэффициент детерминации можно было вычислить и иначе, если учесть, что в примере 1.2 был вычислен коэффициент корреляции . Так как для парной линейной регрессионной модели , то .
Это означает, что вариация зависимой переменной — сменной добычи угля на одного рабочего — на 62% объясняется изменчивостью объясняющей переменной — мощностью пласта.
Множественный регрессионный анализ. Классическая нормальная линейная модель множественной регрессии
Экономические явления, как правило, определяются большим числом одновременно и совокупно действующих факторов. В связи с этим часто возникает задача исследования зависимости одной зависимой переменной от нескольких объясняющих переменных . Эта задача решается с помощью множественного регрессионного анализа.
Обозначим -е наблюдение зависимой переменной а объясняющих переменных — . Тогда модель множественной линейной регрессии можно представить в виде:
где
— удовлетворяет приведенным выше (см. Главу 1) предпосылкам 1-5.
Включение в регрессионную модель новых объясняющих переменных приводит к целесообразности использования матричных обозначений. Магричное описание регрессии облегчает как теоретические концепции анализа, так и необходимые расчетные процедуры.
Введем обозначения:
— матрица-столбец, или вектор значений зависимой переменной размерности ;
матрица значений объясняющих переменных, или матрица плана размерности (в матрицу дополнительно введен столбец, все элементы которого равны 1, т.е. условно полагается, что в модели свободный член умножается на фиктивную переменную принимающую значение 1 дня всех ;
— матрица-столбец, или вектор параметров размерности ,
— матрица-столбец, или вектор, возмущений (случайных ошибок, остатков) размера .
Тогда в матричной форме модель примет вид:
Оценкой этой модели по выборке является уравнение
где
Оценка параметров классической регрессионной модели методом наименьших квадратов
Для оценки вектора неизвестных параметров применим метод наименьших квадратов.
Условие минимизации остаточной суммы квадратов запишется в виде:
На основании необходимого условия экстремума функции нескольких переменных необходимо приравнять нулю частные производные по этим переменным или в матричной форме— вектор частных производных
После вычисления вектора частных производных приравняем его 0 — , откуда получаем систему нормальных уравнений в матричной форме для определения вектора :
Для решения этого матричного уравнения относительно вектора оценок параметров введём еще одну предпосылку о том, что матрица является неособенной, т. е. ее определитель не равен нулю. Следовательно, ранг матрицы равен ее порядку, т.е. но , значит, (ранг матрицы плана равен числу ее столбцов). В соответствии с этим сформулируем упомянутую выше предпосылку множественного регрессионного анализа в следующем виде:
Кроме того, полагают, что число имеющихся наблюдений (значений) каждой из объясняющих и зависимой переменных превосходит ранг-матрицы , т. е. или , ибо в противном случае в принципе невозможно получение сколько-нибудь надежных статистических выводов.
В новых терминах приведенные ранее предпосылки для множественного регрессионного анализа могут быть записаны следующим образом:
Модель (2.2), удовлетворяющая приведенным предпосылкам 1-6, называется классической нормальной линейной моделью множественной регрессии, если же среди приведенных не выполняется лишь предпосылка о нормальном законе распределения вектора возмущений с , то модель называется просто классической линейной моделью множественной рефессии.
Решением уравнения (2.4) является вектор
где — матрица, обратная матрице , — матрица-столбец, или вектор ее свободных членов.
Рассмотренная выше для парной регрессионной модели теорема Гаусса — Маркова оказывается верной для модели (2.2) множественной регрессии и может быть сформулирована в следующем виде
При выполнении предпосылок множественного регрессионного анализа оценка метода наименьших квадратов является наиболее эффективной, т е обладает наименьшей дисперсией в классе линейных несмещенных оценок.
Зная вектор , выборочное уравнение множественной регрессии представим в виде:
где групповая (условная) средняя переменной при заданном векторе значений объясняющей переменной
Задача №2.1.
Имеются следующие данные о сменной добыче угля на одного рабочего (т), мощности пласта (м) и уровне механизации работ (%), характеризующие процесс добычи угля в 10 шахтах. Предполагая, что между переменными , и существует линейная корреляционная зависимость, найти ее аналитическое выражение (уравнение регрессии по и ).
Решение:
Обозначим
(в матрицу вводится дополнительный столбец чисел, состоящий из единиц).
Для удобства вычислений составляем вспомогательную таблицу.
Вычислим матрицы:
Умножим матрицу на вектор и получим
Уравнение множественной регрессии имеет вид:
Оно показывает, что при увеличении только мощности пласта (при неизменном ) на 1м добыча угля на одного рабочего увеличивается в среднем на 0,660 т, а при увеличении только уровня механизации работ (при неизменной ) — в среднем на 0,90 т.
Добавление в регрессионную модель новой объясняющей переменной изменило коэффициент регрессии ( по ) с 1,12 для парной регрессии (см. пример 1.1) до 0,66 — для множественной регрессии. В случае парной регрессии учитывает воздействие на не только переменной но и косвенно корреляционно связанной с ней переменной .
Ковариационная матрица и ее выборочная оценка
Вариации оценок параметров определяют точность уравнения множественной регрессии. Для их измерения в многомерном регрессионном анализе рассматривают так называемую ковариационную матрицу вектора оценок параметров , являющуюся матричным аналогом дисперсии одной переменной
где элементы — ковариации (или корреляционные моменты) оценок параметров и . Ковариация двух переменных определяется как математическое ожидание произведения отклонений этих переменных от их математических ожиданий:
Учитывая, что оценки , полученные методом наименьших квадратов, являются несмещенными оценками параметров , т. е. выражение примет вид
Ковариация характеризует как степень рассеяния значений двух переменных относительно их математических ожиданий, так и взаимосвязь этих переменных.
Определение доверительных интервалов для коэффициентов и функции регрессии
Доверительный интервал для параметров регрессионной модели
Оценка дисперсии коэффициента регрессии определяется по формуле:
где — несмещенная оценка параметра ;
— диагональный элемент матрицы Среднее квадратическое отклонение (стандартная ошибка) коэффициента регрессии вычисляется по формуле:
Учитывая, что статистика имеет -распределение Стьюдента с степенями свободы, можно проверить значимость коэффициента регрессии . Гипотеза о равенстве параметра нулю отвергается, если , где табличное значение -критерия Стьюдента, определенное на уровне значимости при числе степеней свободы , т. е. отличается от нуля на уровне значимости .
В обшей постановке гипотеза о равенстве параметра заданному числу отвергается, если
Доверительный интервал для параметра имеет вид.
- Доверительный интервал для функции репрессии или для условного математического ожидания зависимой переменной
где — групповая средняя, определяемая по уравнению регрессии;
— ее стандартная ошибка, определяемая по формуле:
- Доверительный интервал для индивидуальных значений зависимой переменной
где
- Доверительный интервал для параметра .
В множественной регрессии он строится аналогично парной модели с соответствующим изменением числа степеней свободы с критерия
Задача №2.2
По данным примера 2.1 оценить сменную добычу угля на одного рабочего для шахт с мощностью пласта 8 м и уровнем механизации работ 6%; наши 95%-ные доверительные интервалы для индивидуального и среднего значений сменной добычи угля на одного рабочего для таких же шахт. Проверить значимость коэффициентов регрессии и построить для них 95%-ные доверительные интервалы. Найти интервачьную оценку для дисперсии .
Решение:
В примере 2.1 уравнение регрессии получено в виде
По условию надо оценить , где . Выборочной оценкой является групповая средняя, которую найдем по уравнению регрессии:
Для построения доверительного инггерала для воспользуемся формулой (2.11). Вначале найдем дисперсию . При ей вычислении используем две последних строки табл. 2.2 (групповые средние в них определяются по полученному уравнению регрессии).
Находим
Вычисляем
По таблице значений — критерия Стьюдента при числе степеней свободы
находим . Следовательно, доверительный интервал для равен
Итак, с надежностью 0,95 средняя сменная добыча угля на одного рабочего для шахт с мощностью пласта 8 м и уровнем механизации работ 6% находится в пределах от 4,27 до 7,29 т.
Сравнивая новый доверительный интервал для функции регрессии , полученный с учетом двух объясняющих переменных, с аналогичным интервалом с учетом одной объясняющей переменной (см пример 1.3), можно заметить некоторое уменьшение его величины.
Это связано с тем, что включение в модель новой объясняющей переменной позволяет несколько повысить точность модели за счет увеличения взаимосвязи зависимой и объясняющей переменных.
Найдем доверительный интервал для индивидуального значения при
Вычислим
Итак, с надежностью 0,95 индивидуальное значение сменной добычи угля в шахтах с мощностью пласта 8 м и уровнем механизации работ 6% находится в пределах от 2,80 до 8,76 (т).
Проверим значимость коэффициентов регрессии и . Для стандартная ошибка равна
Так как
тo коэффициент значим.
Аналогично для стандартная ошибка, равна
т. е. коэффициент значим.
Доверительный интервал коэффициента регрессии имеет вид;
Доверительный интервал коэффициента регрессии имеет вид:
Итак, с надежностью 0,95 за счет изменения на 1 м мощности пласта (при неизменном ) сменная добыча угля на одного рабочего будет изменяться в пределах от 0,15 до 1,17 (т), а за счёт изменения на 1% механизации работ (при неизменном ) значения будут изменяться в пределах от 0,27 до 1,53 (т).
Найдем 95%-ный доверительный интервал для параметра . Учитывая, что
степени свободы найдем по таблице значений критерия Пирсона
С помощью формулы (2.14) находим интервал
Таким образом, с надежностью 0,95 дисперсия возмущений заключена в пределах от 0,738 до 6,99, а их стандартное отклонение — от 0,859 до 2,64(т).
Оценка значимости множественной регрессии. Коэффициенты детерминации R²
В модели множественной регрессии, как и в случае парной регрессионной модели, общая вариация — сумма квадратов отклонений зависимой переменной от средней может быть разложена на две составляющие:
где — соответственно сумма квадратов отклонений, обусловленная регрессией, и остаточная сумма квадратов, характеризующая влияние неучтенных факторов. Они вычисляются по следующим формулам:
Уравнение множественной регрессии значимо (иначе — гипотеза о равенстве нулю параметров регрессионной модели, т. е.
отвергается), если
где — табличное значение -критерия Фишера — Снелекора.
Коэффициент детерминации является оценкой адекватности модели, мерой качества уравнения регрессии, характеристикой его прогностической силы Множественный коэффициент детерминации определяется по формулам;
Величина характеризует долю вариации зависимой переменной, обусловленной регрессией или изменчивостью объясняющих переменных; чем ближе к единице, тем лучше регрессия описывает зависимость между объясняющими и зависимой переменными.
Вместе с тем использование только одного коэффициента детерминации для выбора наилучшего уравнения регрессии может оказаться недостаточным. Недостатком коэффициента детерминации является то, что он, вообще говоря, увеличивается при добавлении новых объясняющих переменных, хотя это и не обязательно означает улучшение качества регрессионной модели. На практике встречаются случаи, когда плохо определенная модель регрессии может дать сравнительно высокий коэффициент .
Поэтому предпочтительнее использовать скорректированный (адаптированный, поправленный) коэффициент детерминации определяемый по формулам:
Из формул следует, что чем больше число объясняющих переменных , тем меньше по сравнению с . В отличие от скорректированный коэффициент может уменьшаться при введении в модель новых объясняющих переменных, не оказывающих существенного влияния на зависимую переменную. Однако даже увеличение скоррекгированного коэффициента детерминации при введении в модель новой объясняющей переменной не всегда получается, что ее коэффициент регрессии значим (это происходит, как можно показать, только в случае, если соответствующее значение -статистики больше единицы (по абсолютной величине), т. е. . Другими словами, увеличение еще не означает улучшения качества регрессионной модели.
Если известен коэффициент детерминации , то критерий значимости уравнения регрессии может быть записан в виде:
где , т. к. в уравнении множественной регрессии вместе со свободным членом оценивается параметров
Возможно эта страница вам будет полезна:
Задача №2.3.
По данным примера 2.1 определить множественный коэффициент детерминации и проверить значимость полученного уравнения регрессии по и на уровне .
Решение:
Вычислим произведения векторов (см. пример 2.1):
По формуле (2 18) определим множественный коэффициент детерминации
Коэффициент детерминации свидетельствует о том, что вариация исследуемой зависимой переменной У — сменной добычи угля на одного рабочего на 69,1% объясняется изменчивостью включенных в модель объясняющих переменных— мощности пласта и уровня механизации работ .
Зная , проверим значимость уравнения регрессии. Вычислим фактическое значение критерия:
Оно больше табличного , определенного на уровне значимости при степенях свободы, т. е. уравнение регрессии значимо, следовательно, исследуемая зависимая переменная достаточно хорошо описывается включенными в регрессионную модель переменными и .
Временные ряды и прогнозирование. Общие сведения о временных рядах и задачах их анализа
Под временным рядом (динамическим рядом, или рядом динамики) в экономике подразумевается последовательность наблюдений некоторого признака (случайной величины) в последовательные моменты времени. Отдельные наблюдения называются уровнями ряда, которые будем обозначать , где — число уровней.
В табл. 3.1 приведены данные, отражающие спрос на некоторый товар за восьмилетний период (усл. ед.), т. е. временной ряд спроса .
На рис. 3.1 временной ряд изображен графически ломаной линией.
Методы исследования моделей, основанных на данных пространственных выборок и временных рядов, вообще говоря, отличаются Объясняется это Tev что в отличие от пространственных выборок наблюдения во временных ряда как правило, нельзя считать независимыми.
При анализе точности этих моделей и определении интервальных ошибок прогноза на их основе, будем полагать, что рассматриваемые в главе регрессионные модели временных рядов удовлетворяют условиям классической модели.
В общем виде при исследовании экономического временного ряда выделяются несколько составляющих:
где — тренд, плавно меняющаяся компонента, описывающая чистое влияние долговременных факторов, т. е. длительную тенденцию изменения признака (например, показатели экономического развития, рост населения, и т. п.);
— сезонная компонента, отражающая повторяемость экономических процессов в течение не очень длительного периода (года, месяца, недели и т. д., например, объем продаж туристических путевок или перевозок авиапассажиров в различные времена года);
— циклическая компонента, отражающая повторяемость экономических процессов в течение длительных периодов (например, влияние волн экономической активности Кондратьева, демографических «ям», циклов солнечной активности и т. п.);
— случайная компонента, отражающая влияние не поддающихся учету и регистрации случайных факторов.
Первые три составляющие (компоненты) и , в отличие от , являются закономерными, неслучайными.
Важнейшей классической задачей при исследовании экономических временных рядов является выявление и статистическая оценка основной тенденции развития изучаемого процесса и отклонений от нее.
Основные этапы анализа временных рядов:
графическое представление и описание поведения временного ряда; выделение и удаление закономерных (неслучайных) составляющих временного ряда (тренда, сезонных и циклических сост авляющих);
сглаживание и фильтрация (удаление низко — или высокочастотных составляющих временного ряда);
исследование случайной составляющей временного ряда, построение и проверка адекватности математической модели для ее описания;
прогнозирование развития изучаемого процесса на основе имеющегося временного ряда;
исследование взаимосвязи между различными временными рядами. Наиболее распространенными методами анализа временных рядов являются корреляционный и спектральный анализ, модели авторегрессии и скользящей средней
Временной ряд рассматривается как одна из реализаций (траекторий) случайного процесса . Вместе с тем следует иметь в виду принципиальные отличия временного ряда от последовательности наблюдений образующих случайную выборку. Во-первых, в отличие от элементов случайной выборки члены временного ряда, как правило, не являются статистически независимыми. Во-вторых, члены временного ряда не являются одинаково распределенными. Выборка рассматривается как одна из реализаций случайной величины .
Стационарные временные ряды и их характеристики. Автокорреляционная функция
Важное значение в анализе временных рядов имеют стационарные временные ряды, вероятностные свойства которых не изменяются во времени.
Временной ряд называется строго стационарным (или стационарным в узком смысле), если совместное распределение вероятностей наблюдений такое же, как и наблюдений при любых и . Другими словами, свойства строю стационарных рядов не зависят от момента , т е закон распределения и его числовые характеристики не зависят от . Следовательно, математическое ожидание среднее квадратическое отклонение могут быть оценены по наблюдениям по формулам:
Степень тесноты связи между последовательностями наблюдений временного ряда
(сдвинутых относительно друг друга на единиц, или, как говорят, с лагом ) может быть определена с помощью коэффициента корреляции
Коэффициент измеряет корреляцию между членами одного и того же ряда, поэтому его называют коэффициентом автокорреляции, а зависимость — автокор реляционной функцией. В силу стационарности временного ряда автокорреляционная функция зависит только от лага , причем , т. е. при изучении можно ограничиться рассмотрением только положительных значений .
Статистической оценкой является выборочный коэффициент автокорреляции , определяемый по формуле:
Функция называется выборочной автокорреляционной функцией, а ее график — коррелограимой.
При расчете необходимо учитывать, что с увеличением число пар наблюдений уменьшается, поэтому лаг должен быть таким, чтобы число было достаточным для определения . Обычно принимается .
Для стационарного временного ряда с увеличением лага г взаимосвязь членов временного ряда и ослабевает , и автокорреляционная функция должна убывать по абсолютной величине, а для ее выборочного (эмпирического) аналога , особенно при небольшом числе пар наблюдений , свойство монотонного убывания (по абсолютной величине) при возрастании может нарушаться.
Наряду с автокорреляционной функцией при исследовании стационарных временных рядов рассматриваем частная автокорреляционная функция , где есть частный коэффициент корреляции между членами временного ряда и , т. е. коэффициент корреляции между и при устранении влияния промежуточных (между и ) членов.
Статистической оценкой является выборочная частная автокорреляционная функция , где — выборочный частный коэффициент корреляции Например, выборочный частный коэффициент автокорреляции 1-го порядка между членами временного, ряда и при устранении влияния может быть вычислен по формуле:
где — выборочные коэффициенты автокорреляции между соответственно.
Задача №3.1
По данным табл. 1 для временного ряда у, найти среднее чначение, среднее квадратическое отклонение, коэффициенты автокорреляции (для лагов г=1;2) и частный коэффициент автокорреляции I-го порядка.
Решение:
Среднее значение временного ряда находим по формуле (3.1):
Дисперсию и среднее квадратическое отклонение вычислим, воспользовавшись соотношением:
Найдем коэффициент автокорреляции временного ряда (для лага ), т. е. коэффициент корреляции между последовательностями семи пар наблюдений , представленных в табл. 3.2.
Сначала вычисляем необходимые суммы:
Затем подставим их в формулу:
при
получим:
Коэффициенты автокорреляции для лага между членами ряда и по шести парам наблюдений и между членами ряда и вычисляются аналогично:
Для определения частного коэффициента корреляции 1-го порядка между членами ряда и при исключении влияния найденные значения подставим в формулу:
Знание автокорреляционных функций и может оказать существенную помощь при подборе и идентификации модели анализируемого временного ряда и статистической оценке его параметров.
Аналитическое выравнивание (сглаживание) временного ряда
Одной из важнейших задач исследования экономического временного ряда является выявление основной тенденции изучаемого процесса, выраженной неслучайной составляющей (тренда либо тренда с циклической или (и) сезонной компонентой).
Для решения этой задачи вначале необходимо выбрать вид функции Часто используются следующие функции:
При выборе соответствующей функции используют содержательный анализ (который может установить характер динамики процесса), а также визуальные наблюдения (на основе графического изображения временного ряда). Из двух функций предпочтение обычно отдается той, при которой меньше сумма квадратов отклонений фактических данных от расчетных на основе этих функций. Следует заметить, что для любого ряда из точек можно подобрать полином (-1)-й степени, проходящий через все точки, и соответственно с минимальной ( нулевой ) суммой квадратов отклонений, однако в этом случае не следует говорить о выделении основной тенденции, учитывая случайный характер этих точек. Поэтому при прочих равных условиях предпочтение следует отдавать более простым функциям.
При использовании метола наименьших квадратов для выявления основной тенденции значения временного ряда рассматриваются как зависимая переменная, а время — как объясняющая:
где — возмущения, удовлетворяющие основным предпосылкам регрессионного анализа, т. е. представляющие независимые и одинаково распределенные случайные величины, распределение которых предполагаем нормальным.
Для линейной функции согласно методу наименьших квадратов параметры прямой находятся из системы нормальных уравнений
Задача №3.2.
По данным табл. 3.1 найти уравнение неслучайной составляющей (тренда) для временного ряда у, полагая тренд линейным.
Решение:
Вначале вычислим необходимые суммы:
Система нормальных уравнений имеет вид:
Решая эту систему, находим уравнение тренда:
Это значит, что спрос (см. рис 3.1) ежегодно увеличивается в среднем на 26,5 ед.
Уравнение регрессии с учётом зависимостей (1.7) — (1.10) и (3.7) можно представить в виде:
Проверим значимость полученного уравнения тренда по -критерию на 5%-ном уровне значимости. Вначале подставим в формулу (1.29) соотношения из (3.8) и вычислим:
а) сумму квадратов, обусловленную регрессией
б) общую сумму квадратов отклонений зависимой переменной от средней
в) остаточную сумму квадратов, характеризующую влияние неучтённых факторов
Затем найдем по формуле (1.30) при значение статистики:
По таблице значений критерия Фишера-Снсдекора определяем .
Так как , то условие неравенства (1.31) выполняется и уравнение тренда значимо.
Другим методом выравнивания (сглаживания) временного ряда является метод скользящих средних. Он основан на переходе от начальных значений членов ряда к их средним значениям на интервале времени, длина которого определена заранее. При что и сам выбранный интервал времени «скользит» вдоль ряда.
Получаемый таким образом ряд скользящих средних ведет себя более гладко, чем исходный ряд, из-за усреднения отклонений ряда.
Действительно, если разброс значений члена временного ряда , около своего среднего значения характеризуется дисперсией , то разброс-средней из членов временного ряда около того же значения а будет характеризоваться существенно меньшей величиной дисперсии, равной . Для усреднения могут быть использованы средняя арифметическая (простая и с некоторыми весами), медиана и др
Задача №3.3.
Провести сглаживание временного ряда по данным табл 3.1 методом скользящих средних, используя простую среднюю арифметическую с интервалом сглаживания года.
Решение:
Скользящие средние вычисляем по формуле:
При получим .
Для находим
Для находим
В результате получим сглаженный ряд, представленный в табл. 3.3.
На рис. 3.1 этот ряд изображен графически в виде пунктирной линии
Прогнозирование на основе моделей временных рядов
Одна из нажнейших задач (этапов) анализа временного (динамического) ряда состоит в прогнозировании на его основе развития изучаемого процесса. При этом исходят из того, что тенденция развития, установленная в прошлом, может быть распространена (экстраполирована) на будущий период.
Задача ставится так: имеется временной ряд и требуется дать прогноз уровня этого ряда на момент . Выше, в § 1.5, 2.2, 2.4, мы рассматривали точечный и интервальный прогноз значений зависимой переменной , т. е определение точечных и интервальных оценок , полученных для парной и множественной регрессий для значений объясняющих переменных , расположенных вне пределов обследованного диапазона значений .
Если рассматривать временной ряд как регрессионную модель изучаемого признака по переменной «время», то к нему могут быть применены рассмотренные выше методы анализа. Следует, однако, вспомнить, что одна из основных предпосылок регрессионного анализа состоит в том, что возмущения представляют собой независимые случайные величины с математическим ожиданием (средним значением), равным нулю. А при работе с временными рядами такое допущение оказывается во многих случаях неверным. В данной главе мы полагаем, что возмущения удовлетворяют предпосылкам регрессионного анализа, т. е. условиям нормальной классической регрессионной модели.
Задача №3.4.
По данным табл. 3.1 дать точечную и с надежностью 0,95 интервальную оценки прогноза среднего и индивидуального значений спроса на некоторый товар на момент (девятый год). (Полагаем, что тренд линейный, а возмущения удовлетворяют требованиям классической модели).
Решение:
Выше, в примере 3.2, получено уравнение регрессии т. е. ежегодно спрос на товар увеличивался в среднем на 26,5 ед. Надо оценить условное математическое ожидание .
Оценкой является групповая средняя
Найдем оценку дисперсии
Находим табличное значение . Подставив найденные значения в (1.23) определим интервальную оценку прогноза среднего значения спроса
или
Для нахождения интервальной оценки прогноза индивидуального значения по формуле (1.24) вычислим дисперсию его оценки:
Интервальная оценка для :
или
Итак, с надежностью 0,95 среднее значение спроса на товар на девятый год будет заключено от 345,9 до 468,9 (ед ), а ею индивидуальное значение -от 307,3 до 507,5 (ед ).
Как правило, прогноз развития изучаемого процесса на основе экстраполяции временных рядов оказывается эффективным, r рамка, краткосрочного или среднесрочного периода прогнозирования.
Автокорреляция остатков временного ряда
При моделировании реальных экономических процессов част возникают ситуации, в которых условия классической линейной модели регрессии оказываются нарушенными В частности, могут не выполняться предпосылки 3 и 4 регрессионного анализа (см. § 1.4) о том, что случайные возмущения (ошибки) модели имеют постоянную дисперсию и не коррелированны между собой. Так, например, при рассмотрении зависимости расходов на потребление от уровня доходов семей можно ожидать, что в более обеспеченных семьях вариация расходов выше, чем в малообеспеченных, т. е. дисперсии возмущений не одинаковы.
При анализе временных рядов мы часто сталкиваемся с ситуацией, когда наблюдаемые в данный момент значения зависимой переменной коррелированны с их значениями в предыдущие моменты времени, т. е. имеется корреляция между возмущениями в разные моменты времени.
Рассмотрим регрессионную модель временного (динамического) ряда. Упорядоченность наблюдений оказывается существенной в том случае, если прослеживается механизм влияния результатов предыдущих наблюдений на результаты последующих. Математически это выражается в том, что случайные величины в регрессионной модели не оказываются независимыми, в частности, условие не выполняется Такие модели называются моделями с наличием автокорреляции (сериальной корреляции). Рассмотрим в качестве примера /6 / временной ряд — ряд последовательных значений курса ценной бумаги , наблюдаемых в моменты времени 1,…. 100. Результаты наблюдений графически изображены на рис. 3.2. Из рисунка видно, что курс ценной бумаги имеет тенденцию к росту.
Оценивая методом наименьших квадратов зависимость курса от времени (номера наблюдений), получим следующие результаты:
Естественно предположить, что результаты предыдущих торгов оказывают влияние на результаты последующих: если в какой-то момент курс окажется завышенным по сравнению с реальным, то скорее всего он будет завышен на следующих торгах, т. е. имеет место положительная автокорреляция. Графически (см. рис 3.2) положительная автокорреляция выражается в чередовании тех зон, где наблюдаемые значения оказываются выше объясненных (лежащих на прямой ), с зонами, где наблюдаемые значения ниже.
Отрицательная автокорреляция встречается в тех случаях, когда завышенные значения в предыдущих наблюдениях приводят к занижению их в наблюдениях последующих (наблюдения действуют друг на друга по принципу «маятника»). Графически это выражается в том, что результаты наблюдений и оказываются по разные стороны относительно прямой .
Метод наименьших квадратов при наличии коррелированности ошибок регрессии даст несмещенные и состоятельные (разумеется, неэффективные) оценки коэффициентов регрессии, однако, оценки их дисперсий несостоятельные и смешенные (как правило, в сторону занижения), т. е. результаты тестирования гипотез оказываются недостоверными.
Как правило, если автокорреляция присутствует, то наибольшее влияние на последующее наблюдение оказывает результат предыдущего наблюдения Так, например, если рассматривается ряд значений курса какой-либо ценной бумаги, то, очевидно, именно результат последних торгов служит основой для формирования курса на следующих торгах. Ситуация, когда на значение наблюдения у, оказывает основное влияние не результат , а более ранние значения, является достаточно редкой Чаще всего при этом влияние носит циклический характер, например, если наблюдения осуществляются ежедневно и имеют недельный цикл (например, сбор кинотеатра). В этом случае можно составить ряды наблюдений отдельно по субботам, воскресеньям и так далее, после чего наиболее сильная корреляция будет наблюдаться между соседними членами.
Таким образом, отсутствие корреляции между соседними членами позволяет считать, что корреляция отсутствует в целом, и обычный метод наименьших квадратов дает адекватные и эффективные результаты.
Наличие автокорреляции между соседними членами можно определить с помощью теста Дарбина- Уотсона. Этот критерий (тест) Дарбина- Уотсона основан на простой идее: если корреляция ошибок регрессии не равна нулю, то она присутствует и в остатках регрессии получающихся в результате применения обычного метода наименьших квадратов. В тесте Дарбина -Уотсона для оценки корреляции используется статистика вида
В случае отсутствия автокорреляции выборочный коэффициент будет близким к нулю, а значение статистики — близко к двум, близость наблюдаемого значения к нулю должна означать наличие положительной автокорреляции, к четырем — отрицательной..
Тест Дарбина-Уотсона имеет один существенный недостаток -распределение статистики зависит не только от числа наблюдений, но и от значений регрессоров Это означает, что тест Дарбина -Уотсона, вообще говоря, не представляет собой статистический критерий, в том смысле, что нельзя указать критическую область, которая позволяла бы отвергнуть гипотезу об отсутствии корреляции, если бы оказалось, что в эту область попало наблюдаемое значение статистики .
Однако существуют два пороговых значения и зависящие только от числа наблюдений, числа регрессоров и уровня значимости, такие, что выполняются следующие условия.
Если фактически наблюдаемое значение :
а) то гипотеза об отсутствии автокорреляции не отвергается (принимается);
б) , то вопрос об отвержении или принятии гипотезы остается открытым (область неопределенности критерия);
в) , то принимается альтернативная гипотеза о положительной автокорреляции;
г) , то принимается альтернативная гипотеза об отрицательной автокорреляции
Графическая иллюстрация теста Дарбина-Уотсона приведена на рис. 3.3:
Для -статистики найдены верхняя и нижняя границы на уровнях значимости
Недостатками критерия Дарбина -Уотсона является наличие области неопределенности критерия и то, что критические значения -статистики определены для объемов выборки не менее 15. Тем не менее, тест Дарбина -Уотсона является наиболее употребляемым.
Задача №3.5.
Выявить на уровне значимости 0,05 наличие втокорреляции возмущений для временного ряда_у, по данным табл. 3.1.
Решение:
В примере 3.2 получено уравнение тренда
В табл. 3.4 приведен расчет данных, необходимых для вычисления ^-статистики.
Находим суммы
подставляем в формулу (3.9) и вычисляем значение статистики
По таблице значений критерия Дарбина — Уотсона при определим критические значения: . Фактически найденное находится в пределах от до . При критических значений -статистики в таблице нет, но судя по тенденции их изменений с уменьшением , можно предполагать, что найденное значение останется в игтервале .
Для рассматриваемого временного ряда спроса на уровне значимости 0,05 гипотеза об отсутствии автокорреляции возмущений принимается.
Готовые задачи по эконометрике
Эконометрика – это самостоятельная научная дисциплина, объединяющая совокупность теоретических результатов, приемов, методов и моделей, предназначенных для того, чтобы на базе экономической теории, экономической статистики и экономических измерений, математико-статистического инструментария придавать конкретное количественное выражение общим (качественным) закономерностям, обусловленным экономической теорией.
Эконометрика – одна из базовых дисциплин экономического образования во всем мире.
Эконометрические модели парной регрессии
Эконометрика является одной из важнейших составляющих современного экономического образования. Применение эконометрических методов является необходимым условием проведения качественных экономических исследований.
Современную эконометрику можно разделить на два направления: теоретическую и прикладную.
Теоретическая эконометрика занимается изучением специальных вероятностных (т.н. регрессионных) моделей, используя при этом аппарат теории вероятностей и математической статистики.
В основе прикладной эконометрики лежит применение вероятностных моделей для количественного описания и анализа экономических явлений и процессов.
Между этими направления существует глубокая двусторонняя взаимосвязь. Основные результаты теоретической эконометрики в виде статистических тестов и новых классов вероятностных моделей находят свое применение при решении прикладных задач. С другой стороны, в прикладной эконометрике в процессе исследования экономических явлений возникают ситуации или наблюдаются эффекты, которые не описываются существующими моделями. Это является предпосылкой для дальнейшего развития теоретического аппарата.
Термин «эконометрика» дословно читается как «измерения в экономике». Однако не каждое измерение в экономике относится к эконометрике, поэтому дадим точное определение.
Эконометрика (или эконометрия) изучает методы оценивания параметров моделей, характеризующих количественную взаимосвязь между экономическими показателями, а также рассматривает основные направления применения этих моделей в экономических исследованиях.
Предметом изучения эконометрики являются социально-экономические системы, процессы или явления, описываемые моделями. Методы исследования — математические методы, базирующиеся на теории вероятностей и математической статистике (далее ТВиМС), и других разделах математики. Структурно эконометрические исследования приведены на рис. 1.1.
Построение эконометрической модели условно делят на четыре этапа:
- спецификация модели, т.е. её запись в математической форме;
- сбор и подготовка экономической информации;
- оценивание параметров модели;
- проверка модели на достоверность.
Этапы 1) и 2) взаимозаменяемы. Полученную модель применяют для прогнозирования, планирования и с другими целями.
Термин «эконометрика» был введен в научный оборот в начале 20-го века. В 1928 г. была опубликована работа Ч. Кобба и П. Дугласа, посвященная исследованию производственной функции, связывающей объём выпуска продукции в отрасли, затраты труда и затраты капитала. Модель производственной функции Кобба-Дугласа является, пожалуй, первым примером использования эконометрики и отражает классический подход к эконометрическому анализу.
Окончательное становление эконометрики относят к 1930 году, когда европейскими и американскими учёными было основано «Эконометриче-ское сообщество». С 1933 г. выходит журнал «Эконометрия», издающийся этим сообществом.
Основателями эконометрии считаются Р. Фриш, Я. Тинберген, И. Шумпетер, Л. Клейн, Р. Стоун и другие учёные. Их целью было объединение экономической теории с математическими и статистическими методами. Модели, предложенные этими учеными, способствовали развитию математического и статистического аппарата и расширению области применения эконометрики.
После Второй мировой войны были построены комплексные эконо-метрические модели на макроуровне, в которых основное внимание уделялось спросу, финансовому состоянию, налогам, прибылям, ценам и другим важнейшим экономическим показателям.
Наиболее используемыми в эконометрии являются: производственные функции; функции потребления различных групп населения; функции предпочтения потребителей; межотраслевые модели производства, распределения и потребления продукции; модели экономического равновесия.
Помимо экономических исследований, эконометрические методы успешно применяются в биологии, истории, социологии и некоторых других общественных и естественных науках, где необходимо оценивать взаимосвязи между большим количеством переменных.
Важность данной науки подчеркивает тот факт, что за эконометрические исследования многократно присуждалась Нобелевская премия в области экономики.
В настоящее время эконометрия продолжает динамично развиваться и охватывает всё новые сферы экономических знаний.
Особенности эконометрических моделей
Математическая модель социально-экономической системы, процесса или явления представляет собой абстрактную запись основных его закономерностей с помощью математических формул и соотношений. Эконометрические модели относятся к функциональным стохастическим моделям. Они количественно описывают корреляционно-регрессионную связь между исследуемыми показателями.
Эконометрическая модель содержит три группы элементов: вектор — неизвестные характеристики объекта, которые необходимо определить; вектор — характеристики внешних по отношению к объекту условий, которые, изменяясь, влияют на изучаемые параметры; матрица — совокупность внутренних параметров объекта.
В данном случае и являются экзогенными параметрами (т.е., параметрами, которые определяются вне модели), a — эндогенный параметр, значения которого определяются из модели.
В общем виде эконометрическую модель можно записать в виде:
Здесь — входные экономические показатели, — случайная (стохастическая) составляющая, которые посредством функции регрессии влияют на .
Для построения эконометрической модели необходимо выполнение следующих условий:
наличие достаточно большой совокупности наблюдений;
- однородность совокупности наблюдений;
- точность входных данных.
В отношении оценивания степени однородности совокупности наблюдений существует много различных подходов. Впрочем, все исследователи согласны с тем, что экономические наблюдения, как правило, неоднородны. Поэтому речь может идти лишь о достижении определенной степени однородности, которая обеспечит достоверность экономических выводов.
Различают качественную и количественную однородность. Под первой подразумевается однотипность экономических объектов, их одинаковое качество и определенное назначение. Под второй — однородность группы единиц совокупности, которая определяется на основе количественных показателей.
В математической статистике есть ряд критериев, которые позволяют сделать вывод, являются ли рассматриваемые случайные выборки однородными и можно ли их объединять в одну совокупность для проведения эконометрических исследований.
Точность выходных данных существенно влияет на выводы, которые могут быть сделаны на основе эконометрического моделирования. Погрешности могут возникать при формировании алгоритма расчёта показателей, при округлении, повторном учёте тех или иных показателей и др. Все ошибки делят на систематические, т.е. такие, которые имеют постоянную величину, либо изменяются, подчиняясь определенной функциональной зависимости, и случайные, которые обусловлены влиянием случайных факторов при формировании показателей.
При формировании совокупности наблюдений необходимо обращать внимание и на наличие ошибок во входных данных. Если нет возможности избежать этих ошибок, то необходимо применять специальные методы оценивания параметров эконометрической модели.
Наиболее часто используемым методом для количественной оценки взаимосвязей в эконометрии является корреляционно-регрессионный анализ. Суть метода заключается в определении оценок количественного влияния показателей на исследуемую величину и построении на этой основе строгой зависимости между ними, которая в общем виде записывается в виде некоторой функции:
где — исследуемая величина, — показатели, влияющие на исследуемую величину.
Чаще всего с этой целью используется линейная функция. Однако возможны и другие формы зависимостей: экспоненциальная, степенная, гиперболическая и другие.
Каждая из рассматриваемых функций может быть сведена к линейной с помощью алгебраических преобразований или путем замены. По этой причине именно исследованию линейной зависимости уделяется значительное внимание.
В реальной ситуации наблюдаемые величины отклоняются от данной функциональной формы связи, поэтому в регрессионную модель включается стохастическая составляющая , которую еще называют отклонением или остатком.
В классической линейной эконометрической модели переменная s интерпретируется как случайная переменная, которая имеет нормальный закон распределения с математическим ожиданием, равным нулю, и постоянной дисперсией.
Парная регрессия. Однофакторные линейные эконометрические модели
Простейшими эконометрическими моделями являются модели парной регрессии. Парная регрессия представляет собой зависимость между двумя переменными — и , т.е. модель вида:
Здесь — зависимая переменная (результативный признак); -независимая, или объясняющая, переменная (признак-фактор). Знак означает, что между переменными и нет строгой функциональной зависимости, поэтому величина у складывается из двух составляющих:
Таким образом, — фактическое значение результативного признака; — теоретическое значение результативного признака, найденное по уравнению регрессии; — случайная величина, характеризующая отклонения между и . Случайная величина s включает влияние не учтённых в модели факторов, случайных ошибок и особенностей измерения.
В парной регрессии выбор вида математической функции (спецификация) может быть осуществлён тремя способами:
1) графическим;
2) аналитическим, т.е. исходя из теории изучаемой взаимосвязи;
3) экспериментальным.
Чаще всего эти способы применяют комплексно.
Графический способ основан на внешнем виде корреляционного поля. Напомним, что корреляционным полем называют множество точек в декартовой системе координат. Здесь — номер наблюдения, — количество наблюдений (объём статистической выборки).
Если точки корреляционного поля выстраиваются как бы вдоль гипотетической прямой, то в качестве модели парной регрессии следует брать линейную модель:
В противном случае нужно выбирать нелинейную модель.
Аналитический способ выбора типа уравнения регрессии основан на изучении материальной природы связи исследуемых признаков. Здесь важную роль играет опыт экономиста, который знаком с наработанными схемами зависимостей между социально-экономическими показателями.
При использовании экспериментального способа сравнивают величины остаточной дисперсии, рассчитанной для разных моделей:
Чем меньше величина остаточной дисперсии , тем меньше влияние не учтённых в уравнении регрессии факторов и тем лучше уравнение регрессии подходит к исходным данным.
В эконометрическом моделировании следует придерживаться принципа — чем сложнее модель, тем большее количество наблюдений требуется для её построения.
Сложность модели можно определить показателем — количеством неизвестных параметров, которые являются множителями при переменной или при функциях от переменной .
Например, для следующих моделей:
Соответственно для моделей:
При построении эконометрической модели необходимо придерживаться статистического правила:
Таким образом, если , то . Следовательно, модель можно строить, имея не менее семи наблюдений. При соответственно имеем .
Простейшими эконометрическими моделями являются однофакторные линейные модели парной регрессии. В этом случае предполагается, что между двумя исследуемыми показателями существует линейная корреляционная зависимость. В общем виде однофакторная линейная эконометрическая модель имеет вид:
где — зависимая переменная, — независимая переменная, -оцениваемые параметры, — отклонение линии регрессии от фактических наблюдений.
Чтобы найти уравнение регрессии, необходимо найти неизвестные параметры и . Их оценка осуществляется на основании статистических данных (совокупности наблюдений).
При нахождении оценок параметров уравнения регрессии возникает вопрос, каким критерием следует воспользоваться, чтобы найденная прямая наиболее точно отражала зависимость между показателями. В любом случае расчетные значения зависимой переменной, найденные с помощью уравнения регрессии, будут отклоняться истинных наблюдений.
В качестве критерия можно было бы рассматривать сумму этих отклонений. Однако, поскольку одни имеют разные знаки, то при суммировании будут взаимно «погашаться». Чтобы избежать этого, в качестве критерия предлагается рассматривать сумму квадратов этих отклонений. Этот принцип и лежит в основе метода наименьших квадратов (МНК).
Постановка задачи следующая. Уравнение регрессии будем искать в виде:
где — оценки величин и . Необходимо подобрать такие значения , которые минимизируют сумму квадратов отклонении расчетного значения от наблюдаемого , т.е. .
Заметим, что применение МНК возможно при выполнении следующих условий:
- Математическое ожидание остатков (ошибок) равно нулю.
- Случайные величины имеют одинаковую дисперсию.
- Остатки распределены по нормальному закону с математическим ожиданием, равным нулю и постоянной дисперсией.
Рассмотрим сумму квадратов отклонений как функцию двух переменных :
Для того чтобы найти минимум этой функции, вычислим ее частные производные первого порядка по переменным и приравняем их к нулю:
После преобразований получаем систему нормальных уравнений:
Решаем её относительно и , и получаем формулы, для вычисления параметров уравнения регрессии:
Отметим следующее свойство оценок МНК: линия регрессии всегда проходит через среднюю точку то есть: . С учётом этого оценку параметра можно найти, воспользовавшись соотношением:
Преобразовав формулу, имеем:
Умножив числитель и знаменатель на , получаем ещё одну формулу оценки коэффициента регрессии:
Рассмотрим экономический смысл этого коэффициента. Если в уравнении регрессии в качестве аргумента взять , то получим:
Таким образом, коэффициент регрессии в линейной модели показывает, на сколько единиц в среднем изменится зависимая переменная, если независимую переменную увеличить на единицу при прочих неизменных условиях. Значению свободного члена объяснений не дают.
Задача №1.1.
В таблице 1.1 приведены данные за восемь лет об объёме прямых иностранных инвестициях (далее ПИИ) в экономику страны и объёме валового внутреннего продукта (далее ВВП).
Необходимо найти уравнение линейной регрессии, отражающее зависимость ВВП от ПИИ.
Решение:
Введём в MS Excel данные. С помощью «Мастера диаграмм» построим точечную диаграмму — корреляционное поле (рис. 1.2).
Для упрощения расчётов составим таблицу 1.2.
Найдём оценки параметров уравнения регрессии, используя формулы:
Уравнение регрессии имеет вид:
Коэффициент регрессии показывает, что при увеличении ПИИ на 1 млрд. долларов, ВВП увеличится в среднем на 23,5982 млрд. долл.
Проверка адекватности однофакторной линейной эконометрической модели, значимости её параметров и построение прогнозов
Следующий этап эконометрического моделирования заключается в оценке качества полученного уравнения и его параметров.
Для оценки тесноты и направления связи между двумя показателями используется коэффициент парной корреляции. Его можно вычислить по формуле:
где — ковариация, а — дисперсия и соответственно.
Для вычисления коэффициента парной корреляции можно также использовать преобразованную формулу:
В отличие от коэффициента регрессии, коэффициент корреляции является показателем относительной меры связи между двумя показателями. Значения коэффициента корреляции всегда находятся в пределах:
Положительное значение коэффициента свидетельствует о прямой связи, т.е. с увеличением независимой переменной , увеличивается в среднем и значение . Если коэффициент корреляции отрицательный, то связь обратная.
Если модуль коэффициента парной корреляции близок к 1 , то линейная связь между показателями тесная. Если же коэффициент близок к 0 , то связь практически отсутствует.
Если , то между случайными величинами и существует линейная функциональная зависимость. Коэффициент корреляции равен нулю, когда случайные величины и независимы
В случае, когда и , то между случайными величинами и существует корреляционная зависимость. Причём, чем ближе значение коэффициента по модулю к единице, тем теснее линейная связь между показателями.
Таким образом, коэффициент парной корреляции характеризует тесноту и направление линейной связи между показателями. Следует отметить, что знак коэффициента корреляции всегда совпадает со знаком коэффициента регрессии.
Связь между коэффициентом парной корреляции и коэффициентом регрессии выражается следующей формулой:
Ещё одним показателем адекватности линейной модели является коэффициент детерминации . Он определяется по формуле:
где — общая дисперсия, а — дисперсия, объясняемая регрессией.
Эти показатели вычисляются по формулам:
Таким образом, коэффициент детерминации — это часть дисперсии, которая объясняет регрессию. Величина коэффициента детерминации изменяется в пределах от нуля до единицы:
Если значение близко к единице, то модель адекватна, если близко к нулю, то неадекватна.
Кроме того, коэффициент детерминации показывают, какая часть вариации (изменения) зависимой переменной объясняется вариацией независимой переменной . Для определения доли вариации за счет неучтенных в модели факторов рассчитывается т.н. коэффициент остаточной детерминации:
Рассмотренные выше коэффициенты парной корреляции и детерминации, как показатели адекватности модели, имеют между собой связь, которая выражается формулой:
т.е. коэффициент детерминации равен квадрату коэффициента корреляции.
Осуществляется также проверка значимости коэффициента корреляции, которая подразумевает проверку статистической гипотезы против альтернативной гипотезы , т.е. проверяется гипотеза, заключающаяся в том, что случайные величины и не коррелируют друг с другом.
Для проверки гипотезы рассчитывается -статистика Стьюдента:
где — число степеней свободы.
Для заданного уровня значимости (допустимой вероятности ошибки) и числа степеней свободы находится табличное значение критерия. Если , то гипотеза об отсутствии корреляционной связи между переменными отвергается, в противном случае — принимает.
Для проверки значимости параметров уравнения парной регрессии и также используется -статистика Стьюдента. Расчётные значения критерия можно найти по формулам:
В знаменателях этих дробей стоят случайные ошибки параметров эконометрической модели:
где — несмещенная оценка дисперсии остатков.
Найденные расчётные значения берут по модулю и сравнивают с табличным , которое определено по уровню значимости и числу степеней свободы . Если модуль расчётного значения больше табличного, то соответствующий параметр является значимым. В противном случае он не значим.
Замечание 1.1. Требование значимости коэффициента регрессии является обязательным. Свободный член носит вспомогательный характер. Его незначимость по критерию Стьюдента не является критичным для эконометрической модели.
Для проверки адекватности эконометрической модели используют -критерий Фишера. Расчётное значение критерия находится по формуле:
Данное число сравнивается с табличным значением распределения Фишера, найденного по заданному уровню значимости и числам степеней свободы . Если расчётное значение -критерия превышает табличное, то нулевая гипотеза о равенстве нулю коэффициента регрессии отвергается, и модель признаётся адекватной. В противном случае — гипотеза принимается.
Возможно эта страница вам будет полезна:
Задача №1.2.
По данным примера 1.1 найти значение коэффициентов парной корреляции и детерминации. Проверить значимость коэффициента корреляции, параметров регрессии и значимость модели в целом при уровне значимости = 0,05.
Согласно таблице 1.1, объём ПИИ в последнем временном периоде составлял млрд. долл. Предполагается, что прогнозное значение ПИИ в следующем году составит 120% от , т.е. млрд. долл. Требуется построить точечный и интервальный прогнозы для объёма ВВП на следующий год.
Решение:
Рассчитаем линейный коэффициент корреляции:
Близость коэффициента корреляции к единице указывает на тесную линейную связь между признаками. Коэффициент детерминации
показывает, что уравнением регрессии объясняется 98,41% дисперсии результативного признака, а на долю прочих факторов приходится 1,59%.
Проверим значимость коэффициента парной корреляции по критерию Стьюдента. Расчётное значение критерия равно:
По уровню значимости и количеству степеней свободы определим табличное значение критерия .
Расчётное значение, взятое по модулю, больше табличного. Следовательно, коэффициент корреляции является значимым с надёжностью не менее 95% .
Для оценки статистической значимости параметров регрессии рассчитаем -критерий Стьюдента. Вычислим случайные ошибки параметров и фактические значения -статистик:
Табличное значение -критерия Стьюдента при и числе степеней свободы определено выше и составляет .
Модули обоих расчётных значения больше табличного, поэтому признаём статистическую значимость параметров регрессии с надёжностью не менее 95%.
Оценим качество уравнения регрессии в целом с помощью -критерия Фишера. Рассчитаем фактическое значение -критерия:
Количество степеней свободы для критерия Фишера , . При уровне значимости табличное значение критерия равно:
Так как , то найденная эконометрическая модель является статистически значимой с надёжностью не менее 95%.
Для вычисления точечного прогноза объёма ВВП достаточно в уравнение регрессии подставить предполагаемый объём ПИИ, т.е. 30,72 млрд. долл. Точечный прогноз для ВВП будет следующим:
Ошибка прогноза составляет:
Интервальный прогноз для оценивают по формуле .
Поэтому доверительный интервал будет следующим:
Замечание 1.2. Эконометрическую модель можно считать достоверной, если построенные с помощью неё прогнозы отклоняются от фактических данных не более, чем на 10%. Модель из Задача 1.1 была построена по статистическим данным 2007-2014 гг. Фактические данные за 2015 г. составили млрд. долл. и млрд. долл. Подставив в найденное уравнение регрессии , мы оценим теоретическое (прогнозное) значение у, т.е.
Абсолютное отклонение составит:
Относительное отклонение:
Так как , то построенную модель парной регрессии можно считать адекватной и пригодной для краткосрочных прогнозов.
Оценивание параметров в однофакторных нелинейных эконометрических моделях
Необходимость построения нелинейных моделей парной регрессии приводит к некоторому усложнению преобразований данных и вычислений. Однако при современном развитии информационных технологий эти трудности вполне преодолимы.
Задача №1.3.
В таблице 1.3 приведены данные по десяти однотипным заводам, специализирующихся на ремонте шахтного оборудования в Донецком регионе. Годовой объём выпуска продукции (млн. руб.) зависит от фонда оплаты труда (млн. руб.).
Требуется:
1) средствами MS Excel построить нелинейные уравнения парной регрессии от ;
2) выбрать лучшую модель.
Решение:
Принято различать два класса уравнений нелинейных регрессий. Первый из них включает нелинейные уравнения относительно объясняющих переменных, но линейные по оцениваемым параметрам.
К ним, например, относятся: многочлены (полиномы) различных степеней
и т.д.; равносторонняя гипербола
полулогарифмическая функция
Регрессии первого класса приводятся к линейному виду заменой переменных. Дальнейшая оценка параметров производится с помощью МНК.
Например, парабола второй степени
приводится к линейному виду с помощью замены:
В результате приходим к двухфакторному уравнению
оценка параметров которого осуществляется при помощи МНК.
Равносторонняя гипербола
может быть использована для характеристики связи удельных расходов сырья, материалов, топлива от объёма выпускаемой продукции, времени обращения товаров от величины товарооборота, процента прироста заработной платы от уровня безработицы (кривая Филипса), расходов на непродовольственные товары от доходов или общей суммы расходов (кривые Энгеля) и в других случаях. Гипербола приводится к линейному уравнению заменой: . Аналогичным образом приводятся к линейному виду зависимости , и др.
Второй класс нелинейных уравнений — регрессии, нелинейные по оцениваемым параметрам. К ним, например, относятся: степенная ; показательная ; экспоненциальная . Эти модели приводятся к линейному виду логарифмированием и заменой переменных.
Покажем, как это делается на примере степенной функции :
где
Таким образом, мы применяем МНК к преобразованным данным, а затем потенцированием (обратная замена) находим искомое уравнение.
Широкое использование степенной функции связано с тем, что параметр в ней имеет чёткое экономическое истолкование — он является коэффициентом эластичности.
Такие задачи удобно решать в MS Excel. Для этого нужно выполнить следующую последовательность действий:
• ввести экспериментальные данные в столбцы (или построчно);
• на основании введённых данных построить точечную диаграмму;
• активизировать данные диаграммы, щелкнув по точкам левой кнопкой «мыши»;
• в пункте меню «Диаграмма» выбрать опцию «Добавить линию тренда…»;
• в пункте меню «Тип» выбрать «Полиномиальная (степень 2-я)» или «Логарифмическая», или «Степенная», или «Экспоненциальная»;
• в пункте «Параметры» — «Показывать уравнение на диаграмме» и «Поместить на диаграмму величину достоверности аппроксимации (R1)».
Для величины достоверности аппроксимации выполняется неравенство: . Формула расчёта (см. справку MS Excel) содержит сумму квадратов отклонений. Чем ближе к единице, тем лучше модель описывает фактические данные.
На рис. 1.3-1.6 поместим корреляционное поле, соответствующую линию регрессии, уравнение регрессии и величину достоверности аппроксимации .
Наибольшую величину достоверности аппроксимации имеет полиномиальная модель второй степени (рис. 1.4). Поэтому, на первый взгляд, эту модель можно признать лучшей.
Однако ранее было приведено статистическое правило:
Полиномиальная модель второй степени
имеет два неизвестных параметра и , которые являются множителями при переменной или при функциях от переменной . Поэтому и должно выполняться условие .
Т.к. в Задаче 1.3 имеем , то признать данную модель лучшей было бы некорректно. Отвергаем полиномиальную модель второй степени и рассматриваем остальные.
Среди оставшихся моделей наибольшую величину достоверности аппроксимации имеет экспоненциальная модель (рис. 1.6):
Введём замену и запишем модель в виде, который используется в MS Excel:
Логарифмируя обе части уравнения, получим
Следовательно, экспоненциальная модель имеет один неизвестный параметр , который является множителем при переменной . Поэтому и условие выполняется,т.к. .
Значит, лучшей моделью является экспоненциальная модель (рис. 1.6),
Задача 1.3 выполнена.
Заканчивая эту главу, заметим, что, эконометрические модели парной регрессии описаны во многих учебниках и учебных пособиях. Несмотря на свою простоту, эти модели весьма востребованы в практических задачах экономики.
Множественная регрессия в эконометрических задачах. Производственная функция Кобба-Ду гласа в эконометрическом моделировании
Американский экономист Пол Дуглас в 30-е годы XX в. наблюдал за данными перерабатывающей промышленности США на протяжении двадцати лет и заметил зависимость между экономическими показателями. Он не сумел определить функцию, описывающую эту зависимость, и обратился в 1927 г. к математику Чарльзу Коббу, который предложил следующую функцию:
где — объём выпущенной продукции; — затраты труда; — затраты производственных фондов; и — неизвестные параметры модели, определяемые с помощью МНК на основе эмпирических данных.
Так появилась производственная функция Кобба-Дугласа, принадлежащая к наиболее известным производственным функциям, широко применяемым в экономических исследованиях.
С точки зрения эконометрии эта функция — не что иное, как двух-факторная нелинейная регрессионная модель. С точки зрения математики — мультипликативная степенная функция.
Для определения неизвестных параметров этой модели прологарифмируем левую и правую части функции:
Введём замены
и получим линейную модель
С помощью МНК будем искать параметры и Система нормальных уравнений имеет вид:
Продемонстрируем на конкретных данных этапы построения производственной функции Кобба-Дугласа.
Задача №2.1.
Финансово-промышленная группа «Росслад» владеет шестнадцатью заводами по производству сахара. Имеются данные (табл. 9.3) прошлого года о выпуске продукции у (млн. руб.), затратах труда (млн. руб.) и затратах производственных фондов (ПФ) (млн. руб.).
Требуется:
A) Построить производственную функцию Кобба-Дугласа. Б) Рассчитать характеристики:
1) среднюю производительность труда;
2) среднюю фондоотдачу;
3) предельную производительность труда;
4) предельную фондоотдачу;
5) эластичность выпуска продукции по затратам труда;
6) эластичность выпуска продукции по ПФ;
7) потребность в ресурсах труда;
потребность в ПФ;
9) фондовооружённость труда;
10) предельную норму замещения затрат труда производственными фондами;
11) эластичность замещения ресурсов.
B) Найти прогноз выпуска для заданных значений . руб. и . руб.
Решение:
А) Составим расчётную таблицу 2.2.
Для наших данных система нормальных уравнений будет следующей:
Введём в рассмотрение матрицы
Запишем систему в матричном виде
Согласно методу обратной матрицы
Обратную матрицу находим с помощью Microsoft Excel. Напомним, что операции с матрицами желательно завершать нажатием клавиши «F2» и «Ctrl+Shift+Enter». Итак, имеем:
Так как
Значения неизвестных параметров:
Производственная функция Кобба-Дугласа имеет вид:
Б) Рассчитаем основные характеристики производственной функции: 1) средняя производительность труда равна:
Следовательно, с увеличением затрат труда (при неизменных затратах ПФ ) средняя производительность труда снижается. И, наоборот, увеличение затрат ПФ (при неизменных затратах труда) ведёт к росту средней производительности труда;
2) средняя фондоотдача равна:
Таким образом, с увеличением затрат ПФ (при неизменных затратах труда) средняя фондоотдача снижается. Увеличение же затрат труда (при неизменных затратах ПФ) ведёт к росту средней фондоотдачи; 3) предельная производительность труда:
Следовательно, с увеличением затрат труда (при неизменных затратах ПФ) предельная производительность труда снижается. Наоборот, увеличение затрат ПФ (при неизменных затратах труда) ведёт к росту предельной производительности труда;
4) предельная фондоотдача:
Таким образом, с увеличением затрат ПФ (при неизменных затратах труда) предельная фондоотдача снижается. Увеличение же затрат труда (при неизменных затратах ПФ) ведёт к росту предельной фондоотдачи; 5) эластичность выпуска продукции по затратам труда:
Данный показатель указывает на то, что при увеличении затрат труда на 1% выпуск продукции у предельно увеличивается на 0,2743%; 6) эластичность выпуска продукции по ПФ:
При увеличении ПФ на 1% выпуск продукции может предельно увеличиться на 0,6892%;
7) производственная функция позволяет рассчитать потребность в одном из ресурсов при заданном объеме выпуска продукции и заданной величине другого ресурса.
Потребность в ресурсах труда:
потребность в ПФ:
9) производственная функция позволяет исследовать вопросы соотношения, замещения, взаимодействия ресурсов. В частности, определяется важный экономический показатель — фондовооружённость труда:
10) взаимодействующие в рамках производственной функции ресурсы могут замещать друг друга. Предельная норма замещения затрат труда производственными фондами равна:
Предельная норма замещения зависит не только от параметров и производственной функции Кобба-Дугласа, но и от соотношения объёмов ресурсов. Знак «минус» означает, что при фиксированном объёме выпуска продукции необходимо при уменьшении одного ресурса увеличивать другой.
11) влияние соотношения объемов ресурсов на предельную норму замещения находит свое выражение в эластичности замещения ресурсов. Этот показатель определяется как отношение относительных приращений фондовооружённости труда и предельной нормы замещения ресурсов:
Эластичность замещения ресурсов для производственной функции Кобба-Дугласа всегда равна единице. Т.е. изменению фондовооружённости труда на 1% соответствует изменение предельной нормы замещения также на 1%.
В) Найдём точечный прогноз выпуска продукции для заданных значений
Задача 2.1 решена полностью.
Многофакторные линейные эконометрические модели
Ввиду чёткой интерпретации результатов наиболее широко в множественной регрессии используется линейная функция.
Рассмотрим многофакторную линейную эконометрическую модель:
Ей соответствует линейное уравнение множественной регрессии
Параметры, являющиеся множителями при независимых переменных, называются коэффициентами «чистой» регрессии. Они характеризуют среднее изменение результата с изменением соответствующего фактора на единицу при неизмененном значении других факторов.
Классический подход к оцениванию параметров линейной модели множественной регрессии основан на МНК:
Задача №2.2.
Открытое акционерное общество «РосСельхозХолдинг» более десяти лет производит пшеницу в своих тридцати агроцехах, расположенных в разных областях Российской Федерации. Имеются данные прошлого года (табл. 9.5) о прибыли предприятия (млн. руб.), среднегодовом
удельном весе сельскохозяйственных рабочих в составе агроцеха , среднегодовой численности персонала (тыс. чел.), среднесуточном времени простоя техники в рабочее время (часы), среднемесячных выплатах за вредность труда на одного работника (руб.), среднегодовой текучести кадров (%).
Предполагая, что между переменной и независимыми переменными существует линейная зависимость, требуется:
- Найти линейное уравнение множественной регрессии;
- С помощью алгоритма пошаговой регрессии построить эконометрическую модель с максимальным числом значимых коэффициентов при уровне значимости 0,05.
- Построить точечный и интервальный прогнозы для при допущении, что средние показатели по независимым переменным будут превышены на 5%.
Решение:
В Microsoft Excel имеется пункт меню «Сервис», который содержит надстройку «Анализ данных». В нём выбираем инструмент анализа «Регрессия». Вводим входной интервал для у и входной интервал для . Т.к. в условии задан уровень значимости , то выбираем уровень надёжности 95% . В параметрах вывода отмечаем «Новый рабочий лист» и жмём «ОК». Результаты вычислений, округлённые до четвёртого знака приведены на рис. 2.1.
- Столбец «Коэффициенты» (рис. 2.1) содержит найденные параметры уравнения регрессии. Т.о. линейная пятифакторная регрессионная модель имеет вид:
По коэффициентам регрессии можно давать объяснения. Например, если текучесть кадров увеличится на 1%, то прибыль предприятия снизится в среднем на 0,1714 млн. руб. При этом значения переменных должны оставаться неизменными. Значение свободного члена не объясняют.
- Прокомментируем данные отчета на рис. 9.8.
Множественный коэффициент корреляции характеризует тесноту линейной связи рассматриваемого набора факторов с исследуемым признаком . Границы изменения коэффициента множественной корреляции от 0 до 1. Чем ближе его значение к 1 (в нашем примере ), тем теснее линейная связь результативного признака со всем набором исследуемых факторов.
Множественный коэффициент детерминации , то дисперсия (т.е. разброс) прибыли у на 99,48% объясняется регрессией, т.е. зависимостью от показателей . Величина (т.е. 0,52%) характеризует долю дисперсии , вызванную влиянием не учтённых в модели факторов.
В разделе «Дисперсионный анализ» (рис. 9.8) на пересечении строки «Остаток» и столбца «MS» находится несмещённая оценка дисперсии остатков . Извлекая квадратный корень, получим среднее квадратическое отклонение — стандартную ошибку . В следующей строке располагается число наблюдений .
Раздел «Дисперсионный анализ» называют ANOVA-таблицей (analysis of variance). Она содержит обозначение (degree of freedom) — число степеней свободы. В уравнение регрессии входит независимых переменных (строка «Регрессия»), в строке «Остаток» содержится , что в сумме (строка «Итого») составляет .
Значимость уравнения множественной регрессии в целом определяется с помощью статистического -критерия Фишера. Вероятность того, что будет меньше фактического значения , можно оценить по формуле
Для нашей задаче:
Эту вероятность сравниваем с заданным уровнем значимости . Так как , т.е. вероятность ошибки не превысила 5%, то пятифак-торное уравнение регрессии значимо с надёжностью не менее 95%.
Последний раздел отчёта на рис. 9.8 содержит коэффициенты регрессии
В столбце «Стандартная ошибка» расположены
Для проверки значимости коэффициентов регрессии применяют статистический -критерий Стьюдента. Пусть — случайная величина, имеющая распределение Стьюдента с числом степеней свободы . Вычисляются фактические значения -критерия Стьюдента:
Они помещены в столбце «-статистика»:
Заметим, что свободный член обычно не проверяется на статистическую значимость. Вероятность того, что будет меньше фактического значения , можно оценить по формуле
Для нашей задачи (столбец «-Значение») имеем:
Эти вероятности сравниваем с заданным уровнем значимости . Так как
то оценки коэффициентов регрессии
не являются значимыми. Т.к.
то оценки коэффициентов регрессии
значимы с надёжностью не менее 95%.
Среди незначимых оценок наибольшая вероятность ошибки
поэтому переменная должна быть исключена из модели. Эта процедура повторяется до тех пор, пока все оценки коэффициентов регрессии не будут статистически значимыми.
Такой подход называют алгоритмом пошагового регрессионного анализа. После завершения алгоритма мы получим уравнение регрессии с максимальным числом значимых коэффициентов.
На рис. 9.8 в столбцах «Нижние 95%» и «Верхние 95%» содержит интервальные оценки коэффициентов регрессии. Т.к. среди этих параметров оказались незначимые, то нет смысла давать объяснения их интервальным оценкам. Это будет сделано после построения окончательной модели.
Повторяем те же действия, что и в начале решения задачи. В Microsoft Excel в пункте меню «Сервис» выбираем пакет прикладных программ «Анализ данных». Пользуемся инструментом анализа «Регрессия». Вводим входной интервал для у и входной интервал для при уровне надёжности 95%. Результаты вычислений округляем до четвёртого знака и приводим отчет на рис. 2.2.
Получена линейная четырёхфакторная эконометрическая модель:
Т.к. множественный коэффициент корреляции близок к 1, то наблюдается высокая теснота линейной связи факторов с исследуемым признаком . Т.к. множественный коэффициент детерминации , то дисперсия прибыли на 99,47% объясняется найденной регрессией. Величина (т.е. 0,53%) характеризует долю дисперсии у, вызванную влиянием не учтённых в модели факторов.
Фактическое значение критерия Фишера составляет . Оценена вероятность . Эту вероятность сравниваем с заданным уровнем значимости . Т.к. , то четырёхфакторное уравнение регрессии значимо с надёжностью не менее 95%.
Найденная вероятность больше уровня значимости . Оценка коэффициента регрессии не является значимой, поэтому переменная должна быть исключена из модели.
Вводим входной интервал для и входной интервал для при уровне надёжности 95%. Округляем данные до четвёртого знака и приводим отчёт на рис. 2.3.
Линейная трёхфакторная эконометрическая модель имеет вид:
Отчет на рис. 9.10 содержит следующую информацию. Множественный коэффициент корреляции близок к 1. Следовательно, наблюдается высокая теснота линейной связи факторов с признаком . Множественный коэффициент детерминации . Значит, дисперсия у на 99,46% объясняется найденной регрессией. Величина (т.е. 0,54%) характеризует долю дисперсии у, вызванную влиянием не учтённых в модели факторов.
Фактическое значение критерия Фишера . Получена вероятность . Т.к. , то трёхфакторное уравнение регрессии значимо с надёжностью не менее 95%.
Столбец « -Значение» содержит вероятности для коэффициентов регрессии
(свободный член не анализируется). Все вероятности оказалась меньше уровня значимости . Следовательно, все оценки коэффициентов регрессии значимы.
Алгоритм пошагового регрессионного анализа завершён. Построенная трёхфакторная модель — это уравнение регрессии с максимальным числом значимых коэффициентов.
В столбцах «Нижние 95%» и «Верхние 95%» содержит интервальные оценки параметров уравнения регрессии. Они вычислены по данным столбцов «Коэффициенты» и «Стандартная ошибка»:
Численные значения доверительных интервалов объясняют следующим образом. Например, точеная оценка с надёжностью не менее 95% может колебаться от 5,7325 до 8,8249.
- Построим точечный и интервальный прогнозы для прибыли предприятия v при допущении, что средние показатели по будут превышены на 5%.
Так как
то предполагаемые значения:
Вектор предполагаемых значений:
Точечный прогноз для среднего значения прибыли агроцеха:
Вычислим дисперсию прогноза:
Извлекая квадратный корень, найдём среднеквадратическую ошибку прогноза .
Доверительный интервал для среднего значения (математического ожидания) прогноза зависимой переменной находим по формуле:
Рассчитаем дисперсию и среднее квадратическое отклонение индивидуального прогноза:
Доверительный интервал для индивидуального значения прогноза:
Задачи 2.2 выполнено полностью.
Возможно эта страница вам будет полезна:
Границы применимости классического метода наименьших квадратов в эконометрнческом моделировании
Рассмотрим многофакторную линейную эконометрическую модель:
При построении такой модели предполагают, что выполняются следующие гипотезы.
- Спецификация модели:
где — номер наблюдения.
- Числовые значения независимых переменных являются детерминированными (не случайными) величинами. Векторы
являются линейно независимыми в пространстве . 3. Случайные величины удовлетворяют условиям. Их математические ожидания равны нулю:
Дисперсии:
Причём значения математических ожиданий и дисперсий ошибок не зависят от номера наблюдений .
- При ковариации ошибок равны нулю:
Т.е. для разных наблюдений имеет место статистическая независимость (некоррелированность) ошибок.
При выполнении гипотез 1 — 5 эконометрическая модель называется нормальной линейной регрессионной моделью.
Важнейшую роль в эконометрическом анализе играет следующая теорема, формулировка которой приводится без доказательства.
Теорема Гаусса-Маркова. Предположим, что для линейной модели множественной регрессии выполняются гипотезы 1 — 4. Тогда оценки коэффициентов регрессии , найденные с помощью МНК, являются наиболее эффективными (в смысле наименьшей дисперсии) среди всех линейных несмещённых оценок.
Заметим, что при невыполнении отдельных гипотез теорема Гаусса-Маркова становится неприменимой. Следовательно, и классический МНК не будет давать достоверных результатов.
Нарушение условия линейной независимости векторов (гипотеза
2) приводит к нежелательному явлению, называемому мультиколлинеар-ностью. Условие независимости дисперсии ошибок от номера наблюдения (гипотеза 3) называется гомоскедастичностью. Нарушение данного условия называют гетероскедастичностью. Невыполнение гипотезы 4 называется автокорреляцией остатков.
В эконометрическом моделировании надо уметь выявлять эти нежелательные явления и устранять их. При невозможности устранения — научиться моделировать в условиях невозможности применения классического МНК.
Мультиколлинеарность в массиве независимых переменных эконометрической модели
Мультиколлинеарность означает существование тесной линейной зависимости, или сильной корреляции, между двумя или более объясняющими переменными.
Она негативно влияет на количественные характеристики эконометриче-ской модели, или делает её построение вообще невозможным.
Задача №2.3.
На производительность труда однотипных малых предприятий влияет ряд факторов, среди которых: удельный вес рабочих на предприятии ; премии и другие вознаграждения на одного работника (ден. ед.); оборачиваемость нормируемых оборотных средств (дни). Исследовать на мультиколлинеарность переменные . При наличии мультиколлинеарности предложить меры по её устранению. Статистические данные по десяти предприятиям приведены в табл. 2.4. Уровень значимости .
Решение:
Исследуем мультпколлинеарность в массиве независимых переменных при помощи алгоритма Фаррара-Глобера. Расчёты проведём в Microsoft Excel, округляя числа до четвёртого знака после запятой.
- Нахождение корреляционной матрицы выполним с помощью встроенной функции «Корреляция» (Сервиз—>Анализ данных —> Корреляция), которая позволяет находить коэффициенты корреляции более чем двух факторов:
Её определитель: Он вычислен с помощью функции МОПРЕД().
При имеется полная мультиколлинеарность, а если , то мультиколлинеарность отсутствует. В нашем случае , поэтому продолжим исследование на наличие мультиколлинеарности.
- Определим фактическое значение критерия «хи»-квадрат Пирсона:
Фактическое значение критерия сравнивается с табличным значением при степенях свободы и уровне значимости : Т.к. то в массиве объясняющих переменных существует мультиколлинеарность.
- С помощью функции МОБР() определим обратную матрицу:
- Вычисление -критериев Фишера осуществляем по формуле
где — диагональные элементы матрицы . Имеем
Фактические значения критериев сравниваются с табличным при степенях свободы и уровне значимости :
Т.к. , то независимые переменные и мультиколлинеарны с другими.
- Находим частные коэффициенты корреляции по формуле
где — элемент матрицы , содержащийся в -ой строке и -ом столбце; и — диагональные элементы матрицы . Получаем:
Вычисление -критериев Стьюдента осуществляем по формуле
Имеем
Фактические значения критериев сравниваются с табличным при степенях свободы и уровне значимости .
Т.к. , то между независимыми переменными и существует мультиколлинеарность.
Для того, чтобы избавиться от мультиколлинеарности, можно исключить одну из переменных мультиколлинеарной пары и . Удалить следует переменную , т.к. у неё больше значение -критерия. Следовательно, она больше влияет на общую мультиколлинеарность модели. Однако этот шаг не должен противоречить экономическому смыслу задачи.
Гетсроскедастичность в эконометрическом моделировании
Условие независимости дисперсии ошибок от номера наблюдения называется гомоскедастичностью. Нарушение данного условия вызывает нежелательное явление, называемое гетероскедастичиостью.
Гетероскедастичность возникает, когда значения переменных в уравнении регрессии сильно отличаются в разных наблюдениях, т.е. если анализируемые объекты неоднородны. Неоднородность объектов может отражаться в несопоставимости их «размеров».
Например, в одну выборку объединены крупные и мелкие банки, у которых анализируется зависимость прибыли от величины активов . В этом случае можно ожидать, что для крупных банков колебание прибыли будет выше, чем для мелких. Величина колебаний повлияет на дисперсию ошибок.
Неоднородность может также проявляться, когда в одну выборку объединяются предприятия разного профиля деятельности.
Часто при исследовании совокупности данных на гетероскедастичность предполагается, что дисперсия остатков пропорциональна квадрату значений одной из независимых переменных .
В этом случае наиболее эффективен параметрический тест Гольд-фельда-Квандта. Опишем его алгоритм.
Задача №2.4.
В таблице 2.5 приведены данные по зависимой переменной и независимым переменным . Требуется проверить наличие гетероскедастичности с помощью параметрического теста Гольд-фельда-Квандта при уровне значимости .
Решение:
Применим параметрический тест Гольдфельда-Квандта.
Предположим, что дисперсия остатков пропорциональна квадрату значений одной из независимых переменных . Графически определим эту переменную. Построим поля парной корреляции (рис. 2.4 — 2.6).
Как видно из рис. 2.4 — 2.6 источником гетероскедастичности является, скорее всего, переменная .
Данные примут вид (табл. 2.6).
В MS Excel в пункте меню «Сервис» выбираем надстройку «Анализ данных». Пользуемся инструментом анализа «Регрессия». Вводим входной интервал для и входной интервал для при уровне надёжности 95%. Имеем следующие модели:
Коэффициент корреляции
Тесноту (силу) связи изучаемых показателей в предмете эконометрика оценивают с помощью коэффициента корреляции Rxy, который может принимать значения от -1 до +1.
Если Rxy > 0,7 — связь между изучаемыми показателями сильная, можно проводить анализ линейной модели
Если 0,3 < Rxy < 0,7 — связь между показателями умеренная, можно использовать нелинейную модель при отсутствии Rxy > 0,7
Если Rxy < 0,3 — связь слабая, модель строить нельзя
Для нелинейной регрессии используют индекс корреляции (0 < Рху < 1):
Средняя ошибка аппроксимации
Для оценки качества однофакторной модели в эконометрике используют коэффициент детерминации и среднюю ошибку аппроксимации.
Средняя ошибка аппроксимации определяется как среднее отклонение полученных значений от фактических
Допустимая ошибка аппроксимации не должна превышать 10%.
В эконометрике существует понятие среднего коэффициента эластичности Э – который говорит о том, на сколько процентов в среднем изменится показатель у от своего среднего значения при изменении фактора х на 1% от своей средней величины.
Пример нахождения коэффициента корреляции
Исходные данные:
Номер региона |
Среднедушевой прожиточный минимум в день одного трудоспособного, руб., |
Среднедневная заработная плата, руб., |
1 |
81 |
124 |
2 |
77 |
131 |
3 |
85 |
146 |
4 |
79 |
139 |
5 |
93 |
143 |
6 |
100 |
159 |
7 |
72 |
135 |
8 |
90 |
152 |
9 |
71 |
127 |
10 |
89 |
154 |
11 |
82 |
127 |
12 |
111 |
162 |
Рассчитаем параметры парной линейной регрессии, составив таблицу
x |
x2 |
y |
xy |
y2 |
|
1 |
81 |
6561 |
124 |
10044 |
15376 |
2 |
77 |
5929 |
131 |
10087 |
17161 |
3 |
85 |
7225 |
146 |
12410 |
21316 |
4 |
79 |
6241 |
139 |
10981 |
19321 |
5 |
93 |
8649 |
143 |
13299 |
20449 |
6 |
100 |
10000 |
159 |
15900 |
25281 |
7 |
72 |
5184 |
135 |
9720 |
18225 |
8 |
90 |
8100 |
152 |
13680 |
23104 |
9 |
71 |
5041 |
127 |
9017 |
16129 |
10 |
89 |
7921 |
154 |
13706 |
23716 |
11 |
82 |
6724 |
127 |
10414 |
16129 |
12 |
111 |
12321 |
162 |
17982 |
26244 |
Среднее |
85,8 |
7491 |
141,6 |
12270,0 |
20204,3 |
Сумма |
1030,0 |
89896 |
1699 |
147240 |
242451 |
σ |
11,13 |
12,59 |
|||
σ2 |
123,97 |
158,41 |
формула расчета дисперсии σ2 приведена здесь.
Коэффициенты уравнения y = a + bx определяются по формуле
Получаем уравнение регрессии: y = 0,947x + 60,279.
Коэффициент уравнения b = 0,947 показывает, что при увеличении среднедушевого прожиточного минимума в день одного трудоспособного на 1 руб. среднедневная заработная плата увеличивается на 0,947 руб.
Коэффициент корреляции рассчитывается по формуле:
Значение коэффициента корреляции более — 0,7, это означает, что связь между среднедушевым прожиточным минимумом в день одного трудоспособного и среднедневной заработной платой сильная.
Коэффициент детерминации равен R2 = 0.838^2 = 0.702
т.е. 70,2% результата объясняется вариацией объясняющей переменной x.