72239

Логит- и пробит-модели

Лекция

Экономическая теория и математическое моделирование

Как мы уже обсуждали в эконометрическом моделировании работают с переменными которые могут быть измерены в: Метрической шкале являться количественными. В этой главе мы рассмотрим в частности эконометрические модели которые используют в том случае когда...

Русский

2014-11-19

532 KB

37 чел.

4.6 Логит- и пробит-модели

Как мы уже обсуждали, в эконометрическом моделировании  работают с переменными, которые могут быть измерены в:

  1.  Метрической шкале (являться количественными).
  2.  Порядковой шкале.
  3.  Номинальной шкале.

В этой главе мы рассмотрим, в частности,  эконометрические модели, которые используют в том случае, когда ЗАВИСИМАЯ  переменная измерена в номинальной или порядковой шкале.

Предположим, что результирующий показатель у, «поведение» которого существенно зависит от количественных объясняющих переменных (матрица Х)

Х = (1, х1, ,...,хm-1) ,

является качественной переменной, определяющей одно из двух возможных состояний характеризуемого ею объекта, то есть переменной измеренной в номинальной шкале (в общем случае этих состояний может быть больше). Например, результирующему показателю

yi  может быть приписано значение равное 0, если i-й индивидуум оказался безработным в обследуемом периоде времени, и 1 — в противном случае.

То есть:

В подобных ситуациях вектор

Y = (у1, y2,…,yn)T

исходных статистических данных зависимой переменной будет состоять только из: «0» или «1

 Можно ли построить линейную регрессионную модель, описывающую зависимость у от х в данном случае?

Ответ:  вряд ли.  Неясно, как интерпретировать в этом случае оцененные при помощи регрессии значения у,  которые будут уже измерены в метрической непрерывной (количественной) шкале и могут принимать различные значения.

Поэтому для исследования статистической связи между у и Х строят некоторую специальную регрессионную модель зависимости вероятности

Р{у = 1|Х}

от линейной функции наблюдаемых факторов.

Модель бинарного выбора обосновывают при помощи скрытой (латентной) переменной. Например, предположим, что мы изучаем информацию о том, какое решение принимает замужняя женщина: работать ей, или нет. Считают, что ее потребительское и трудовое поведение описывается некоторой  функцией полезности. Эта функция зависит от многих характеристик: дохода, свободного времени, наличия детей, образования. Женщина может принять решение выйти на работу, чтобы увеличить доход семьи, но при этом произойдет уменьшение времени, уделяемого детям, домашней работе и т.п. Или, она может принять решение не работать. Каждой из рассмотренных ситуаций, соответствует своя величина функции полезности. Предположим, что   это величина полезности, если женщина работает, а - величина полезности, если женщина не работает.

Если

>,

то женщине выгоднее пойти работать, так как  получаемый дополнительный доход перевешивает уменьшение времени на детей и домашние дела.

Если

<,

то женщина не выходит на работу.

Обозначим разность

-=

и предположим, что эта величина является линейной функцией от наблюдаемых характеристик хi: величины заработной платы, возраста, наличия детей и т.д.

Предположим, что

=0+1х1+...m-1xm- 1   +

Тогда 

Р{у = 1}= Р{у*0}=

= Р{0+1х1+...m-1xm-1  + 0}=

= Р{ - (0+1х1+...m-1xm-1)}=

Р{- <0+1х1+...m-1xm-1}=

=F(0+1х1+...m-1xm-1).

Таким образом,

Р{у = 1/х}= F(0+1х1+...m-1xm-1),

где, F-это функция распределения случайной величины (- )

Во многих экономических задачах, скрытую переменную вводят сразу, считая, что:

Отметим, что случайные величины i предполагаются независимыми друг от друга, а также независимыми от хi.

 Описывать вероятность непосредственно линейной функцией (то есть, выбирать в качестве F-линейную функцию), нецелесообразно, так как в этом случае значения предсказанной (вычисленной по модели) вероятности могут быть как отрицательными, так и превосходящими единицу. Вместо этого для моделирования значений 

Р{у = 1|Х}

подбирают функции, область значений которых определяется отрезком [0,1], а линейная функция

z=0+1х1+...m-1xm-1

играет роль аргумента этой функции, т.е.

Р{у =1|Х} =F(0+1х1+...m-1xm-1) =F(z)

(4.6.1)

причем функции F(z)(какую бы мы не выбрали!!!) должны удовлетворять следующим требованием

(4.6.2)

График одной из функций данного вида приведен на рисунке:

.

Модели рассмотренного типа для оценивания вероятности указанного события     называют обычно моделями бинарного выбора. Наиболее распространенными моделями бинарного выбора являются так называемые логит- и пробит-модели.

ОПРЕДЕЛЕНИЕ 4.6.1. Логит-модель. Модель вида (4.6.1) при условиях (4.6.2) для функции F(z), называется логит-моделью, если в качестве F(z) рассматривается логистическая функция, т. е.

(4.6.3)

Нетрудно проверить, что эта функция удовлетворяет условиям (4.6.2), ее часто обозначают через Λ(z).  

ОПРЕДЕЛЕНИЕ.4.1.2 Пробит-модель. Модель вида (4.6.1) называется пробит-моделью, если в качестве F(z) рассматривается  функция распределения стандартного нормального распределения, т.е.

(4.6.4)

Так же, как и функция Λ(z), нормальная  функция распределения F(z) удовлетворяет всем условиям (4.6.2) и является симметричной относительно z = 0.

Figure 4.1: Relationship between latent variable yand Pr(y = 1) for the BRM.

Рисунок заимствован из книги «REGRESSION MODELS FORCATEGORICAL DEPENDENT VARIABLES USING STATA»

Оценивание параметров в логит- и пробит- моделях.

Роль функции регрессии играет функция Λ(z) в логит-модели и функция F(z) в пробит-модели. Для того, чтобы оценить параметры j, например, в логит-модели, используют метод максимального правдоподобия.

Что такое функция правдоподобия?

Согласно определению, функцией правдоподобия называют функцию вида:

L=L(y1,y2,..,yn)=P{Y=y1}P{Y=y2}P{Y=yn} =

(например!)=P{Y=1}P{Y=0}…P{Y=0}

(4.6.5)

В нашем случае, исходя из (4.6.1), мы можем записать эту функцию в виде:

L(y1,y2,…,yn)=

(4.6.6)

Неизвестные параметры I и для логит и для пробит модели ищут из условия максимума функции (4.6.6). Полученные при этом оценки вi  называют оценками максимального правдоподобия.

Запишем формулы для оценивания вероятности события Р{У=1/х}, она имеет вид:

Для логит модели:

Для пробит модели,

где Ф-это функция Лапласа.

Реализация процедур оценивания параметров логит и пробит моделей проводится, например, в программе Stata.

Рассмотрим, как выглядит вывод итогов в Стате.

 

  

 401K.DES

prate     mrate     totpart   totelg    age       totemp    sole      ltotemp

 Obs:  1534

     

 1. prate                       participation rate, percent

 2. mrate                       401k plan match rate

 3. totpart                     total 401k participants

 4. totelg                      total eligible for 401k plan

 5. age                         age of 401k plan

 6. totemp                      total number of firm employees

 7. sole                        = 1 if 401k is firm's sole plan

 8. ltotemp                     log of totemp

4.7. Статистическая значимость логит и пробит - моделей и факторов этих моделей

Проверка значимости модели при помощи теста отношения правдоподобия(тест Вальда), начинается с выдвижения основной гипотезы:

Для проверки данной гипотезы вычисляется выборочная статистика

Z*=LR

(4.7.1)

LR=2(lnL-lnL0).

Здесь lnL величина  максимального значения логарифма функции правдоподобия, а lnL0- величина логарифма функции правдоподобия в случае справедливости основной гипотезы.

Если основная гипотеза верна, то выборочная статистика (4.7.1)  распределена по закону 2 с (m-1) степенью свободы. Границу правосторонней  критической области  К2  ищут по таблицам критических точек хи-квадрат по  уровню значимости (1-α) и (m-1)  степени свободы. Если  выполняется неравенство:

Z*≥ К2,

то основную гипотезу отвергают, принимают альтернативную гипотезу и говорят, что модель статистически значима. В противном случае принимают гипотезу о не значимости модели и переходят к ее пересмотру.

Для моделей бинарного выбора, значимость факторов проверяется при помощи тестирования для каждого фактора    хi, i=1,…, (m-1)  гипотез вида:

Н0:  i=0,

Ha:  i≠ 0.                                            

(4.7.2)

Выборочные статистики, которые используются для тестирования этих гипотез,    имеют асимптотически нормальное распределение и называются z-статистиками. Границу двусторонней критической области ищут по таблицам Лапласа по заданному уровню значимости (1-α).

Если  выполняется неравенство:

К 1<Z*<К2

то принимают основную гипотезу о незначимом отличии от нуля  коэффициента i и делают вывод, что соответствующий ему  фактор незначим для модели.

Для моделей бинарного выбора не определяется  понятие коэффициента детерминации. Однако для них определяют так называемый псевдо коэффициент детерминации, который уже не характеризует объясняющую силу модели 

Определение 4.7.1.  Псевдо - коэффициентом детерминации называют следующую величину:

 Определение  4.7.2.  Индексом отношения правдоподобия Макфаддена (McFadden)  называют характеристику:

Следует подчеркнуть, что если параметры модели бинарного выбора незначимо отличаются от нуля, то оба введенных коэффициента равны нулю.

 

На лекции мы рассмотрели нелинейные регрессионные модели, в частности, модели для бинарной зависимой переменной. Эти модели мы рассмотрели для двух функций регрессий: логит (использовали логистическую функцию) и пробит (использовали функцию распределения стандартного нормального закона распределения). Оценки параметров таких функций регрессии получают при помощи метода максимального правдоподобия. Модель тестируют при помощи теста Вальда, в основе которого статистика, имеющая хи-квадрат распределение.

При изучении многофакторных регрессионных моделей мы интерпретировали оценки параметров вj, как предельный эффект влияния независимых переменных на у.

Вернемся к моделям бинарного выбора. Если мы попытаемся найти производную от P{Y=1|X}, то придем к следующему выражению:

P{Y=1|X}=

где Z= 0+1х1+...m-1xm-1.

По теореме о производной сложной функции, и из свойства плотности   (производная от функции распределения это плотность распределения f(Z)), получаем:

P{Y=1|X}=

или, используя второе обозначение для оценок параметров:

P{Y=1|X}=

P{Y=1|X}=вjf(Z)

Как и раньше, через вj обозначены оценки неизвестных параметров.

Тогда, мы можем рассуждать следующим образом: плотность распределения всегда неотрицательна, поэтому знак  производной P{Y=1|X} будет зависеть только от знака оценки параметров, но будет являться функцией всех независимых переменных. Причем, если оценка параметра будет положительной, то увеличение  переменной xj будет приводить к увеличению вероятности P{Y=1|X}, а если оценка параметра будет отрицательной, то, соответственно, к уменьшению указанной вероятности.  

Замечание. Если фактор х является бинарной переменной, то для него нельзя ввести понятие предельного эффекта.

Для каждой переменной х (количественной!!!)  вводят так называемый средний предельный эффект. Для этого вычисляют выборочные средние для количественных переменных и процент «1» для бинарных, и подставляют их в выражение для плотности распределения вместо переменных.

Еще один вопрос для обсуждения: как после оценивания параметров логит (пробит) модели прогнозировать значение у? Поступают, например, следующим образом. Подставляют найденные значения оценок параметров  и значения хj в Z  и вычисляют значение переменной. Если Z>0, то считают, что У=1, если  Z<0, то считают, что У=0. Замечание. Мы рассмотрели ситуацию, когда переменная у была измерена в номинальной шкале, но принимала всего два значения: 0 и 1. В общем случае, когда у может принимать несколько значений, например 0, 1, 2, 3, используют множественный (по у!!) логит или пробит. Кроме того, у может быть измерен в порядковой шкале, тогда в Стате используют  порядковый логит (пробит) ologit (oprobit).

Замечание. Очень часто в исследованиях приходится проводить исследования на усеченной выборке. Например, если изучают доходы домохозяйств, то бывают ситуацию, когда респондентов с очень большим доходом (например, больше 1 млн.рубл.) следует исключить из исследования, то есть

То в таких случаях используют Тобит-модели.

Yi

0

1

Pi

  1.  F(0+1х1+...m-1xm-1)

F(0+1х1+...m-1xm-1)

E[Y]

F(0+1х1+...m-1xm-1)

V[Y]

F(0+1х1+...m-1xm-1) - (F(0+1х1+...m-1xm-1))2 


 

А также другие работы, которые могут Вас заинтересовать

75020. Дванадцять місяців, народознавчий проект 162 KB
  Чи потрібні сучасній молоді знання про народні свята традиції Чи варто відроджувати їх ці питання визначили проблему. Мета проекту: ознайомлення учнів з багатством культурної спадщини українського народу; формування ціннісного ставлення до скарбів української духовної культури народного мистецтва традицій і звичаїв свого народу...
75021. Структура наукового дослідження, план-конспект уроку 128 KB
  Структура наукового дослідження Мета. Познайомити слухачів із методологією наукової творчості сформувати у них теоретичні знання про основні компоненти структури наукового дослідження та практичні вміння будувати структуру наукового дослідження користуватися одержаними знаннями при написанні наукових робіт стимулювати творчість дослідницькі вміння. Бесіда Яке слово найбільш підходить до поняття структура наукового дослідження Будова схема. Із чого починається наукове дослідження Із обґрунтування актуальності теми дослідження.
75023. Прийшла зима весела. Новорічне свято для учнів 3-4 класів 88 KB
  Ось палац наш крижаний Щоб зустріти рік Новий Ми запрошуєм гостей І дорослих і дітей. До нас у крижаний палац Запрошуємо друзі вас На новорічний бал святковий Чудовий радісний казковий У містечку казковому Крижаному чудовому І цікаво і весело Буде всій дітворі У містечку казковому Крижаному чудовому Ми гостей привітаємо Разом з Новим роком усіх Хай збуваються всі мрії Оживає світ казок В незабутнє святодиво Для дорослих і діток І вітаннями теплими Із піснями легендами З маскарадами іграми Йде до нас Новий рік Дід...
75024. Новогодние приключения, представление для учащихся 7-8 классов 95 KB
  Формирование эстетического восприятия прекрасного в окружающей действительности; воспитание интереса и стремления детей к развитию художественных способностей и творческой деятельности в различных видах искусства и литературы, усовершенствование эстетических знаний, умений и навыков...
75025. Україна велика повстала зі сну. Виховний захід 2.34 MB
  Узагальнити та систематизувати знання учнів про Україну, її історію, державні та народні символи. Розвивати увагу, память, виразність читання. Виховувати любов до рідної країни, почуття патріотизму...
75026. АЛГОРИТМ ИСПУСКАНИЯ ЛУЧЕЙ НА ВЕКТОРНО-РАСТРОВЫХ ГИС-МОДЕЛЯХ В ЗАДАЧАХ РАСЧЕТА ШУМОВОГО ЗАГРЯЗНЕНИЯ СЕЛИТЕБНОЙ ТЕРРИТОРИИ 4.07 MB
  разработка эффективных алгоритмов расчета эквивалентных уровней шумов на селитебной территории с возможностью построения шумовых карт. Алгоритмизация и моделирование процесса распространения звуковых волн в условиях городской застройки.
75027. У Миколая багато роботи, Розробка виховного заходу для учнів початкових класів 56 KB
  Не так давно в Україні Новий рік зустрічали зі Святим Миколаєм більше знаним у народі як Миколай Чудотворець. У зимову ніч з 18 на 19 грудня святий Миколай спускався на срібній вервечці з неба. А скоро прийде Миколай Мати. Біжіть швиденько спати В дорозі Миколай Тільки не забудьте помолитися перед сном.
75028. Норми морального життя. Урок з основ християнської етики 115 KB
  Допомогти дитині зрозуміти Заповіді Божі їх дотримання у своєму житті наше ставлення до них збагатити словниковий запас виховувати любов до Божого слова та виконання всіх заповідей. Що це за шлях істинний це дотримання і збереження Божих Заповідей. Часто вони виникають із Божих заповідей. А зараз прослухайте ще одну притчу про те як Бог дав Ізраїльтянам десять заповідей.