10973

Линейный корреляционный анализ

Лекция

Математика и математический анализ

Линейный корреляционный анализ Исключительный интерес для широкого класса задач представляет обнаружение взаимных связей между двумя и более случайными величинами. Например существует ли связь между курением и ожидаемой продолжительностью жизни между умственными

Русский

2013-04-03

175.39 KB

8 чел.

Линейный корреляционный анализ

Исключительный интерес для широкого класса задач представляет обнаружение взаимных связей между двумя и более случайными величинами. Например, существует ли связь между курением и ожидаемой продолжительностью жизни, между умственными способностями и успеваемостью и т.п. В инженерных исследованиях такие задачи, обычно, сводятся к установлению связи между некоторым предполагаемым возбуждением и наблюдаемым откликом изучаемой физической системы.

Существование таких взаимосвязей и их относительную силу можно измерить коэффициентом корреляции.

Основная задача корреляционного анализа состоит в выявлении связи между случайными переменными путем точечной и интервальной оценки различных (парных, множественных, частных) коэффициентов корреляции.

Коэффициент корреляции определяется через корреляционный момент (ковариацию) по формуле:

.   (10.1)

Величина характеризует тесноту связи между случайными переменными и в генеральной совокупности. Из свойств коэффициента корреляции известно, что является показателем тесноты связи лишь в случае линейной зависимости между двумя переменными. Для линейно независимых случайных величин . Но даже и для зависимых СВ может быть равен 0. В этом случае СВ и называют некоррелированными.

Пусть получена выборка пар СВ и . Тогда коэффициент корреляции можно оценить по выборочным данным следующим образом:

.     (10.2)

Вспомним несмещённые, состоятельные и эффективные оценки:

   (10.3)

;  (10.4)

;  (10.5)

. (10.6)

Тогда эмпирический коэффициент корреляции определяется по формуле:

.  (10.7)

Как и выборочный коэффициент корреляции принимает значения в интервале , причем одно из граничных значений принимается только при наличии идеальной линейной связи между наблюдениями. Нелинейная связь и (или) разброс данных, вызванных ошибками измерений или же неполной коррелированностью СВ, приводит к уменьшению абсолютного значения (рис. 10.1).

Рис. 10.1. Различные степени корреляции: a) – точная линейная корреляция;
b) – умеренная линейная корреляция; c) – нелинейная корреляция;
d) – отсутствие корреляции.

Эмпирический коэффициент корреляции дает состоятельную, но смещённую оценку. Смещение равно . Однако при величина смещения составляет менее 1%. Для оценки точности выборочного значения удобно использовать некоторую функцию от :

.     (10.8)

Показано, что распределение случайной величины можно аппроксимировать нормальным распределением со средним значением и дисперсией:

.   (10.9)

Даже для независимых случайных величин эмпирический коэффициент корреляции может быть отличен от "0" вследствие случайного рассеивания результатов измерения. Т.е. из-за выборочной изменчивости необходимо проверять, свидетельствует ли не нулевые значения выборочного коэффициента корреляции о существовании статистически значимой корреляции между исследуемыми случайными величинами и . Сделать это можно, проверив гипотезу , причем отклонение гипотезы будет свидетельствовать о принятии альтернативной гипотезы значимости корреляции.

Из формулы (10.9) следует, что при выборочное распределение будет нормальным со средним и дисперсией . Поэтому область принятия гипотезы о нулевой корреляции будет иметь вид:

.   (10.10)

Здесь уровень значимости, стандартное нормальное распределение .

Пример  ЛИНЕЙНЫЙ КОРРЕЛЯЦИОННЫЙ АНАЛИЗ

Имеются данные о росте и массе , выбранных наугад студентов. Есть ли основание считать, что рост и масса студентов коррелированны при уровне значимости ? Пусть рост, а
масса студента. Все данные приведены в таблице:

1

2

3

4

5

6

7

8

9

10

11

12

13

178

188

178

165

175

185

183

175

183

193

188

183

173

63

95

67

66

83

75

70

77

79

70

84

84

75

14

15

16

17

18

19

20

21

22

23

24

25

178

180

173

185

165

185

188

163

183

183

170

185

100

84

82

77

61

79

82

68

77

75

66

77

По данным таблицы получим: , по формуле (10.8) получим , а . По таблицам стандартного нормального распределения получим . Таким образом, гипотеза должна быть отвергнута, следовательно, имеются основания считать, что между ростом и массой студентов существует значимая корреляция.

Ранговая корреляция

До сих пор нами рассматривались и анализировались зависимости между количественными переменными, измеренными в так называемых количественных шкалах. Эти шкалы с непрерывным множеством значений позволяют выявить на сколько (или во сколько раз) проявление признака у одного объекта больше (меньше), чем у другого (например, производительность труда, заработная плата, накладные расходы и т.п.).

Наряду с этим на практике часто возникает необходимость изучения связи между ординальными (порядковыми) переменными, измеренными в так называемой порядковой шкале. В этой шкале можно установить лишь порядок, в котором объекты выстраиваются по степени проявления признака (например, уровень благоустроенности жилья, класс гостиницы, тестовые баллы, экзаменационные оценки и т.п.). Если, скажем, по некоторой дисциплине два студента имеют оценки "отлично" и "удовлетворительно", то можно утверждать, уровень подготовки по этой дисциплине первого студенты выше (больше), чем второго, но нельзя сказать , на сколько или во сколько раз больше.

Оказывается, что в таких случаях проблема оценки тесноты связи разрешима, если упорядочить, или ранжировать, объекты анализа по степени выраженности измеряемых признаков. При этом каждому объекту присваивается определенный номер, называемый рангом. Например, объекту с наименьшим проявлением (значением) присваивается ранг 1, следующему за ним – ранг 2 и т.д. Объекты можно располагать и в порядке убывания значений (проявлений) признака. Если объекты ранжированы по двум признакам, то появляется возможность оценить тесноту связи между признаками, основываясь на рангах, т.е. ранговые корреляции.

Коэффициент ранговой корреляции Спирмена находится по формуле:

где  и  - ранги i-го объекта по переменным  и   – число пар наблюдений.

Если ранги всех объектов равны () то , т.е. при полной прямой связи коэффициент ранговой корреляции Спирмена равен единице.

При полной обратной связи, когда ранги объектов по двум переменным расположены в обратном порядке, можно показать, что
и по формуле (10.11)
. Во всех остальных случаях .

При ранжировании данных иногда сталкиваются со случаями, когда невозможно найти существенные различия между объектами по величине проявления рассматриваемого признака. Такие объекты, как говорят, оказываются связанными. Связанным объектам приписывают одинаковые средние ранги, такие, чтобы сумма всех рангов осталась такой же, как и при отсутствии связанных рангов. Например, если у четырех объектов рассматриваемые признаки оказались одинаковыми и невозможно определить, какие из четырех рангов (4, 5, 6, 7)приписать этим объектам, то каждому объекту приписывается средний ранг, равный (4+5+6+7)/4=5.5. При наличии связанных рангов вычисляется модифицированный коэффициент корреляции Спирмена:

Здесь

число групп неразличимых рангов у переменных  и ;

 число рангов, входящих в группу неразличимых рангов переменных  и .

При проверке значимости p воспользуемся тем, что в случае справедливости нулевой гипотезы об отсутствии корреляционной связи между переменными при  статистика


имеет  распределение Стьюдента с  степенями свободы. Поэтому  значим на уровне , если фактически наблюдаемое значение  будет больше критического (по абсолютной величине), т.е. , где  табличное значение  критерия Стьюдента, определенное на уровне значимости  при числе степеней свободы .


 

А также другие работы, которые могут Вас заинтересовать

46220. В.В.Давыдов «Современное состояние научной школы Выготского» 14.63 KB
  Лурия показал существенное значение языка для возникновения и развития человеческого сознания. Лидия Ильинична очень многое восприняла от Выготского в понимании того в чем коренятся закономерности развития личности детей. Основной главной идеей научной школы Эльконина является идея историзма детского психического развития. Даниил Борисович в своей периодизации человеческого развития выдвинул гипотезу о том что возникает подростковый возраст.
46221. Стек 14.63 KB
  Типичный пример модуля определение стека. Здесь необходимо решить такие задачи: Предоставить пользователю интерфейс для стека например функции push и pop. Гарантировать что представление стека например в виде массива элементов будет доступно лишь через интерфейс пользователя. Обеспечивать инициализацию стека перед первым его использованием.
46222. Деловые переговоры, их виды. Процесс переговоров и его этапы 14.63 KB
  Основы устного общения. Культура речи понятие объединяющее владение языковой нормой устного и письменного языка а также умение использовать выразительные языковые средства в разных условиях общения. Виды речи классификация компонентов речевого общения. Принципы устного общения: Создайте комфортную и не отвлекающую внимание больного обстановку.
46223. Система сбалансированных показателей результативности закупочной логистики 14.61 KB
  Система сбалансированных показателей результативности закупочной логистики. Суть системы сбалансированных показателей Blnced Scorecrd или показателей результативности состоит в том что показатели которые предприятие использует для оценки результативности своей деятельности должны быть не только баслансированными но и соответствовать цели которую ставит перед собой предприятие. Система сбалансированных показателей задумана еѐ авторами Роберт Каплан и Девид Нортон как инструмент реализации стратегии развития предприятия. В...
46224. PR как вид публичных коммуникаций и понятие публичной сферы 14.57 KB
  На протяжении человеческой истории сфера публичной коммуникации функционировала как сфера где зарождались и реализовывались практики которые сегодня могут рассматриваться как предшественники и прототипы PR. Публичная сфера это то доступное для граждан место где формируется общественное мнение. В трактовке западных исследователей понятие публичная сфера выглядит так: Публичная сфера это определенное пространство место в котором различные социальные системы правительство партии профсоюзы массмедиа ведут общественную дискуссию...
46226. Структура языкового знака. Аспекты знакового отношения (семантический треугольник Огдена и Ричардса) 14.56 KB
  Структура языкового знака. Таково определение языкового знака предлагаемое словарем 1 167. Значение знака идеально его внешняя форма материальна. Оптимальным способом анализа языкового знака в контексте данной работы является его осмысление как чисто субъективной субстанции существующей исключительно внутри сознания человека.
46227. Историческое развитие лексического состава языка. Источники пополнения словарного запаса 14.55 KB
  Историческое развитие лексического состава языка. Формами существования языка являются: территориальные диалекты говоры наддиалектные языковые образования койне различные социальные диалекты профессиональная речь профессиональные арго тайные корпоративные языки кастовые языки просторечие молодежное арго обиходноразговорная речь литературный язык. В принципе все формы существования языка исключая тайные языки доступны пониманию в пределах данного народа. Формы существования языка различаются между собой составом языковых...
46228. Вариантные обобщения 14.54 KB
  Вариантные обобщения. Обобщение данных состоит из основы обобщения к которой присоединяются различные основы специализаций. Но чаще всего обобщения на основе общего ресурса строится таким образом что начальный адрес для всех размещаемых объектов является одинаковым. Вариантное обобщение Вариант основа обобщения данных в процедурном подходе.