Презентация Понятие корреляционной зависимости онлайн

Содержание слайда: Понятие корреляционной зависимости Многие задачи требуют установить и оценить зависимость между двумя или несколькими случайными величинами. Определение. Зависимость случайных величин называют статистической, если изменение одной величины влечет изменение распределения другой величины. Определение. Статистическая зависимость называется корреляционной, если при изменении одной величины изменяется среднее значение другой. Если случайная величина представляет некоторый признак (например, статистические наблюдения некой экономической величины), то под корреляцией понимают – меру согласованности одного признака с другим, или с несколькими, либо взаимную согласованность группы признаков.

Содержание слайда: Ложная корреляция Корреляционная зависимость указывает на причинно-следственную связь изменений двух признаков. Однако, корреляционные методы не выявляют этой причинности, а лишь указывают на наличие некоторого соответствия. Признаки могут находиться не только во взаимной зависимости друг от друга, но и оба зависеть от какого-либо третьего воздействия, не включенного в область рассмотрения. Например, между двумя временными рядами (переменные, состоящие из наблюдений отстоящих на равные промежутки времени друг от друга) может быть сильная корреляционная зависимость, однако эта зависимость будет ложной, так как переменные сами зависят от времени. Таким образом, более корректно употреблять понятие корреляционная связь.

Содержание слайда: Отличие корреляционной от функциональной зависимости Функциональная зависимость предполагает взаимно однозначное соответствие аргумента х и функции y=f(х), вероятностная же зависимость допускает некий условный диапазон, в который предположительно (с такой-то долей вероятности) попадает значение признака уi при значении хi признака х.

Содержание слайда: Примеры корреляционной зависимости

Содержание слайда: Коэффициент корреляции Пирсона Коэффициент корреляции Пирсона характеризует наличие линейной связи между признаками, де хi — значения, принимаемые в выборке X, yi — значения, принимаемые в выборке Y; — средняя по X, — средняя по Y. Ведем обозначения: ковариация признаков X иY Средние квадратичные отклонения и Тогда:

Содержание слайда: Значение коэффициента корреляции сильная, или тесная при коэффициенте корреляции r>0,70; средняя при 0,50<r<0,69; умеренная при 0,30<r<0,49; слабая при 0,20<r<0,29; очень слабая при r<0,19. Если коэффициент корреляции положительный, то связь между признаками прямая: увеличение одного признака приводит к увеличению другого Если коэффициент корреляции отрицательный, то связь между признаками обратная: увеличение одного признака приводит к уменьшению другого В случае, если r=1, -1, то связь между признаками функциональная!

Содержание слайда:

Содержание слайда:

Содержание слайда:

Содержание слайда: Проверка значимости коэффициента корреляции Пирсона Нулевая и альтернативная гипотезы имеют вид: Н0: коэффициент корреляции Пиросона r незначимый; Н1: коэффициент корреляции Пирсона r значим. Расcчитывается t-статистика по формуле: Определяется tтабл по таблице Стьюдента со степенями свободы n-2 и уровнем значимости α Если , то Н0 отклоняют на заданном уровне значимости, и считаем, что коэффициент корреляции Пирсона значимый.

Содержание слайда: Непараметрические показатели корреляции Определение. Под качественным подразумевается признак, который невозможно измерить точно, но он позволяет сравнить объекты между собой и расположить их в порядке убывания или возрастания качества. Под ранжированием будем понимать упорядочивание объектов согласно убыванию качественного признака Для оценки степени связи качественных признаков используют коэффициенты ранговой корреляции. Коэффициент корреляции Спирмена — мера линейной связи между случайными величинами. Корреляция Спирмена является ранговой, то есть для оценки силы связи используются не численные значения, а соответствующие им ранги. Коэффициент корреляции Кендалла — мера линейной связи между случайными величинами

Содержание слайда: Схема нахождения коэффициента Корреляции Спирмена Определить, какие два признака или две иерархии признаков будут участвовать в сопоставлении как переменные X и Y. Проранжировать значения переменной X, присваивая ранг 1 наименьшему значению, и т.д. Занести ранги в первый столбец таблицы по порядку номеров испытуемых или признаков. Проранжировать значения переменной У, в соответствии с теми же правилами. Занести ранги во второй столбец таблицы по порядку номеров испытуемых или признаков. Подсчитать разности d между рангами X и Y по каждой строке таблицы и занести в третий столбец таблицы. Возвести каждую разность в квадрат: d2. Эти значения занести в четвертый столбец таблицы. Подсчитать сумму d2. При наличии одинаковых рангов рассчитать поправки: где a - объем каждой группы одинаковых рангов в ранговом ряду X; b - объем каждой группы одинаковых рангов в ранговом ряду Y.

Содержание слайда: 8. Рассчитать коэффициент ранговой корреляции rs по формуле: при отсутствии одинаковых рангов при наличии одинаковых рангов где sum(d2) - сумма квадратов разностей между рангами; Ta и Tb - поправки на одинаковые ранги; N - количество наблюдений признаков, участвовавших в ранжировании.

Содержание слайда: Проверка значимости коэффициента ранговой корреляции Спирмена Нулевая и альтернативная гипотезы имеют вид: Н0: коэффициент ранговой корреляции Спирмена rs незначимый; Н1: коэффициент ранговой корреляции Спирмена rs значим. Расcчитывается t-статистика по формуле: Определяется tтабл по таблице Стьюдента со степенями свободы n-2 и уровнем значимости α Если , то Н0 отклоняют на заданном уровне значимости, и считаем, что коэффициент ранговой корреляции Спирмена значимый.

Содержание слайда: Схема нахождения коэффициента корреляции Кендалла 1. В порядке возрастания признака X выстраивают сопряженные наблюдения пар (хi , yi) и записывают их в таблицу. 2. Для каждого значения yi определяют его ранг si, записывается в таблицу. 3. На последовательности рангов s1, s2, …, sN определяют количество инверсий, т.е. нарушений порядка следования. Например, при N = 4 и последовательности рангов {1, 3, 4, 2} имеем количество инверсий: 3 – количество инверсий для числа 1 (после числа 1 есть три значения, больше 1) и 1 – количество инверсий для числа 3 (после числа 3 есть одно значение, больше 3). 4. Формируют ряд значений в таблице из инверсий, если инверсий нет, то присваивают ячейке значение 0. 5. Рассчитывают сумму всех инверсий К: 6. Определяют коэффициент ранговой корреляции по Кендаллу:

Содержание слайда: Проверка значимости коэффициента ранговой корреляции Кендалла Для проверки значимости рангового коэффициента Кендалла, то есть для проверки существенности корреляционной связи, выдвигают гипотезы: Н0: коэффициент ранговой корреляции Кендалла τК незначимый (τК=0); Н1: коэффициент ранговой корреляции Кендалла τК значим (τК ≠0);. Рассчитывается Z-статистика по формуле: По таблице значений функции Лапласа определяем zтабл из равенства для уровня значимости α. Примечание: zтабл можно определить также в модуле Вероятностный калькулятор, выбрав нормальное распределение Z, р=1–α , mean=0, st.dev=1, и отметив режим двусторонней проверки гипотезы. Если , следовательно, нулевую гипотезу о незначимости коэффициента Кендалла (τК=0), можно отклонить на заданном уровне значимости α.

Содержание слайда: Схема нахождения коэффициента конкордации Определение. Множественный коэффициент ранговой корреляции, позволяющий определить тесноту связи между несколькими ранжированными признаками, называется коэффициентом конкордации. Определить, какие признаки будут участвовать в сопоставлении как переменные (X, Y, Z,…). Проранжировать значения всех признаков, присваивая ранг 1 наименьшему значению, и т.д. Занести ранги в столбцы таблицы по порядку номеров признаков (Rx, Ry, Rz,…). Сформировать в таблице столбец из суммы всех рангов (Rs=Rx+Ry+Rz+…). Сформировать в таблице столбец из квадратов сумм всех рангов, полученных в п.3. Rs2 Определить по столбцу из сумм всех рангов (полученных в п.3) среднее значение, где n – число наблюдений.

Содержание слайда: Схема нахождения коэффициента конкордации 6. Определить отклонение суммы квадратов рангов от средне квадратов рангов. 7. Вычислить коэффициент конкордации: Где m- количество факторов (признаков сравнения), n – число наблюдений. Для проверки значимости коэффициента конкордации, выдвигают гипотезы: Н0: коэффициент конкордации W незначимый (W=0); Н1: коэффициент конкордации W значим (W ≠0);. Рассчитывается χ2-статистика по формуле: По таблице значений χ2-распределения определяем χ2 табл , для степени свободы v=n и уровня значимости α. Если χ2>χ2 табл следовательно, нулевую гипотезу о незначимости коэффициента конкордации (W=0), можно отклонить на заданном уровне значимости α. Примечание, χ2 табл можно определить из модуля Вероятностный калькулятор пакета Statistica.

Содержание слайда: Количественная оценка связи явлений различной природы: коэффициенты ассоциации и контингенции Если качественные признаки состоят только из двух групп, то для определения тесноты связи двух качественных признаков применяют коэффициенты ассоциации и контингенции. Схема нахождения коэффициентов 1. Пусть I явление имеет две альтернативы a и b, причем частоты их появления соответственно: na и nb. Пусть II явление имеет две альтернативы c и d, причем частоты их появления соответственно: nc и nd 2. Составляется таблица:

Содержание слайда: Схема нахождения коэффициентов ассоциации и контингенции 3. Причем na = naс + nad. и nb. = nbс + nbd nc = naс + nbc. и nd. = nad + nbd 4. Определяется коэффициент ассоциации как: Определяется коэффициент контингенции: 5. Связь считается подтвержденной если Ka>0,5, а Kk>0,3. Примечание. Коэффициент контингенции всегда меньше коэффициента ассоциации.

Содержание слайда: Коэффициенты взаимной сопряженности Если качественные признаки состоят из более чем двух групп, то для определения тесноты связи качественных признаков применяют коэффициенты сопряженности Пирсона и Чупрова. Схема нахождения коэффициентов сопряженности 1. Пусть I явление имеет альтернативы aI, bI, cI и т.д., причем частоты их появления соответственно: naI , nbI. ncI … Пусть II явление имеет альтернативы aII, bII, cII и т.д, причем частоты их появления соответственно: naII , nbII. ncII … 2. Составляется таблица:

Содержание слайда: Схема нахождения коэффициентов взаимной сопряженности 3. Причем naII = naI,aII + nbI,aII + ncI,aII ; nbII = naI,bII + nbI,bII + ncI,bII ncII = naI,cII + nbI,cII + ncI,cII И naI = naI,aII + naI,bII + naI,cII ; nbI = nbI,aII + nbI,bII + nbI,cII ncI = ncI,aII + ncI,bII + ncI,cII 4. Определяется значение:

Содержание слайда: Схема нахождения коэффициентов взаимной сопряженности 5. Определяется коэффициент взаимной сопряженности Пирсона: 6. Определяется коэффициент взаимной сопряженности Чупрова: Где К1 – число значений (групп) I-ого признака. Где К2 – число значений (групп) II-ого признака. Чем ближе коэффициенты взаимной сопряженности к единице, тем теснее связь.

Содержание слайда: Биссериальный коэффициент корреляции Связь между качественными альтернативами признака и количественными вариациями признака определяют на основе биссериального коэффициента корреляции. Схема нахождения коэффициентов сопряженности 1.Пусть даны два качественных признака (категории или группы), для которых известны количественные характеристики. Количество наблюдений в I-ой группе – n1, в II-ой группе – n2. Общее количество наблюдений n= n1 + n2. 2. По каждому из признаков (группе) определяется среднее значение: и 3. Определяются доли каждой группы в общем объеме: Для I –ой группы: p= n1/n Для II-ой группы: q= n2/n 4. Рассчитывается общее среднее значение для обеих групп (признаков)

Содержание слайда: Биссериальный коэффициент корреляции 5. Вычисляется среднее квадратичное отклонение фактических значений признака от среднего уровня: 6. По таблице значений функции Лапласа определяем zтабл из равенства для уровня значимости α. 7. Определяется биссериальный коэффициент корреляции: Чем ближе значение коэффициента к единице, тем теснее связь между признаками.