Pearson's r = 0, Интерпретация Опции

[TheThing]

Очень часто (даже в солидных) в книгах встречаю утверждения, приблизительно следующего характера:
1) A correlation of zero means there is no relationship between the two variables.
2) When no relationship (or zero correlation) is present what we see is that no relationship can be seen between two variables.
3) If r = 0, then there is no relationship between the data y and x: we can?t make any prediction about how y should change if we vary x.

Для тех, кто в школе учил французкий - если коэфф. корреляции Пирсона = 0, между переменными х и у нет связи.

Интересно было бы узнать мнение участников форума, кто соглаен/ не согласен. Как Вы интерпретируете r = 0 ?

[100$]

Очень часто (даже в солидных) в книгах встречаю утверждения, приблизительно следующего характера:
1) A correlation of zero means there is no relationship between the two variables.
2) When no relationship (or zero correlation) is present what we see is that no relationship can be seen between two variables.
3) If r = 0, then there is no relationship between the data y and x: we can?t make any prediction about how y should change if we vary x.

Для тех, кто в школе учил французкий - если коэфф. корреляции Пирсона = 0, между переменными х и у нет связи.

Интересно было бы узнать мнение участников форума, кто соглаен/ не согласен. Как Вы интерпретируете r = 0 ?

Очень понравился перевод: в исходных предложениях фамилия Пирсона не встречалась, а в переводе - пожалуйста. Не зря говорится: "Мастерство не пропьешь". Народ давно заметил. )))

[DoctorStat]

Как Вы интерпретируете r = 0 ?

На уровне значимости тра-та-та-та линейная зависимость между нормально распределенными случайными величинами X и Y отсутствует.

[p2004r]

Интересно было бы узнать мнение участников форума, кто соглаен/ не согласен. Как Вы интерпретируете r = 0 ?

Вот так и интерпретирую http://en.wikipedia.org/wiki/Correlation_and_dependence

Если принципиально только два показателя взаимодействуют, то прежде всего смотрю на scatterplots. После этого и делаю заключение о природе relationship.

[TheThing]

Очень понравился перевод: в исходных предложениях фамилия Пирсона не встречалась, а в переводе - пожалуйста. Не зря говорится: "Мастерство не пропьешь". Народ давно заметил. )))

Имеется ввиду Пирсона, я ссылки копировал из разделов книг, где обсуждается Pearson's r. Сам раздел скопировать забыл

[TheThing]

На уровне значимости тра-та-та-та линейная зависимость между нормально распределенными случайными величинами X и Y отсутствует.

Но ведь может быть, что они нормально распределены, но связь нелинейная. Я почему спросил - очень часто в книгах и на защитах упускают момент, что обязательным условием для применения и интерпретации r, является линейная зависимость и не проверяют, какая зависимость между переменными (хотя бы элементарно с помощью графиков) и просто говорят r ~ 0,00.., значит связь отсутствует. Но ведь может быть, что связь очень сильная, просто зависимость нелинейная, а r = 0.

Кстати, набрел на интересную статью:

M. D. Nefzger, James Drasgow, The needless assumption of normality in Pearson's r.
Это конечно тоже противоречит тому, что мы слышим везде и всюду. Статистика вроде точная наука, но почему столько мнений ?

Сообщение отредактировал TheThing - 21.05.2014 - 00:17

[TheThing]

Вот так и интерпретирую http://en.wikipedia.org/wiki/Correlation_and_dependence

Если принципиально только два показателя взаимодействуют, то прежде всего смотрю на scatterplots. После этого и делаю заключение о природе relationship.

Да, в Вики четко выделяют,что условием является линейная зависимость (чего не скажешь про другие книги и журналы). В книге, в которой Вы являетесь со-автором (Наглядная статистика, используй R), тоже про это четко написано

[nokh]

Да, в Вики четко выделяют,что условием является линейная зависимость (чего не скажешь про другие книги и журналы). В книге, в которой Вы являетесь со-автором (Наглядная статистика, используй R), тоже про это четко написано

А при чём тут "зависимость" вообще? Зависимости мы оцениваем регрессией, а корреляция - это мера связи. Связь и зависимость - разные вещи. И в википедии правильно написано, что "Correlation refers to any of a broad class of statistical relationships involving dependence" (выделено мной). Связь - более общее явление; в основе связи может лежать как зависимость одного показателя от другого (прямая или обратная, непосредственная или опосредованная), так и зависимость обоих показателей от третьей величины. Известный пример - связь между ростом рождаемости у людей и ростом численности популяции аистов в которой нет зависимости одного от другого, только обоих от третьего. Т.о. связь двух показателей не всегда сводится к зависимости и при использовании r следует говорить о линейности связи. Также мне не нравятся термины "взаимодействуют" и "взаимосвязь", которые предполагают сразу знание механизма: первое действует на второе, а второе на первое, или первое связано со вторым, а второе с первым. Если обнаруживается связь между уровнем радиации и числом мутаций, то мы знаем, что она скорее всего обусловлена зависимостью, но действие здесь одностороннее: уровень мутаций в свою очередь никак не влияет на источник радиации, т.е. ни о каком "взаимо" речи не идёт. Т.о. расхожий в научных кругах термин "взаимосвязь" в подавляющем большинстве случаев употребляется неверно.

Сообщение отредактировал nokh - 21.05.2014 - 04:46

[TheThing]

А при чём тут "зависимость" вообще? Зависимости мы оцениваем регрессией, а корреляция - это мера связи. Связь и зависимость - разные вещи. И в википедии правильно написано, что "Correlation refers to any of a broad class of statistical relationships involving dependence" (выделено мной). Связь - более общее явление; в основе связи может лежать как зависимость одного показателя от другого (прямая или обратная, непосредственная или опосредованная), так и зависимость обоих показателей от третьей величины. Известный пример - связь между ростом рождаемости у людей и ростом численности популяции аистов в которой нет зависимости одного от другого, только обоих от третьего. Т.о. связь двух показателей не всегда сводится к зависимости и при использовании r следует говорить о линейности связи. Также мне не нравятся термины "взаимодействуют" и "взаимосвязь", которые предполагают сразу знание механизма: первое действует на второе, а второе на первое, или первое связано со вторым, а второе с первым. Если обнаруживается связь между уровнем радиации и числом мутаций, то мы знаем, что она скорее всего обусловлена зависимостью, но действие здесь одностороннее: уровень мутаций в свою очередь никак не влияет на источник радиации, т.е. ни о каком "взаимо" речи не идёт. Т.о. расхожий в научных кругах термин "взаимосвязь" в подавляющем большинстве случаев употребляется неверно.

Тогда получается, что 90% русскоязычной литературы по статистике написано с ошибкой, даже в Вики "Корреля́ция (от лат. correlatio ? соотношение, взаимосвязь), корреляционная зависимость - статистическая взаимосвязь бла-бла..". Значит слово "relationship", которое по словарю переводится как связь и как взаимосвязь, нельзя применять к статистике как взаимосвязь, а только как связь.
Относительно корреляционной зависимости (если вообще можно так говорить..) - как статистическая взаимосвязь..мне кажется, что здесь основной акцент ставится на статистическую взаимосвязь, а не механизм в реальной жизни - так же как статистическая значимость не означает практическую (клиническую) значимость в реальной жизни и не свидетельствует о большом открытии..

Мне в основном приходится общаться на англ и читать англ. литературу, там все просто - relationship..русский язык как всегда сложнее, поэтому и открыл тему..

Сообщение отредактировал TheThing - 21.05.2014 - 11:10

[100$]

..мне кажется, что здесь основной акцент ставится на статистическую взаимосвязь, а не механизм в реальной жизни ...

Оно и понятно: по меткому выражению Эйнштейна "Бог не играет в кости".

[nokh]

Тогда получается, что 90% русскоязычной литературы по статистике написано с ошибкой, даже в Вики "Корреля́ция (от лат. correlatio ? соотношение, взаимосвязь), корреляционная зависимость - статистическая взаимосвязь бла-бла..".

По мне так именно так и получается . Я - за грамотное использование терминов. Термины в науке нужны для ускорения передачи информации, а не для её искажения. Раз есть "связь" и "взаимосвязь" - можно выбрать более точный, и получается, что взаимосвязь - более узкий и конкретизированный (пусть даже его и употребляют не подразумевая механизмов). То, что это не синонимы - всё равно понятно. Например, мы говорим: "найти связь между такими-то показателями и возрастом", но не говорим "найти взаимосвязь между такими-то показателями и возрастом" - как-то не по-русски звучит ну или по-деревенски, слух режет. Но почему-то когда люди обнаруживают связь, часто тут же обзывают её "взаимосвязью" - по мне так так же безграмотно и слух режет. Ну это я так, поворчал о своём, с темой-то про r=0 всё понятно...

[TheThing]

По мне так именно так и получается . Я - за грамотное использование терминов. Термины в науке нужны для ускорения передачи информации, а не для её искажения. Раз есть "связь" и "взаимосвязь" - можно выбрать более точный, и получается, что взаимосвязь - более узкий и конкретизированный (пусть даже его и употребляют не подразумевая механизмов). То, что это не синонимы - всё равно понятно. Например, мы говорим: "найти связь между такими-то показателями и возрастом", но не говорим "найти взаимосвязь между такими-то показателями и возрастом" - как-то не по-русски звучит ну или по-деревенски, слух режет. Но почему-то когда люди обнаруживают связь, часто тут же обзывают её "взаимосвязью" - по мне так так же безграмотно и слух режет. Ну это я так, поворчал о своём, с темой-то про r=0 всё понятно...

Да, скорее всего эти термины многие подменяют: связь, взаимосвязь, зависимость.. В той же книге "Наглядная статистика" в разделе про корреляц. анализ и коэфф. Пирсона как мера линейной связи (там пару раз мелькает слово взаимосвязь ну да ладно..) и хорошо акцентируется внимание, что обязательно нужно проверять, что связь именно линейная перел тем, как применять r. Но когда открываешь раздел по регрессионному анализу, там написано - если корреляционный анализ позволяет нам определить зависимость между переменными, то регресионный - определить форму этой зависимости и рассчитать параметры зависимости. Получается, что для авторов этой книги, связь, взаимосвязь и зависимости практически синонимы..

P.S. получается, что когда Вы ворчите, часто выплывают важные нюансы Спасибо!

[p2004r]

По мне так именно так и получается . Я - за грамотное использование терминов. Термины в науке нужны для ускорения передачи информации, а не для её искажения. Раз есть "связь" и "взаимосвязь" - можно выбрать более точный, и получается, что взаимосвязь - более узкий и конкретизированный (пусть даже его и употребляют не подразумевая механизмов). То, что это не синонимы - всё равно понятно. Например, мы говорим: "найти связь между такими-то показателями и возрастом", но не говорим "найти взаимосвязь между такими-то показателями и возрастом" - как-то не по-русски звучит ну или по-деревенски, слух режет. Но почему-то когда люди обнаруживают связь, часто тут же обзывают её "взаимосвязью" - по мне так так же безграмотно и слух режет. Ну это я так, поворчал о своём, с темой-то про r=0 всё понятно...

Крайне не хватает "официальной" онтологии "русскоязычных" понятий. Хоть садись за protege и пиши Перед этим натравив какой нибудь tomita парсер на статьи, книги и учебники

[DoctorStat]

У меня вопрос по коэффициенту корреляции. Допустим, что между двумя случайными величинами X и Y есть нелинейная связь. Существует ли математический аппарат, который, если зависимость неизвестна, подбирает нелинейную функцию в определенном классе,(например, среди полиномов 2-ой степени, зависимости одной величины от другой и вычисляет корреляцию случайных величин относительно этой функции ?

[100$]

У меня вопрос по коэффициенту корреляции. Допустим, что между двумя случайными величинами X и Y есть нелинейная связь. Существует ли математический аппарат, который, если зависимость неизвестна, подбирает нелинейную функцию в определенном классе,(например, среди полиномов 2-ой степени, зависимости одной величины от другой и вычисляет корреляцию случайных величин относительно этой функции ?

Ответ положительный. Не помню фамилию советского профессора, который предложил алгоритм расчета параболической корреляции и затабулировал необходимую информацию.
Достоинство метода в том, что связь изначально мыслится как нелинейная. Полиномов более высокой степени не встречал.

Однако. Если взять, н-р, два номинальных признака и вычислить между ними связь типа корреляции (ака сопряженность), кто может утверждать, что она априори линейна или нелинейна?