R数据分析:多分类逻辑回归

上篇文章给大家写了二分类逻辑回归,今天扩展到多分类:

Multinomial logistic regression is used to model nominal outcome variables, in which the log odds of the outcomes are modeled as a linear combination of the predictor variables.

多分类和二分类唯一的区别就是因变量的水平不一样。

今天依然给大家写一个实际分析例子:

实例描述

一群大学生现在需要选择学习项目program,我们想要探讨学生学习项目的选择和他们的写作分数write和社会经济地位ses有没有关系。在这个例子中项目有三个水平,分别是:general program, vocational program and academic program,然后写作分数是一个连续变量,而社会经济地位是一个分类变量。我们来做一个多分类逻辑回归。(数据请关注后私信“数据链接”获取)

ml <- read.dta('C:/Users/hrd/Desktop/bootcamp/dataset/hsbdemo.dta')
R数据分析:多分类逻辑回归

数据读入之后我们就可以开始做我们的多分类逻辑回归

多分类逻辑回归

我们需要用到的方法为nnet包的multinom,在分析之前我们可以指定一个因变量的参考水平:

ml$prog2 <- relevel(ml$prog, ref = "academic")
test <- multinom(prog2 ~ ses + write, data = ml)
summary(test)
R数据分析:多分类逻辑回归

可以看到我们默认的输出结果中是没有p值的,此时我们需要自己计算z统计量从而得到p值:

z <- summary(test)$coefficients/summary(test)$standard.errors
p <- (1 - pnorm(abs(z), 0, 1)) * 2

那么输出的结果如何解释呢?我们看到每一个因变量的水平其实都有所有自变量的系数,那么多分类逻辑回归做出来的结果其实可以参照二分类逻辑回归一样的解释,相当于有很多个相同参照水平的二元逻辑回归,比如我们的例子中就有2个,我们可以写出回归方程:

R数据分析:多分类逻辑回归

从输出的结果中看b13这个系数为-0.058,那么我们就可以解释为:学生的写作分数每增加一个单位,其选择general program vs. academic program的风险减少exp0.058倍。

到现在我们就做好了我们的多分类逻辑回归,我们可以用我们这个模型来预测原始数据,当然我们通常是在新数据上做预测:

head(pp <- fitted(test))

[图片上传失败...(image-c299e6-1611789643744)]

看,我们模型预测出的前6个选择项目的概率如上图,其和我们原始数据的实际项目选择都是吻合的。

有可能我们还会想看看某个变量的在模型中的预测能力,比如我想看不同的社会经济地位是如何影响学生项目的选择的,此时我们将写作分数全部固定:

dses <- data.frame(ses = c("low", "middle", "high"), write = mean(ml$write))
predict(test, newdata = dses, "probs")

上面的代码就可以得出在写作分数一样的情况下,不同的社会经济地位对应的不同项目的选择概率。

有可能我们还会想看一看写作分数对选择概率的影响,这个时候我们就可以画图。

要画图我们就需要足够的数据,我们进行模拟:

dwrite <- data.frame(ses = rep(c("low", "middle", "high"), each = 41), 
                     write = rep(c(30:70),3))
pp.write <- cbind(dwrite, predict(test, newdata = dwrite, type = "probs", se = TRUE))

上面的代码给不同的社会经济地位水平都模拟出来了30到70分的写作水平的学生,并给每个学生进行了项目选择的概率预测,那么我们现在就可以在每一个社会经济地位的水平中画出学生选择不同项目的概率与其写作分数的关系:

lpp <- melt(pp.write, id.vars = c("ses", "write"), value.name = "probability")
ggplot(lpp, aes(x = write, y = probability, colour = ses)) + geom_line() +  
  facet_grid(variable ~., scales = "free")
R数据分析:多分类逻辑回归

小结

今天给大家写了多分类逻辑回归的做法和解释画图,(站外链接发不了,请关注后私信回复“数据链接”获取本头条号所有使用数据)

感谢大家耐心看完,也欢迎大家的意见和建议。

如果你是一个大学本科生或研究生,如果你正在因为你的统计作业、数据分析、论文、报告、考试等发愁,如果你在使用SPSS,R,Python,Mplus, Excel中遇到任何问题,都可以联系我。因为我可以给您提供最好的,最详细和耐心的数据分析服务。

如果你对Z检验,t检验,方差分析,多元方差分析,回归,卡方检验,相关,多水平模型,结构方程模型,中介调节等等统计技巧有任何问题,请私信我,获取最详细和耐心的指导。

If you are a student and you are worried about you statistical #Assignments, #Data #Analysis, #Thesis, #reports, #composing, #Quizzes, Exams.. And if you are facing problem in #SPSS, #R-Programming, #Excel, Mplus, then contact me. Because I could provide you the best services for your Data Analysis.

Are you confused with statistical Techniques like z-test, t-test, ANOVA, MANOVA, Regression, Logistic Regression, Chi-Square, Correlation, Association, SEM, multilevel model, mediation and moderation etc. for your Data Analysis...??

Then Contact Me. I will solve your Problem...

加油吧,打工人!

往期内容:

机器学习:逻辑回归分类器(一)

R数据分析:逻辑斯蒂回归与泊松回归

R数据分析:多元逻辑斯蒂回归的做法

R数据分析:如何做逻辑斯蒂回归

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,816评论 6 492
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,729评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 158,300评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,780评论 1 285
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,890评论 6 385
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,084评论 1 291
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,151评论 3 410
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,912评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,355评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,666评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,809评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,504评论 4 334
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,150评论 3 317
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,882评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,121评论 1 267
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,628评论 2 362
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,724评论 2 351

推荐阅读更多精彩内容