百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术教程 > 正文

python机器学习:线性回归中的哑变量转换

csdh11 2025-02-09 11:56 24 浏览

之前其实写过一个在python中如何进行哑变量转化的文章,今天又遇到了相同的问题,为了加强学习效果,决定今天和线性回归一起再写一遍。

什么是哑变量

举一个例子,假设变量“职业”的取值分别为:农民、工人、学生、企业职员、其他,共5种选项,此时我们用1,2,3,4,5来代表这5个职业类型是解释不通的。我们可以用4个哑变量来代替“职业”这个变量,分别为D1(1=农民/0=非农民)、D2(1=工人/0=非工人)、D3(1=学生/0=非学生)、D4(1=企业职员/0=非企业职员),最后一个选项“其他”的信息已经包含在这4个变量中了,所以不需要再增加一个D5(1=其他/0=非其他)了。在这种情况下,我们称“其他”为参考组。建模分析出来结果都是相对于“其他”组而言的。

实战操作

首先导入相关库和数据,代码如下:

import pandas as pd
import seaborn as sns
from sklearn import linear_model

tips=sns.load_dataset('tips')
tips

上面的代码中,我导入了seborn自带的数据集‘tips',可以看到,我们的数据长这样:


我们现在要做的是拟合'total_bill','size','sex'对'tip'的线性回归,运行以下代码:

lr=linear_model.LinearRegression()

lr.fit(X=tips[['total_bill','size','sex']],y=tips['tip'])

发现,报错“could not convert string to float",这个就是提醒我们要把”sex"转化为数值型变量,因为其为非等级的分类变量,所以我们就得用到哑变量转化,代码如下:

pd.get_dummies(tips)

我们直接用pandas自带的.get_dummies方法就可以啦,运行代码后输出如下:


可以看到,这个方法将数据集中所有的分类变量都自动转化为了哑变量。非常方便。

通常情况下,如果某个变量有n种选择,则将其用哑变量引入模型时,要设置n-1个哑变量,以避免完全的多重共线性。如性别的选择有两种,则引入一个哑变量,是男则数值为1,否则为0,当然也可以设置为女为1,否则为0。季节的选择有4个,则引入3个哑变量,哑变量1:春为1,否则为0。哑变量2:夏为1,否则为0。哑变量3:秋为1,否则为0。

请注意,以上我们用.get_dummies的方法得到的哑变量是n个,比如“sex"本来有2种选择,我们只需要

1个哑变量足够,所以,在上图中得到的哑变量,我们得减去一个然后建模,代码如下:

pd.get_dummies(tips,drop_first=True)

可以看到,.get_dummies方法给我们提供了删掉头一个哑变量的参数drop_first,我们将其设置为True就可以了,得到结果如下:


此时,我们就可以顺利的进行线性回归的拟合了

tips_dummy=pd.get_dummies(tips,drop_first=True)

lr=linear_model.LinearRegression()
lr.fit(X=tips_dummy[['total_bill','size','sex_Female']],y=tips_dummy['tip'])

lr.coef_
lr.intercept_

结果如图

可以看到,经过哑变量转化后,模型顺利输出了sex这个变量的系数。

结论

今天还是用一个线性回归的实例给大家介绍了哑变量的实际应用,希望对大家有帮助。感谢大家耐心看完。发表这些东西的主要目的就是督促自己,希望大家关注评论指出不足,一起进步。内容我都会写的很细,用到的数据集也会在原文中给出链接,你只要按照文章中的代码自己也可以做出一样的结果,一个目的就是零基础也能懂,因为自己就是什么基础没有从零学Python的,加油。

(站外链接发不了,请关注后私信回复“数据链接”获取本头条号所有使用数据)

往期精彩:

python应用:如何用python提取pdf文件中的文字

python数据分析:离群值的检测和处理

python非监督机器学习入门:K均值聚类实例操练

相关推荐

Github霸榜的SpringBoot全套学习教程,从入门到实战,内容超详细

前言...

SpringBoot+LayUI后台管理系统开发脚手架

源码获取方式:关注,转发之后私信回复【源码】即可免费获取到!项目简介本项目本着避免重复造轮子的原则,建立一套快速开发JavaWEB项目(springboot-mini),能满足大部分后台管理系统基础开...

Spring Boot+Vue全栈开发实战,中文版高清PDF资源

SpringBoot+Vue全栈开发实战,中文高清PDF资源,需要的可以私我:)SpringBoot致力于简化开发配置并为企业级开发提供一系列非业务性功能,而Vue则采用数据驱动视图的方式将程序...

2021年超详细的java学习路线总结—纯干货分享

本文整理了java开发的学习路线和相关的学习资源,非常适合零基础入门java的同学,希望大家在学习的时候,能够节省时间。纯干货,良心推荐!第一阶段:Java基础...

探秘Spring Cache:让Java应用飞起来的秘密武器

探秘SpringCache:让Java应用飞起来的秘密武器在当今快节奏的软件开发环境中,性能优化显得尤为重要。SpringCache作为Spring框架的一部分,为我们提供了强大的缓存管理能力,让...

3,从零开始搭建SSHM开发框架(集成Spring MVC)

目录本专题博客已共享在(这个可能会更新的稍微一些)https://code.csdn.net/yangwei19680827/maven_sshm_blog...

Spring Boot中如何使用缓存?超简单

SpringBoot中的缓存可以减少从数据库重复获取数据或执行昂贵计算的需要,从而显著提高应用程序的性能。SpringBoot提供了与各种缓存提供程序的集成,您可以在应用程序中轻松配置和使用缓...

我敢保证,全网没有再比这更详细的Java知识点总结了,送你啊

接下来你看到的将是全网最详细的Java知识点总结,全文分为三大部分:Java基础、Java框架、Java+云数据小编将为大家仔细讲解每大部分里面的详细知识点,别眨眼,从小白到大佬、零基础到精通,你绝...

1,从零开始搭建SSHM开发框架(环境准备)

目录本专题博客已共享在https://code.csdn.net/yangwei19680827/maven_sshm_blog1,从零开始搭建SSHM开发框架(环境准备)...

做一个适合二次开发的低代码平台,把程序员从curd中解脱出来-1

干程序员也有好长时间了,大多数时间都是在做curd。现在想做一个通用的curd平台直接将我们解放出来;把核心放在业务处理中。用过代码生成器,在数据表设计好之后使用它就可以生成需要的controller...

设计一个高性能Java Web框架(java做网站的框架)

设计一个高性能JavaWeb框架在当今互联网高速发展的时代,构建高性能的JavaWeb框架对于提升用户体验至关重要。本文将从多个角度探讨如何设计这样一个框架,让我们一起进入这段充满挑战和乐趣的旅程...

【推荐】强&牛!一款开源免费的功能强大的代码生成器系统!

今天,给大家推荐一个代码生成器系统项目,这个项目目前收获了5.3KStar,个人觉得不错,值得拿出来和大家分享下。这是我目前见过最好的代码生成器系统项目。功能完整,代码结构清晰。...

Java面试题及答案总结(2025版持续更新)

大家好,我是Java面试分享最近很多小伙伴在忙着找工作,给大家整理了一份非常全面的Java面试场景题及答案。...

Java开发网站架构演变过程-从单体应用到微服务架构详解

Java开发网站架构演变过程,到目前为止,大致分为5个阶段,分别为单体架构、集群架构、分布式架构、SOA架构和微服务架构。下面玄武老师来给大家详细介绍下这5种架构模式的发展背景、各自优缺点以及涉及到的...

本地缓存GuavaCache(一)(guava本地缓存原理)

在并发量、吞吐量越来越大的情况下往往是离不开缓存的,使用缓存能减轻数据库的压力,临时存储数据。根据不同的场景选择不同的缓存,分布式缓存有Redis,Memcached、Tair、EVCache、Aer...