Python实现的线性回归算法示例【附csv文件下载】
Python  /  管理员 发布于 6年前   270
本文实例讲述了Python实现的线性回归算法。分享给大家供大家参考,具体如下:
用python实现线性回归
Using Python to Implement Line Regression Algorithm
小菜鸟记录学习过程
代码:
#encoding:utf-8""" Author: njulpy Version: 1.0 Data: 2018/04/09 Project: Using Python to Implement LineRegression Algorithm"""import numpy as npimport pandas as pdfrom numpy.linalg import invfrom numpy import dotfrom sklearn.model_selection import train_test_splitimport matplotlib.pyplot as pltfrom sklearn import linear_model# 最小二乘法def lms(x_train,y_train,x_test): theta_n = dot(dot(inv(dot(x_train.T, x_train)), x_train.T), y_train) # theta = (X'X)^(-1)X'Y #print(theta_n) y_pre = dot(x_test,theta_n) mse = np.average((y_test-y_pre)**2) #print(len(y_pre)) #print(mse) return theta_n,y_pre,mse#梯度下降算法def train(x_train, y_train, num, alpha,m, n): beta = np.ones(n) for i in range(num): h = np.dot(x_train, beta) # 计算预测值 error = h - y_train.T # 计算预测值与训练集的差值 delt = 2*alpha * np.dot(error, x_train)/m # 计算参数的梯度变化值 beta = beta - delt #print('error', error) return betaif __name__ == "__main__": iris = pd.read_csv('iris.csv') iris['Bias'] = float(1) x = iris[['Sepal.Width', 'Petal.Length', 'Petal.Width', 'Bias']] y = iris['Sepal.Length'] x_train, x_test, y_train, y_test = train_test_split(x, y, test_size=0.2, random_state=5) t = np.arange(len(x_test)) m, n = np.shape(x_train) # Leastsquare theta_n, y_pre, mse = lms(x_train, y_train, x_test) # plt.plot(t, y_test, label='Test') # plt.plot(t, y_pre, label='Predict') # plt.show() # GradientDescent beta = train(x_train, y_train, 1000, 0.001, m, n) y_predict = np.dot(x_test, beta.T) # plt.plot(t, y_predict) # plt.plot(t, y_test) # plt.show() # sklearn regr = linear_model.LinearRegression() regr.fit(x_train, y_train) y_p = regr.predict(x_test) print(regr.coef_,theta_n,beta) l1,=plt.plot(t, y_predict) l2,=plt.plot(t, y_p) l3,=plt.plot(t, y_pre) l4,=plt.plot(t, y_test) plt.legend(handles=[l1, l2,l3,l4 ], labels=['GradientDescent', 'sklearn','Leastsquare','True'], loc='best') plt.show()
输出结果
sklearn: [ 0.65368836 0.70955523 -0.54193454 0. ]
LeastSquare: [ 0.65368836 0.70955523 -0.54193454 1.84603897]
GradientDescent: [ 0.98359285 0.29325906 0.60084232 1.006859 ]
附:上述示例中的iris.csv文件点击此处本站下载。
更多关于Python相关内容感兴趣的读者可查看本站专题:《Python数学运算技巧总结》、《Python数据结构与算法教程》、《Python函数使用技巧总结》、《Python字符串操作技巧汇总》及《Python入门与进阶经典教程》
希望本文所述对大家Python程序设计有所帮助。
原梓番博客 在
在Laravel框架中使用模型Model分表最简单的方法中评论 好久好久都没看友情链接申请了,今天刚看,已经添加。..博主 在
佛跳墙vpn软件不会用?上不了网?佛跳墙vpn常见问题以及解决办法中评论 @1111老铁这个不行了,可以看看近期评论的其他文章..1111 在
佛跳墙vpn软件不会用?上不了网?佛跳墙vpn常见问题以及解决办法中评论 网站不能打开,博主百忙中能否发个APP下载链接,佛跳墙或极光..路人 在
php中使用hyperf框架调用讯飞星火大模型实现国内版chatgpt功能示例中评论 教程很详细,如果加个前端chatgpt对话页面就完美了..博主 在
科学上网翻墙之v2rayN-Core客户端免费公益节点使用教程中评论 @ mashrdn 多切换几个节点测试,免费ssr是没那么稳..Copyright·© 2019 侯体宗版权所有· 粤ICP备20027696号