周志华西瓜书3.4题——用十折交叉验证法和留一法估计对率回归的误差

周志华西瓜书3.4题。
本文所编写的代码均使用python3.7进行调试，依靠的sklearn进行的实验。
第一步，导入iris数据集，数据集使用sklearn包里面自带的。

from sklearn.linear_model import LogisticRegression
from sklearn import model_selection
from sklearn.datasets import load_iris# 载入iris数据
data = load_iris()

第二步，用10次十折交叉验证法估计对率回归的精度。（这里所用的循环即为10次）

# 十折交叉验证生成训练集和测试集
def tenfolds():k = 0truth = []while k < 10:kf = model_selection.KFold(n_splits=10, random_state=None, shuffle=True)for x_train_index, x_test_index in kf.split(data.data):x_train = data.data[x_train_index]y_train = data.target[x_train_index]x_test = data.data[x_test_index]y_test = data.target[x_test_index]# 验证生成数组长度是否符合规格print(len(x_train),len(x_test))# 用对率回归进行训练，拟合数据log_model = LogisticRegression(multi_class= 'ovr', solver = 'liblinear')log_model.fit(x_train, y_train)# 用训练好的模型预测y_pred = log_model.predict(x_test)for i in range(15):if y_pred[i] == y_test[i]:truth.append(y_pred[i] == y_test)k += 1# 计算精度accuracy = len(truth)/150print("用10折交叉验证对率回归的精度是：", accuracy)

第三步，用留一法估计对率回归的精度。（这里循环了150次）

# 用留一法验证
def leaveone():loo = model_selection.LeaveOneOut()i = 0true = 0while i < 150:for x_train_index, x_test_index in loo.split(data.data):x_train = data.data[x_train_index]y_train = data.target[x_train_index]x_test = data.data[x_test_index]y_test = data.target[x_test_index]# 用对率回归进行训练，拟合数据log_model = LogisticRegression(multi_class='ovr', solver='liblinear')log_model.fit(x_train, y_train)# 用训练好的模型预测y_pred = log_model.predict(x_test)if y_pred == y_test:true += 1i += 1# 计算精度accuracy = true / 150print("用留一法验证对率回归的精度是：", accuracy)

注：使用的时候直接调用相应的定义函数即可。
主要参考的博文：https://blog.csdn.net/catherined/article/details/82015857
欢迎学习交流！

周志华西瓜书3.4题——用十折交叉验证法和留一法估计对率回归的误差相关推荐

周志华《机器学习》课后习题3.410折交叉验证法和留一法UCI实例比较
3.4选择两个UCI数据集,比较10折交叉验证法和留一法所估计出的对率回归的错误率. 利用SciKitLearn做十折交叉验证和留一法筛选本文选用UCI提供的鸢尾花数据集和红酒产地数据集. Iris ...
周志华西瓜书课后习题答案总目录
https://blog.csdn.net/icefire_tyh/article/details/52064910 机器学习(周志华西瓜书)参考答案总目录从刚开始学习机器学习到现在也有几个月了,期 ...
周志华西瓜书《机器学习》习题提示——第2章
2.1:分层采样, [ ( 500 500 × 70 % ) ] 2 \left[ \binom{500}{500\times 70\%} \right]^2 [(500×70%500)]2 2.2 ...
周志华西瓜书学习笔记(一)
周志华西瓜书学习笔记第一章绪论数据处理分为三个阶段:收集,分析,预测. 一.基本概念机器学习致力于研究如何通过计算的手段,利用经验来改善系统自身的性能. Mitchell给出的更形式化的定义为 ...
《机器学习》(周志华)西瓜书读书笔记
提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档文章目录前言第1章绪论第2章模型评估与选择第3章线性模型第4章决策树第5章神经网络第6章神经网络第7章贝 ...
周志华西瓜书公式勘误(一)之公式2.27勘误
刚开始读周志华老师的机器学习西瓜书,读到第38页时感觉公式2.27的公式有误,照书上的理解怎么也说不通,网上搜一下,果然发现知乎上有人提问.可惜知乎上的回答也不能让人满意,不仅罗里吧嗦,还满屏公式让人 ...
周志华西瓜书第三章学习笔记
第三章学习笔记文章目录第三章学习笔记 1.知识脉络 2.我的笔记参考 1.知识脉络 2.我的笔记这一章公式推导实在太多了,需要补充的推导过程也有很多,就不写电子档了.扩展公式推导和LDA部分补 ...
机器学习(周志华西瓜书) 参考答案总目录
转自:http://blog.csdn.net/icefire_tyh/article/details/52064910 从刚开始学习机器学习到现在也有几个月了,期间看过PDF,上过MOOC,总感觉知 ...
周志华西瓜书 10 个算法详细视频
(文末有福利) 如果你现在准备开始学习,我想你的第一步就是先囤课!打开你的百度云,发现内存已达到80%!打开你的收藏夹,链接已经100+!仿佛我囤了,就代表我学了! 可是,真的有认真看吗? 可能囤积这 ...

周志华西瓜书3.4题——用十折交叉验证法和留一法估计对率回归的误差

周志华西瓜书3.4题——用十折交叉验证法和留一法估计对率回归的误差相关推荐

最新文章

热门文章