python实现K折交叉验证
作者：Jepson2017 发布时间：2023-06-08 18:49:01
标签：python,交叉验证
本文实例为大家分享了python实现K折交叉验证的具体代码，供大家参考，具体内容如下
用KNN算法训练iris数据，并使用K折交叉验证方法找出最优的K值
import numpy as np
from sklearn import datasets
from sklearn.neighbors import KNeighborsClassifier
from sklearn.model_selection import KFold # 主要用于K折交叉验证
# 导入iris数据集
iris = datasets.load_iris()
X = iris.data
y = iris.target
print(X.shape,y.shape)
# 定义想要搜索的K值，这里定义8个不同的值
ks = [1,3,5,7,9,11,13,15]
# 进行5折交叉验证，KFold返回的是每一折中训练数据和验证数据的index
# 假设数据样本为：[1,3,5,6,11,12,43,12,44,2],总共10个样本
# 则返回的kf的格式为（前面的是训练数据，后面的验证集）：
# [0,1,3,5,6,7,8,9],[2,4]
# [0,1,2,4,6,7,8,9],[3,5]
# [1,2,3,4,5,6,7,8],[0,9]
# [0,1,2,3,4,5,7,9],[6,8]
# [0,2,3,4,5,6,8,9],[1,7]
kf = KFold(n_splits = 5, random_state=2001, shuffle=True)
# 保存当前最好的k值和对应的准确率
best_k = ks[0]
best_score = 0
# 循环每一个k值
for k in ks:
curr_score = 0
for train_index,valid_index in kf.split(X):
# 每一折的训练以及计算准确率
clf = KNeighborsClassifier(n_neighbors=k)
clf.fit(X[train_index],y[train_index])
curr_score = curr_score + clf.score(X[valid_index],y[valid_index])
# 求一下5折的平均准确率
avg_score = curr_score/5
if avg_score > best_score:
best_k = k
best_score = avg_score
print("current best score is :％.2f" ％ best_score,"best k:％d" ％best_k)
print("after cross validation, the final best k is :％d" ％best_k)
来源：https://blog.csdn.net/d1240673769/article/details/103483845
0
投稿猜你喜欢
使用OpenCV's Haar cascades作为人脸检测，因为他做好了库，我们只管使用。代码简单，除去注释，总共有效代码只有10- 一、简单介绍flask中的wtformsWTForms是一个支持多个web框架的form组件，主要用于对用户请求数据进行验证。安装：pip3
- 字符串的相似性比较应用场合很多，像拼写纠错、文本去重、上下文相似性等。评价字符串相似度最常见的办法就是：把一个字符串通过插入、删除或替换这样
- 本文实例为大家分享了wxPython色环电阻计算器的具体代码，供大家参考，具体内容如下import wx # 导入wxPythonclass
- 实验环境：windows 7，anaconda 3(Python 3.5)，tensorflow（gpu/cpu）函数介绍：标准化处理可以使
- 如何制作一个弹出式的调查窗口？执行下面这段ASP代码： <％ &n
- 一. 使用logging模块时用python写代码时，logging模块最基本的几行配置，如下：import logginglogging.
- 代理的使用场景编写爬虫代码的程序员，永远绕不开就是使用代理，在编码过程中，你会碰到如下情形：网络不好，需要代理；目标站点国内访问不了，需要代
- 简介Go的标准包Container中包含了常用的容器类型，包括conatiner/list，container/heap，container
- 一般的防止被框架方式或者被框架后自动转向,方法如下: if (top.location != self.loc
- Microsoft建立了一种既灵活又强大的安全管理机制，它能够对用户访问SQL Server服务器系统和数据库的安全进行全面地管理。按照本文
- 写了网址规范化后，尚奇公司的柳先生建议再深入讨论一下301转向/重定向。下面就谈谈我所了解的301转向在搜索引擎优化方面的应用。什么是301
- 前言本文旨在记录使用Flask框架过程中与前端Vue对接过程中，存在WebSocket总是连接失败导致前端取不到数据的问题。以及在使用Web
- 最近想尝试一下在IBM Bluemix上使用Python语言创建Web应用程序，所以需要在本地搭建Python Web的开发测试环境。关于P
- 在类中每次实例化一个对象都会生产一个字典来保存一个对象的所有的实例属性，这样非常的有用处，可以使我们任意的去设置新的属性。每次实例化一个对象
- 这里介绍了5中python获取window桌面路径的方法，获取这个路径有什么用呢？一般是将程序生成的文档输出到桌面便于查看编辑。前两个方法是
- virtualenv与virtualenvwrapper当涉及到python项目开发时为了不污染全局环境，通常都会使用环境隔离管理工具vir
- 在客户端，Get方式在通过URL提交数据，数据在URL中可以看到；POST方式，数据放置在HTML HEADER内提交。GET方式提交的数据
- 动态变量名赋值在使用 tkinter 时需要动态生成变量，如动态生成 var1...var10 变量。使用 exec 动态赋值exec 在
- 关于代码调试的技巧，我之前写过很多的文章，关注比较早的同学，也应该都有看过。还没看过的同学，欢迎前往查阅：更多Python代码调试技巧其中有
