周志华机器学习笔记

第一章

归纳（induction）：特殊到一般的“泛化”过程，generalization，从具体的事实归纳出一般性规律

演绎（deduction）：从一般到特殊的“特化”过程，specialization，从基础原理推演出具体情况。

有归纳偏好：满足条件的模型很多，选择哪个呢？

第二章

过拟合overfitting和欠拟合underfitting

过拟合：学习能力过于强大，把训练样本所包含的不打一半的特性都学到了，说白了就是学习到了一些样本的特有特征

评估方法：1 留出法：分为连个子集，一个用于训练，一个用于验证

　　　　 2 交叉验证（cross-verification）：分成k份，K-1用于训练，剩下的一份用于验证，轮训K次，取平均。（留1法）

　　　　 3 自助法

周志华机器学习笔记相关推荐

周志华机器学习笔记（一）
2 模型评估与选择 2.2 评估方法 2.2.1留出法留出法直接将数据集D划分为两个互斥的集合,其中一个集合作为训练集S,另一个作为测试集T.在S上训练出模型后,用T来评估其测试误差,作为对泛化误差 ...
《机器学习》周志华学习笔记
<机器学习>周志华学习笔记第一章绪论 1.1 引言机器学习:致力于研究如何通过计算的手段,利用经验来改善系统自身的性能. 经验:"经验"通常以"数据& ...
周志华机器学习（西瓜书）学习笔记（持续更新）
<周志华机器学习>笔记第1章绪论 1.1 引言 1.2 基本术语 1.3 假设空间 1.4 归纳偏好 1.5 发展历程 1.6 应用现状第2章模型评估与选择 2.1 经验误差与过拟 ...
【读书笔记】周志华机器学习第二章模型评估和选择
第二章模型评估和选择 1 欠拟合和过拟合偏差和方差 1.1 欠拟合和过拟合 1.2 偏差和方差 2 评估方法性能度量 2.1 评估方法 2.1.1 留出法 2.2.2 交叉验证法 2.2.3 自 ...
周志华机器学习--绪论
周志华机器学习–绪论第一章绪论第二章模型评估与选择第三章线性模型第四章决策树第五章支持向量机第六章神经网络第七章贝叶斯分类器第八章集成学习和聚类文章目录周志华机器学 ...
周志华机器学习：决策树
决策树文章目录决策树参考基本流程划分选择信息增益决策树的生成--ID3,及其问题增益率决策树生成 --C4.5,及其问题剪枝处理预剪枝和后剪枝统计学习方法中的剪枝 CART算法 ...
周志华-机器学习西瓜书-第三章习题3.3 编程实现对率回归
本文为周志华机器学习西瓜书第三章课后习题3.3答案,编程实现对率回归,数据集为书本第89页的数据使用tensorflow实现过程 # coding=utf-8 import tensorflow a ...
周志华机器学习（6）：支持向量机
周志华机器学习(6):支持向量机 6 支持向量机 6.1 间隔与支持向量 6.2 对偶问题(dual problem) 6.3 核函数 6.4 软间隔与正则化基本是大段摘录西瓜书加上一些自己的解释补 ...
周志华机器学习--模型评估与选择
周志华机器学习–模型评估与选择第一章绪论第二章模型评估与选择第三章线性模型第四章决策树第五章支持向量机第六章神经网络第七章贝叶斯分类器第八章集成学习和聚类文章目录周 ...

周志华机器学习笔记

周志华机器学习笔记相关推荐

最新文章

热门文章

周志华 机器学习 笔记

周志华 机器学习 笔记相关推荐

最新文章

热门文章

周志华机器学习笔记

周志华机器学习笔记相关推荐