概述

数值优化对于最优化问题提供了一种迭代算法思路，通过迭代逐渐接近最优解，分别对无约束最优化问题和带约束最优化问题进行求解。

该系列教程能够參考的资料有
1. 《Numerical Optimization 2nd》–Jorge Nocedal Stephen J. Wright
2. 《凸优化》–Stephen Boyd
3. 《非线性最优化基础》–Masao Fukushima（林贵华译）
4. 《非线性最优化理论与方法》–王宜举
5. 凸优化在线课程

学习链接

最优化问题概述
*介绍最优化问题分类以及求解思路
线搜索方法
*基于线搜索方法，包含最速下降、牛顿方法以及步长计算等
信赖域方法
*介绍信赖域求解最优化问题的思路
共轭梯度方法
*介绍共轭方法的思路
拟牛顿方法
*介绍拟牛顿方法，用一阶梯度近似Hessian矩阵方法
大规模无约束最优化方法
*大规模无约束问题，LBFGS等
梯度计算
*复杂函数梯度近似方法
无梯度最优化方法
*不计算梯度情况下。怎样进行最优化
最小二乘问题
*最优化方法应用，求解最小二乘问题
非线性方程
*最优化方法应用，求解非线性方程问题
有约束最优化问题
*介绍等式、非等式约束最优化问题以及最优化条件。包含KKT条件、对偶等
线性规划问题
*线性规划常见求解算法
非线性约束最优化问题
*介绍非线性约束的最优化问题求解思路
二次规划问题
*目标函数是二次函数的特殊最优化问题，是SQP、内点等方法的基础
惩处和增广拉格朗日方法
*求解带约束最优化问题经常用法
序列二次规划和内点法
*SQP和IP方法对于求解大规模约束最优化问题提供方案

说明

该系列文章是个人学习总结。因为非数学专业和时间关系。可能会有错误和纰漏，欢迎大家批评指正。
另外文章每一行都是个人一字一字敲进去的，转载请注明出处。谢谢。

数值优化（Numerical Optimization）学习系列-文件夹相关推荐

Python语言学习之文件夹那些事：python和文件夹的使用方法之详细攻略
Python语言学习之文件夹那些事:python和文件夹的使用方法之详细攻略目录 Python与文件夹那些事 1.创建/删除文件/文件夹 1.创建文件夹
Python自动化办公学习- 获取文件夹下的所有文档的名字并存储到Excel
Python自动化办公学习- 获取文件夹下的所有文档的名字并存储到Excel 这是我第一次学习使用csdn发布学习笔记,如有版权侵犯,引用不当的地方,请立即提示我,我会删除,谢谢. 笔记中如有解释错误 ...
Unix C学习之文件夹操作
文件夹的内容:文件夹的内容就是文件夹里的文件或文件夹文件夹的权限:r读 w写 x可通过 DIR *opendir(const char *name); #include <sys/types. ...
excel批处理：如何按给定目录批量创建系列文件夹
建立一个文件夹,小意思:建立十个文件夹,也很快完成:建立171个文件夹,这就是一项大工程了.如果不能批量创建的话,2个小时能完成就算不错了. 收到领导的小要求,按照下面图片中的目录建立文件夹.小编默默 ...
linux系统命令学习系列-文件和目录管理
复习上节内容: 1. 定时执行任务命令crontab –e, crontab –l,crontab –r 2. 作业:定义一个定时任务,每分钟向/tmp/test.txt文件输出hello world ...
Linux学习笔记--文件夹结构
暂时先上一张图学习吧,先大致了解好,再进行深入的学习. 转载于:https://www.cnblogs.com/zzu-han/p/3256307.html
经典数值优化算法--专题学习
通用的损失函数最优化的数值方法,来源于泰勒展开式,多元函数的泰勒展开式为: 一.一阶逼近与一阶方法一阶泰勒展开式: 其中,是代表了β变化的可能性,t在之后说到的梯度下降方法中演变成了学习速率. 现在 ...
Caffe 学习系列
学习列表: Google protocol buffer在windows下的编译 caffe windows 学习第一步:编译和安装(vs2012+win 64) caffe windows学习:第一 ...
初中信息技术计算机基础说课稿,初中信息技术说课稿《新建文件夹》
1问好尊敬地各位评委老师,我是今天的 9 号考生,我说课的题目是<新建文件夹>. 2总括语我将以教什么怎么教以及为什么这么教为教学思路,从教材分析,教学目标,学情分析,教法学法,教学过 ...

数值优化（Numerical Optimization）学习系列-文件夹

概述

学习链接

说明

数值优化（Numerical Optimization）学习系列-文件夹相关推荐

最新文章

热门文章