机器学习笔记 时间序列预测（基本数据处理，Box-Cox）
数据调整
调整历史数据通常会导致更简单的预测任务。
在这里，我们处理四种调整：日历调整、人口调整、通货膨胀调整和数学变换。
这些调整和转换的目的是通过消除已知的变化源或通过使整个数据集的模式更加一致来简化历史数据中的模式。 更简单的模式通常会导致更准确的预测。
1 日历调整
在季节性数据中看到的一些变化可能是由于简单的日历效应。 在这种情况下，如果在拟合预测模型之前消除变化，通常更容易。
例如，如果您正在研究农场的每月牛奶产量，除了全年的季节性变化外，由于每个月的天数不同，月份之间也会存在差异。
请注意，与每月总产量图（上图）相比，平均日产量图（下图）中的季节性模式要简单得多。 通过查看平均每日产量而不是每月总产量，我们有效地消除了由于月份长度不同而导致的变化。 更简单的模式通常更容易建模并导致更准确的预测。
2 人口调整
任何受人口变化影响的数据都可以调整为人均数据。 也就是说，考虑每人（或每千人或每百万人）的数据而不是总数。
例如，如果您正在研究某个特定地区的医院床位数量随时间的变化，如果您通过考虑每千人的床位数量来消除人口变化的影响，那么结果会更容易解释。 然后你可以看到床的数量是否真的增加了，或者增加是否完全是由于人口的增加。 总床位数可能增加，但每千人床位数减少。 当人口增长速度快于病床数量时，就会出现这种情况。
对于大多数受人口变化影响的数据，最好使用人均数据而不是总数。
3 通货膨胀调整
受货币价值影响的数据最好在拟合模型之前进行调整。
例如，由于通货膨胀，过去几十年来新房的平均成本将会增加。 今年 20 万美元的房子和 20 年前 20 万美元的房子不同。 出于这个原因，通常会调整金融时间序列，以便所有值都以特定年份的美元值表示。 例如，房价数据可能以 2000 年美元表示。
为了进行这些调整，使用了价格指数。 如果 zt 表示价格指数，yt 表示 t 年的原始房价，则 xt=yt/zt ∗z2000 给出 2000 年美元价值的调整后房价。 价格指数通常由政府机构构建。 对于消费品，常见的价格指数是消费者价格指数（或 CPI）。
4 数学调整
如果数据显示随序列水平增加或减少的变化，则数据转换可能很有用。
例如，对数变换通常很有用。 如果我们将原始观测值表示为 y1,...,yT 并将转换后的观测值表示为 w1,...,wT ，那么 wt=log(yt) 。
对数很有用，因为它们是可解释的：对数值的变化是原始尺度上的相对（或百分比）变化。 因此，如果使用以 10 为底的对数，则对数刻度增加 1 对应于原始刻度的 10 倍增。
对数转换的另一个有用特性是它们将预测限制为在原始规模上保持正数。
有时也使用其他转换（尽管它们不是那么可解释）。 例如，可以使用平方根和立方根。 这些被称为幂变换，因为它们可以写成形式
4.1Box-Cox 变换族
一个有用的变换族，包括对数和幂变换，是 Box-Cox 变换族，它取决于参数 λ，定义如下：
Box-Cox 变换中的对数始终是自然对数（即以 e 为底）。 因此，如果 λ=0 ，则使用自然对数，但如果 λ≠0 ，则使用幂变换，然后进行一些简单的缩放。
如果 λ=1 ，则 wt=yt−1 ，因此变换后的数据向下移动，但时间序列的形状没有变化。 但对于 λ 的所有其他值，时间序列将改变形状。
4.1.1 不同λ下Box-Cox的曲线
比如这是λ=1的时候的曲线：
λ=-1时候的曲线
λ=2时候的曲线
一个好的 λ 值可以使整个系列的季节变化的大小大致相同，因为这使得预测模型更简单。 在这种情况下，λ=0.30 效果很好，尽管 0 到 0.5 之间的任何 λ 值都会给出类似的结果。
4.1.2 R语言实现
library(BoxCox)y<-ts(c(5,3,3.1,3.2,3.3,3.4,3.5,3.3,3.2,4,4.1,4.2,6,4,4.1,4.2,4.3,4.4,4.5,4.6,4.7,4.8,4.9,5,10,9,8,8.5,8.4,8.5,8.6,8.7,8.8,8.9,9,9.5),start = 2020,frequency = 12)b=boxcox(y~.,data=y) l=which(b$y==max(b$y))l #75b$x[l] #0.989899也就是这里0.989899就是最佳的λ，也就是'b=boxcox(y~.,data=y)'输出的图的最高点
4.1.3 允许负数的Box-Cox变换（及其逆变换）
BoxCox() 命令实际上实现了对 Box-Cox 变换的轻微修改，当 λ>0 时允许 yt 为负值：
正数部分的yt，和原来的Box-Cox变换是一样的
选择转换后，我们需要预测转换后的数据。 然后，我们需要逆向变换（或反向变换）以获得原始尺度的预测。 反向 Box-Cox 变换由下式给出
5 偏差调整
使用诸如 Box-Cox 变换之类的数学变换的一个问题是，反向变换的点预测将不是预测分布的平均值。 事实上，它通常是预测分布的中位数（假设变换空间上的分布是对称的）。
出于许多目的，这是可以接受的，但有时需要平均预测。 例如，您可能希望将各个地区的销售预测相加，形成整个国家的预测。 但是中位数不加起来，而平均值加起来。
以不考虑负数的Box-Cox为例：
它的逆变换为
而逆变换的均值为：
其中
（3.1改）给出的简单反向变换预测与（3.2）给出的平均值之间的差异称为偏差。 当我们使用平均值而不是中位数时，我们说点预测已经过偏差调整 bias-adjusted。
5.1 R语言实现
要了解这种偏差调整有多大差异，请考虑以下示例，我们使用带有对数变换 (λ=0) 的漂移方法预测鸡蛋的年平均价格。 在这种情况下，对数转换有助于确保预测和预测区间保持正数。
漂移方法见：机器学习笔记 时间序列预测（最基本的方法【benchmark】）_UQI-LIUWJ的博客-CSDN博客
library(forecast)fc<-rwf(y,drift=TRUE,h=50)fc1<-rwf(y,drift=TRUE,h=50,biasadj = TRUE)autoplot(y)+autolayer(fc,series='simple back transformation')+autolayer(fc1,series = 'bias adjusted',PI=FALSE)
机器学习笔记 时间序列预测（基本数据处理，Box-Cox）相关推荐
- 机器学习笔记 时间序列预测（最基本的方法【benchmark】）
1 最基本的方法 这些方法将作为这个系列的benchmark 有时,这些简单方法中的一种将是可用的最佳预测方法: 但在许多情况下,这些方法将作为基准而不是选择方法. 也就是说,我们开发的任何预测方法都 ...
- 机器学习与时间序列预测
机器学习与时间序列预测 爱斯翠摩鸡 关注 2018.03.15 14:02* 字数 2186 阅读 2711评论 8喜欢 9 前言 在所有的预测问题里面,时间序列预测最让我头疼. 做时间序列预测,传 ...
- 机器学习笔记 - 时间序列使用机器学习进行预测
一.概述 在最基本的情况下,我们将预测视为一个简单的回归问题,所有特征都来自单个输入,即时间索引. 只需生成想要的趋势和季节性特征,我们就可以轻松地创建未来任何时间的预测. 然后,当我们添加滞后功能时 ...
- 机器学习笔记-时间序列基础知识
前言 本章不会对时间序列所有的内容进行一个全方位的介绍,只会简单的整理部分时间序列的基础知识点. 时间序列的成分 时间序列:按时间顺序记录的一组数据,称为时间序列 而一条时间序列通常可以分解为 ...
- 【机器学习】时间序列预测：三次指数平滑（Holt-Winters）
statsmodels是一个Python模块,它提供对许多不同统计模型估计的类和函数,并且可以进行统计测试和统计数据的探索. # -*- encoding:utf-8 -*-import pandas ...
- 【学习笔记-时间序列预测】prophet-使用.3节日与特殊事件
1.简介 如果数据中囊括的时间段包括了假期或其他有重复性的特殊事件,必须为它们创建一个数据框(datadraft). 该数据框需要包括有两列:holiday .ds,每出现一个节假日或特殊事件有一行. ...
- 时间序列预测方法最全总结！
时间序列预测就是利用过去一段时间的数据来预测未来一段时间内的信息,包括连续型预测(数值预测,范围估计)与离散型预测(事件预测)等,具有非常高的商业价值. 需要明确一点的是,与回归分析预测模型不同,时间 ...
- TensorFlow搭建LSTM实现多变量时间序列预测（负荷预测）
目录 I. 前言 II. 数据处理 III. LSTM模型 IV. 训练/测试 V. 源码及数据 I. 前言 在前面的一篇文章TensorFlow搭建LSTM实现时间序列预测(负荷预测)中,我们利用L ...
- 读论文——“时间序列预测方法综述”
文章目录 1 什么是时间序列? 2 时间预测方法的核心 3 时间序列数据的特点 4 相关的时间序列参数模型 4.1 移动平均模型(Moving Average, MA) 4.2 自回归模型(Autor ...
最新文章
- java添加窗体_添加的窗体
- Docker学习笔记 — Docker私有仓库搭建
- python语言培训班-Python语言培训（零基础初级班）
- java的隐藏函数_java – 隐藏子级数据成员的父成员函数
- Kubernetes v1.10.x HA 全手动安装教程(TL;DR)
- Private strand flush not complete 说明
- Markdown编辑器简单大概语法学习
- 数据驱动测试(DDT)入门
- 离开了公司，你还有什么
- 在一个字符串中搜索某个特定的字符值
- 静态库与动态库之间的区别
- 【Raft】学习九：成员变更ConfChangeV2
- 头条搜索战百度：进攻性放手，危机并存
- 射频标签技术特征的分类
- php线下支付,Paypal线下支付模块，附下载地址_PHP教程
- alsa 驱动介绍及user层到hw层文件ioctl操作流程分析
- 用户-用户生命周期切分（下）
- vue 自定义日历 周模式 包括上一周 下一周 返回今日
- JS 唤起QQ对话框
- 笔记本电脑 F1 至 F12 是功能键，怎么转换成普通键