时间序列分析——相关分析(时间序列相关性)
cac55 2024-09-21 13:28 28 浏览 0 评论
本文共计约3300字,建议阅读时间3分钟
目录
- 时间序列分析——引言
- 时间序列
- 时间序列发展历程
- 时间序列分析方法
- 应用及局限
- 时间序列分析——相关分析
- 描述分析
- 自相关
- 互相关和互相关系数
- 小结
- 时间序列分析——回归分析
- 回归分析方法
- 线性回归
- 非线性回归
- 提升数据鲁棒性
- 小结
- 时间序列分析——自回归
- 移动平均
- 指数平均
- 自回归分析
时间序列分析——相关分析
数据准备
在数据分析过程中,不同变量的关联往往是获得线索的第一步,比如说,通过月亮变化与潮汐周期的关系,即使没有万有引力的理论,也可以掌握潮水规律。其他的比如传统的二十四节气,也是总结出来的时间变化与气候的关联,即使没有天气预报,也能辅助农业生活。
相关分析是一种广泛应用于数据分析中的方法,其主要目的是衡量不同变量之间的相似程度。
对于时间序列,相关分析可以简单划分为自相关和互相关,分别用于分析数据自身的周期性和数据之间的关联。
首先我们拿到数据,会对其进行描述分析,最为直观的就是将其以图形的方式展示出来,这时我们就大致对数据有了一些了解,然后可以决定下一步的分析方向,产生一些定量的分析。在描述分析完成之后,我们需要一些定量的特征来表达数据的关联或者趋势,这时就会用到相关分析和回归分析的一些特征量。
接下来的文章中,我们使用一段随机生成的数据(包含网站访问量和广告点击量),开始时间序列分析的步骤介绍。
描述分析
时间序列随时间变化图
上面这一组数据,看似有些杂乱,但将其转换成图形之后,就变得比较明确了,访问量和广告点击量数据呈现高度相关的关系,并且波动上涨。
散点图
为了更清楚的展现访问量和点击量之间的关联,还可以使用散点图来直观的描述。散点图可以将不同的特征集中展现出来,同时排除其他变量的影响。比如说从上面的图中可以看出,网站访问量存在日常波动,但广告点击量和网站访问量之间的关联似乎不受到,这些波动的影响。我们可以尝试画出访问量和点击量之间的散点图,可以比较清晰的看出他们基本在一条直线上,呈现出高度正相关的关系。
既然相关性这么高,我们是不是能开发一个更平稳的特征量,来描述访问量和点击量之间的关系呢,于是尝试定义渗透率=广告点击量/网站访问量,来描述这两者之间的关联,可以看到,渗透率这一指标虽然也有随时间的波动,相对来说更平稳一点,可以看做是一个比较好的指标。
从图形中获取结论
通过画图,我们对上面的数据有了一些直观的认识,得到了一些有益的结论
- 网站访问量波动上涨
- 网站访问量和广告点击量呈现高度相关特性
- 渗透率相对平稳,单核点击量也有一定的相关性
那么接下来的内容里,我们尝试把上述结论形成一个定量的描述。首先我们利用自相关分析,寻找波动的周期是多少。然后再使用互相关,分析网站访问量,广告点击量和渗透率这几个变量之间的相关程度。
自相关分析
上面我们从图形中能看出数据是在波动的,那数据是否具有周期性呢,对于这种少量数据,我们可以通过数震荡峰值的间距的办法来得到数据的周期性,下图可以看出,峰值的位置在5,7,11,15,19,其最有可能的间隔是4。那么接下来通过自相关的方法,对这一观察结论进行定量描述。
通过自相关,可以分析数据的周期性,自相关系数的计算公式如下:
一个时间序列的自相关是延迟k的函数,从公式可以看出,当x_{t-k}与x_t越接近时,R越大,当k=0时,R=1,自相关最大。
在使用自相关进行分析之前,我们先看一看一般信号的自相关是什么样的。
首先第一个是生成的随机信号,随机信号按照预期,不同时刻的信号之间并不存在明细关系,因此它的自相关只有在延迟为0时是1,其他时候下降到较小值。
下图中展示了随机信号和它的自相关,从结果上来看基本上和想象中差不多,在延迟为0时是1,其他时候基本都在0.2之下。
另外一种典型的适用于自相关分析的信号是周期信号,信号的自相关本身就是寻找信号的周期性,因为假设信号延迟t之后跟自己相等,那么自相关也会是1。下图展示了一个周期信号与自相关的值,可以看出对于该周期信号,除了在延迟为0是自相关为1,在延迟为6和12时,也取得了较大的自相关值。
当然,在实际的数据场景中,信号既不是纯粹随机的也不是纯粹周期的,往往是不同因素叠加而成,比如周期性加随机性,其互相关也可能呈现出叠加的形式。比如周期的峰淹没在随机性之中等等。
接下来我们还是以上述网站访问量数据为例,来看从自相关能获取什么信息。计算上述网站访问量的自相关可得到如下结果,当延迟为4的时候,确实是互相关较大的一个位置,但是互相关的值并不大,说明信号的周期性不明显,可能只是一些随机波动。
因此可以初步得出结论,对于只有20天数据的网站访问量数据,可能存在周期为4天的周期性,但是并不太显著,为了得到更明确的结论,我们需要更多的数据,来对抗数据中的随机性因素,避免周期性淹没在随机性之中。
互相关和互相关系数
一般来说,两个信号的互相关定义如下
但实际使用过程中,这个公式很不好使,因为x,y可能是任意数值,随随便便就很大或者很小,没有横向对比的意义。因此归一化就很重要,归一化之后的信号互相关称为互相关系数
这一公式可以和前面自相关完全对应起来,将公式中的y替换成x_t就变成了自相关公式。
那么互相关作为一个可以归一化到0~1之间的数,一般是多少才算高或者低呢。
我们可以首先看一下随机数的互相关系数是多少,尝试了若干次随机生成20维数据,计算出的互相关系数在0~0.4之间,当随机数长度增加到200维之后,计算出的互相关系数就基本在0.1以下了。因此,对较少的数据,互相关系数有可能因为波动而偏高,但如果数据较多,随机波动则不容易影响互相关系数的结果。
在前面的描述分析中,我们已经发现,网站访问量和广告点击量存在较为明显的相关关系,可以计算出它们的相关系数为0.9830,已经非常高了。另外,我们还尝试使用渗透率的概念,来缓解数据的随机波动,试图提取一个较为稳定的特征量,可以看出渗透率大约是为0.04的一个常数,那么渗透率和网站访问量之间是否存在相关关系呢?通过前面的图形可以简单看出渗透率与访问量之间的相关关系变弱了,通过计算发现二者的相关系数依然高达0.9559。那这是否能够说明
广告点击量 = 0.04*网站访问量
这个结论不成立呢,其实不是的,因为残差已经比较小了,虽然残差依然与变量之间有一定的相关性,但我们依然可以将其当成噪声来处理。
这里我们得到一个公式:广告点击量 = 0.04*网站访问量,也就是一个非常直觉的线性回归模型,具体关于这个模型及其展开的一些分析方法,将在下一篇文章中给出。
小结
本文介绍了相关分析的介绍以及实例,其中自相关主要揭示信号自身的周期性,互相关主要用于判断信号之间的关联,当信号之间有时间差的话,互相关也可以用来计算时间差。
当然这些信号的特征可以帮我们对时间序列及不同序列之间的关系提供分析的基础,有时相关关系已经可以提供足够的结论。但如果需要更为深入的揭示信号的本质内涵,则可能用到后续更为丰富的回归分析或者建模。
- END -
当然如果大家感兴趣的话可以继续深入学习,有任何问题或者还有啥想了解的,欢迎私信我。
往期推荐
- 如何理解商业模式(阅读量900+)
- 商业模式之价值主张 (阅读量300+)
- ?商业模式之客户细分? (阅读量700+)
- Excel数据分析——数据输入(阅读量900+)
- Excel数据分析——数据处理(阅读量4600+)
- Excel数据分析——数据透视表 (阅读量2000+)
- Excel数据分析——函数与公式(上) (阅读量1200+)
- Excel数据分析——函数与公式(中) (阅读量900+)
- Excel数据分析——函数与公式(下) (阅读量800+)
- Excel数据分析——快捷键 (阅读量600+)
- Excel数据分析——建模分析(一) (阅读量4600+)
- Excel数据分析——建模分析(二) (阅读量2400+)
- Excel数据分析——数据可视化(一) (阅读量2000+)
- Excel数据分析——数据可视化(二) (阅读量700+)
- Excel数据分析——数据可视化(三) (阅读量1500+)
- Excel数据分析——数据可视化(四) (阅读量1000+)
- Excel数据分析——如何设计专业数据表格(上)【文末送模板】 (阅读量900+)
- Excel数据分析——如何设计专业数据表格(下)【文末送模板】 (阅读量600+)
相关推荐
- 服务器用的CPU和个人电脑用的CPU有什么区别?一篇文章告诉你!
-
服务器cpu和普通cpu的区别你的电脑CPU是‘短跑健将’,服务器CPU却是‘铁人三项选手’——它不追求瞬间爆发力,而要7×24小时扛住千军万马的数据洪流!想知道为什么企业机房敢收天价服务费?答案全藏...
- “吃鸡”新版本第1天,玩家进入游戏点击“立即更新”,后悔了!
-
欢迎诸位小伙伴们来到天哥开讲的《和平精英》“精英小课堂”~每逢两三个月,这款游戏就会迎来一次大版本迭代更新,很多朋友会在第一时间更新版本,前往全新的主题模式里一探究竟。不过也有一些老玩家并不会立刻更新...
- 中关村在线·aigo存储杯《无畏契约》全国高校争霸赛招募启事
-
以青春之名,燃电竞之火1赛事背景与宗旨在金秋送爽的9月,芊芊学子们即将回归校园生活。为了给精彩的校园生活锦上添花,由中关村在线与aigo存储联合主办的《无畏契约》全国高校争霸赛正式启幕,旨在为全国高...
- 【生肖狗】9.7-9.10提醒:人算不如天算,转变即是转机
-
九月上旬的风,带着秋意的清爽,也带着几分不可捉摸的变数。对于生肖狗的朋友们来说,9月7日到9月10日这四天,格外需要留意“计划与变化”的碰撞——你们向来习惯提前规划,做事稳妥周全...
- 转转客服IM系统的WebSocket集群架构设计和部署方案
-
本文由转转技术李帅分享,原题“转转客服IM的WebSocket集群部署方案”,下文有修订和重新排版。1、引言转转作为国内头部的二手闲置交易平台,拥有上亿的用户。用户在使用转转app遇到问题时,一般可以...
- 上线3天Steam好评率86%,《时间旅者:重生曙光》开启生存恐怖新篇章
-
这里究竟发生了什么?末日降临,真正的故事悄然启幕。目前,生存恐怖类游戏《时间旅者:重生曙光(Cronos:TheNewDawn)》已在PC(Steam、EpicGamesStore)、P...
- 什么神仙洗衣机让我一天有28小时?拆开松下「大四洗」藏了啥秘密
-
说起家庭洗衣的烦恼,想必很多人都有过类似的经历:贴身内衣要单独洗,宝宝的口水巾得小心呵护,宠物玩具怕藏污纳垢,床单被套又体积庞大,把这些东西混在一起洗担心越洗越脏,分开洗又得反复操作,洗完烘、烘完再洗...
- 爆料人挖出GTA6注册的奇葩域名 延续经典讽刺风格
-
等待《侠盗猎车手6》的日子跨越了数个春秋,在游戏圈期盼着这部可能成为史上最重磅游戏的过程中,每过一段时间就会有些许消息浮出水面。最新线索来自数据挖掘者Tez2在GTA论坛的发现,他可能偶然发现了关于...
- 跟着故事去旅行——读《驼峰间:旅行、探险与征服》
-
作者:郭冰茹《驼峰间》记录了旅行家伊本·白图泰有生之年流传的一则寓言,说一对父子被关进了监狱,有一天儿子问父亲他们每天吃的都是些什么肉,父亲说有牛、羊和骆驼,并且详细地描述了每种动物的特点。但不管父亲...
- 前端工程师需要熟悉的Linux服务器(SSH 终端操作)指令
-
在Linux服务器管理中,SSH(SecureShell)是远程操作的核心工具。以下是SSH终端操作的常用命令和技巧,涵盖连接、文件操作、系统管理等场景:一、SSH连接服务器1.基本连接...
- 跳票6年后,「丝之歌」首发把Steam服务器干爆了 | 玩点好的
-
文丨果脯樱花隧道昨天晚上22点,「鸽」了6年的《空洞骑士:丝之歌》终于上线,算是了却不少玩家的执念。毕竟,这款游戏实在让人等了太多太多年,而且曾有过多次定档后跳票的「案底」,不知道把多少人都整出了P...
- 对标魔兽失败!腾讯版“魔兽”运营一年多后,宣布国际服凉凉
-
大家好,这里是正惊游戏,我是正惊小弟。有很多游戏都想干掉《魔兽世界》,但是大部分魔兽杀手都知道自己不是魔兽的对手,不过是想蹭一下人气而已。腾讯也有一款曾经想对标魔兽的大作,可是上线才一年半国际服就宣布...
- 408 Request Timeout:服务器等待客户端发送请求的时间过长。
-
408RequestTimeout是HTTP状态码之一,表示客户端在发送请求时,服务器等待的时间过长,最终放弃了处理该请求。此问题通常与网络延迟、客户端配置、服务器设置或者应用程序的性能有关...
- 梦幻西游:9.9维护解读,全新时间服锁定129级
-
梦幻西游:9.9维护解读,全新时间服锁定129级9月9日维护解读。1、教师节活动开启,一共7天。挂机,答题,收笔墨纸砚,收海马,搞起来。或者是提前收点家具,教师节期间体力珍贵,家具会涨价。又或者是教师...
- 只是拆掉一面墙,空间就立马大变样,这种设计思路,值得学习
-
你有没有过这样的经历?刚买的房子户型图看起来方方正正,装修完却发现——玄关鞋柜只能塞在角落,进门就撞墙;餐厅正好在过道中间,吃饭像走流程;明明有四个房间,却有一个空着没用,像块食之无味的鸡肋;客餐厅之...
你 发表评论:
欢迎- 一周热门
- 最近发表
-
- 服务器用的CPU和个人电脑用的CPU有什么区别?一篇文章告诉你!
- “吃鸡”新版本第1天,玩家进入游戏点击“立即更新”,后悔了!
- 中关村在线·aigo存储杯《无畏契约》全国高校争霸赛招募启事
- 【生肖狗】9.7-9.10提醒:人算不如天算,转变即是转机
- 转转客服IM系统的WebSocket集群架构设计和部署方案
- 上线3天Steam好评率86%,《时间旅者:重生曙光》开启生存恐怖新篇章
- 什么神仙洗衣机让我一天有28小时?拆开松下「大四洗」藏了啥秘密
- 爆料人挖出GTA6注册的奇葩域名 延续经典讽刺风格
- 跟着故事去旅行——读《驼峰间:旅行、探险与征服》
- 前端工程师需要熟悉的Linux服务器(SSH 终端操作)指令
- 标签列表
-
- 如何绘制折线图 (52)
- javaabstract (48)
- 新浪微博头像 (53)
- grub4dos (66)
- s扫描器 (51)
- httpfile dll (48)
- ps实例教程 (55)
- taskmgr (51)
- s spline (61)
- vnc远程控制 (47)
- 数据丢失 (47)
- wbem (57)
- flac文件 (72)
- 网页制作基础教程 (53)
- 镜像文件刻录 (61)
- ug5 0软件免费下载 (78)
- debian下载 (53)
- ubuntu10 04 (60)
- web qq登录 (59)
- 笔记本变成无线路由 (52)
- flash player 11 4 (50)
- 右键菜单清理 (78)
- cuteftp 注册码 (57)
- ospf协议 (53)
- ms17 010 下载 (60)