基于组合模型的网络流量预测 兰州大学-张洋.

Slides:



Advertisements
Similar presentations
学院 : 环境与土木建筑学院 专业 : 旅游管理. PPT 模板下载: 行业 PPT 模板: 节日 PPT 模板: PPT 素材下载: PPT.
Advertisements

PPT 模板下载: 行业 PPT 模板: 节日 PPT 模板: PPT 素材下载: PPT 背景图片:
高温天气 防止中暑 六月 专题讲 座. 中暑出 现 体温升高并昏迷 时 死亡率高达 60%~70% 2015 年七月福建福州 , 气温居高不下一名建筑工人因 为长时 间 在烈日下干活 , 不幸中暑死亡 。 2015 年 7 月 武 汉 迎来高温酷暑天气 , 14 人中暑死亡 。 2015.
PPT 模板下载: 行业 PPT 模板: 节日 PPT 模板: PPT 素材下载: PPT 背景图片:
学位申请人:胡生娜 专业:会计学 研究方向:审计理论与方法 指导老师:王琳 教授 莲花味精审计 PPT 模板下载: 行业 PPT 模板: 节日 PPT 模板: PPT 素材下载:
胸 痹 — 寒湿痹阻 演讲:白雪 讲稿:段钰 贾秋瑾 资料:柴红 PPT :张翎 李萌 PPT 模板下载: 行业 PPT 模板: 节日 PPT 模板: PPT 素材下载:
小豬變形記.
甘肃电保姆电力工程服务有限公司 用电有问题 快找电保姆 董春雷
坚持是我不变的信念 爱让我前行 刘梓键年度工作总结.
“规划进校园”系列志愿活动 北京市城市规划设计研究院 交通所
蚂蚁小队 - 倾 情 出 品 –.
为什么会有蛀牙 PPT背景图片: PPT图表下载:
我 長 大 以 後.
快乐儿童节 Happy Children`s Day
播种阅读 收获明天 ——临沂市图书馆阅读推广活动案例 点击添加文本 点击添加文本 点击添加文本 点击添加文本.
生活中的百分数 荻港中心小学 章春莲.
安全生产法 PPT背景图片: PPT图表下载:
巧补妙写展才情 说 考点 2016年高考补写题专题复习 说考情 说课课件 湖北省黄梅一中 说学情 邓美玲 说复习方案.
华宸未来·上海意邦专项资产管理计划.
2014年第四季度中心组学习 湖南新华印刷集团有限责任公司
双流县教师资格定期注册 操 作 培 训 双流县人才中心教育分中心 联系电话: 双流县教师资格注册群号 :
资料下载: PPT课件下载:
资料下载: PPT课件下载:
2015 国培 寿县体育班 班级简报 第6期.
办公软件的应用 吉林省小额再贷款股份有限公司 硬件管理 曹宇星.
岳阳楼记 范仲淹.
有限元在口腔医学中的应用 李薇
论文绪论 研究背景 研究方法 研究结果 问题讨论 论文总结 毕业答辩PPT模板 答辩人: XXX 指导老师: XX教授.
如何学好历史与社会·思想品德 南海实验初中 邵永福
有理数减法 第一PPT模板网-
媒体融合 温都全媒体发展思路与营销策略 温州都市报 郭乐天
儿童幻灯片模板 ppt宝藏_www.pptbz.com_提供下载
TWO different CONCEPTS
哈利波特的魔法书PPT模板 最新原创PPT模板网-
古典中国风幻灯片模板.
古典中国风幻灯片 PPT背景图片: PPT图表下载:
中医药与健康 9.上工治未病 遂昌育才小学 蓝建云.
大陸勞動合同法實務及勞動爭議處理 2015年03月26日 主講人:洪紹書律師 PINHOU
范文下载: 试卷下载: Word教程: Excel教程: 优秀PPT下载: PPT教程: 节日PPT模板: PPT素材下载:
欧冠足球幻灯片模板.
端午节PPT模板.
104學年度 三峽國小教師專業貢獻平台 社群運作成果報告
范文下载: 试卷下载: 教案下载: Word教程: Excel教程: 优秀PPT下载: PPT教程: 节日PPT模板: PPT素材下载:
名字: Shane Steven Filan 生日: 月5日 星座: 巨蟹座 身高: 175cm 爱好: 音乐 职业: 音乐人
Life is beautiful.
写书法的六大好处 制作人:赵文宣 班 级:七(1) 指导老师:胡长青.
资料下载: PPT课件下载: 范文下载: 试卷下载: Word教程:
期权价格的理解.
企事业述职报告PPT.
Word联盟幻灯片 ppt.wordlm.com.
Members:莫晓轶 吴婉婷 郑夏倩 罗娇飞 金建敏
PowerPoint Template Click to edit Master subtitle style
开往秋天的大巴 PPT背景图片: PPT图表下载:
CONTENTS TEXT 节日PPT模板: PPT素材下载:
范文下载: 试卷下载: Word教程: Excel教程: 优秀PPT下载: PPT教程: 节日PPT模板: PPT素材下载:
IT网络科技PPT模板 PPT宝藏模板网,
2015年第一季度中心组学习 湖南新华印刷集团有限责任公司
1. TITLE LIST 2. TITLE LIST 3. TITLE LIST 4. TITLE LIST 5. TITLE LIST
薪酬水平策略 领先 控制 混合 跟随 成本控制型薪酬策略 市场领先型薪酬策略 市场跟随型薪酬策略 混合型薪酬策略
万圣节快乐PPT模板 Happy Halloween.
五四运动和中国共产党的成立.
范文下载: 试卷下载: 教案下载: Word教程: Excel教程: 优秀PPT下载: PPT教程: 节日PPT模板: PPT素材下载:
这里放置一段备注文字,作为对标题的注释,
适用于年终总结 / 汇报 / 提案及相关类别演示
A Let’s learn&Do a survey
点击此处添加标题 PPT背景图片: PPT图表下载:
国庆节/建党节PPT模板 节日PPT模板: PPT素材下载:
“中方课程质量标准——评价标准”. “中方课程质量标准——评价标准” 壹 贰 叁 高中历史 经济危机 不同身份、采访 对历史事件存疑 资料下载: PPT课件下载: 范文下载:
柠檬片幻灯片模板 最新原创PPT模板素材网—
范文下载: 试卷下载: Word教程: Excel教程: 优秀PPT下载: PPT教程: 节日PPT模板: PPT素材下载:
Presentation transcript:

基于组合模型的网络流量预测 兰州大学-张洋

CONTENTS 研究背景 1 实验结果及分析 4 研究方法 2 结论与建议 5 模型设计 3 兰州大学 RESEARCH BACKGROUNDS 实验结果及分析 4 experiment results and analysis 研究方法 2 RESEARCH FR METHODS 结论与建议 5 模型设计 CONCLUSION AND SUGGESTION 3 model design

1 研究背景 RESEARCH BACKGROUNDS 兰州大学 资料下载:www.1ppt.com/ziliao/ PPT课件下载:www.1ppt.com/kejian/ 范文下载:www.1ppt.com/fanwen/ 试卷下载:www.1ppt.com/shiti/ Word教程: www.1ppt.com/word/ Excel教程:www.1ppt.com/excel/ 优秀PPT下载:www.1ppt.com/xiazai/ PPT教程: www.1ppt.com/powerpoint/ 节日PPT模板:www.1ppt.com/jieri/ PPT素材下载:www.1ppt.com/sucai/ PPT背景图片:www.1ppt.com/beijing/ PPT图表下载:www.1ppt.com/tubiao/ PPT模板下载:www.1ppt.com/moban/ 行业PPT模板:www.1ppt.com/hangye/ 教案下载:www.1ppt.com/jiaoan/ PPT论坛:www.1ppt.cn 1 研究背景 RESEARCH BACKGROUNDS

1 Internet的普及率越来越广,网民数量呈爆炸式的增长,这对计算机网络的安全及管理提出巨大挑战 研究背景 兰州大学 RESEARCH BACKGROUNDS Internet的普及率越来越广,网民数量呈爆炸式的增长,这对计算机网络的安全及管理提出巨大挑战 网络流量分析是对网络进行管理最为广泛和重要的手段之一 有效的网络流量预测可以对网络管理提供依据 2014年底,全球互联网用户总数到达29亿人,预计2017占全球人口总数50%。利用网络流量分析建立有效的拥塞机制,找出异常的数据包,避免网络阻塞已经成为网络管理必不可少的工作。而有效的网络流量预测可以对网络的异常或者攻击行为提供管理依据,对加强网络安全,带宽分配机制以及拥塞服务、制定网络计划、负载均衡都具有重要的意义。

通过分析时间序列历史数据发掘研究事物变化的规律性 1 研究背景 兰州大学 RESEARCH BACKGROUNDS 研究现状 网络具有尺度特性,Poisson不再合适。 随机性、突发性等非线性特点。 Poisson模型 线性模型 非线性模型 组合 模型 流量数据服从指数分布 网络流量数据拥有组合特性和复杂性 … ARMA BP RBF SVM 网络流量预测主要是对采集的连续网络数据通过建立某种数学模型来预测未来一段时间的网络流量。实际上网络流量往往是多特性的,而且是非平稳性的,但是上面介绍的模型大都是根据平稳的流量序列进行建模,所以用线性方法来预测非平稳特性的网络流量存在一定缺陷,导致它的预测精度也不高。因此,很多非线性的模型如人工神经网络被用于网络流量的预测。 通过分析时间序列历史数据发掘研究事物变化的规律性

兰州大学 2 研究方法 RESEARCH METHODS

2 如果时间序列yt满足: 则称时间序列为yt服从(p,q)阶自回归滑动平均混合模型。 或者记为φ(B)yt = θ(B)εt 研究方法 兰州大学 RESEARCH METHODS ARMA模型 由自回归模型与滑动平均模型为基础“混合”构成。 如果时间序列yt满足: 则称时间序列为yt服从(p,q)阶自回归滑动平均混合模型。 或者记为φ(B)yt = θ(B)εt 特殊情况:q=0,模型即为AR(p),p=0,模型即为MA(q)。 ARMA模型是建立在马尔科夫随机过程基础上的。它既吸取了回归分析的优点,又发扬了移动平均的长处。它是根据数据序列的自相关函数和偏相关函数建立起线性数据间的定量模型,反映了数据现在活动和过去活动的本质联系。另外,由于ARMA模型对时间序列的噪声进行了分析处理,只剩下与历史无关的白噪声,所以它成为线性模型的最优预测方式之一。

2 研究方法 极限学习机 第一步:确定隐含层神经元个数,随机设定输入层与隐含层间的连接权值w和隐含层神经元的阈值b; 兰州大学 RESEARCH METHODS 极限学习机 是一种特殊类型的单隐层前馈神经网络,仅有一个隐结点层。 第一步:确定隐含层神经元个数,随机设定输入层与隐含层间的连接权值w和隐含层神经元的阈值b; 第二步:选择一个可以无限可微的函数作为隐含层神经元的激活函数,进而计算隐含层输出矩阵H; 第三步:计算输出层权值 传统的神经网络学习算法(如BP算法)需要人为设置大量的网络训练参数,并且很容易产生局部最优解。极限学习机只需要设置网络的隐层节点个数,在算法执行过程中不需要调整网络的输入权值以及隐元的偏置,并且产生唯一的最优解,因此具有学习速度快且泛化性能好的优点。但是传统的基于梯度的神经网络有参数太多难以确定,计算时间长、容易陷入局部最小化以及过度拟合等缺陷。 极限学习机的结构原理图

2 一种基于信号的时间、尺度的分析方法 它具有在时间和频率两个域中提取信号局部特征的能力,非常适合对非平稳的序列进行特征提取和分析 研究方法 兰州大学 RESEARCH METHODS 小波分解 一种基于信号的时间、尺度的分析方法 它具有在时间和频率两个域中提取信号局部特征的能力,非常适合对非平稳的序列进行特征提取和分析 连续小波变换 离散小波变换

Mallet算法 2 研究方法 小波分解 RESEARCH METHODS Mallat 分解算法示意图 兰州大学 Mallat和Meyer 在信号的多分辨分析基础上,提出了计算离散正交小波变换的快速算法,即Mallet算法[23]。经过该算法原始信号被分解成散细节序列和近似序列两部分,分别代表信号的不同特征。该算法的优点在于设计简单,运算快捷。 Mallat 分解算法示意图

兰州大学 3 模型设计 model design

+ 3 分解层数选择 小波基选择 模型设计 小波分解及参数选择 Daubechies(dbN)小波 Symlet(symN)小波 兰州大学 model design 小波分解及参数选择 小波基选择 + 分解层数选择 Daubechies(dbN)小波 Symlet(symN)小波 Coiflet(coifN)小波 Biorthogonal(biorNr.Nd)小波 Daubechies(dbN)小波: Daubechies小波基函数有比较优良的正则性,也就是说它可以充作由稀疏基引入的光滑误差却不被发觉,使得原始的信号在加入光滑误差之后变得比较光滑。 Symlet(symN)小波:同Daubechies小波相比,symN在连续性、滤波器长度和支集长度方面是一致的,但是在对称性方面却更有优势。 Coiflet(coifN)小波: Coiflet小波也是由美国杜克大学的Ingrid Daubechies教授提出并设计的,一般简写为coifN,N取值1到5。 Biorthogonal(biorNr.Nd)小波: Biorthogonal小波是为了解决信号的对称性和信号重构的不相容性,也成为双正交小波,是使用对称的两个小波分别对信号进行分解和重构。 过多的层数反而影响信号特征的提取,所以分解层数一般根据具体的实验结果来确定。

3 1 4 2 5 3 6 模型设计 ARMA建模过程 model design 平稳性判定 模型识别 自相关系数 模型检验 偏自相关系数 兰州大学 model design ARMA建模过程 平稳性判定 1 4 模型识别 2 自相关系数 5 模型检验 偏自相关系数 3 6 模型预测

小波分解 平稳性判断 ARMA建模 ELM建模 重构 3 基于小波变换的组合模型设计与实现 模型设计 方法二 model design 兰州大学 model design 小波分解 平稳性判断 ARMA建模 ELM建模 重构 基于小波变换的组合模型设计与实现 方法二

experiment results and analysis 兰州大学 4 实验结果及分析 experiment results and analysis

experimental results and analysis 4 实验结果及分析 兰州大学 experimental results and analysis 性能评价指标 为了检验实验的预测精度,我们使用了三种不同的统计指标:平均绝对误差百分比(Mean Absolute Percentage Error),平均绝对误差(Mean Absolute Error)和均方根误差(Root Mean Square Error)。

experimental results and analysis 4 实验结果及分析 兰州大学 experimental results and analysis 实验数据 一共七天的每天08:00到24:00之间的192条数据进行实验,将前六天的数据作为训练数据,最后一天的数据作为测试数据.

experimental results and analysis 4 实验结果及分析 兰州大学 experimental results and analysis 随着分解层数的增加,细节部分中含有的高频成分越来越少,当分解到下一层时,就会有更高频的系数被滤除,则剩下的系数就更加明显的表现出网络流量的变化趋势,到分解到第六层的时候,曲线已经比较光滑了 UK数据经过小波变换之后得到的细节部分dx(x=1-6)和趋势部分ax(x=1-6)

experimental results and analysis 4 实验结果及分析 兰州大学 experimental results and analysis 由于ARMA(p,q)模型的平稳性由AR(p)模型的平稳性决定,因此通过自相关分析确定AR(p)模型的平稳性和p的值,然后通过偏自相关分析确定MA(q)模型的阶数q。如图6所示,序列d1的1~2阶都显著不为零,从第3阶开始显著地趋近于零,所以AR(p)模型的自相关p步拖尾,且p值为2。图7(b),d1偏自相关函数在1~11阶比较显著不为零,12阶显著等于零,所以MA(q)模型的偏自相关11步截尾。根据ARMA对时间序列平稳性的判断标准,d1序列为ARMA(2,11)平稳序列。确定了d1序列使用的模型之后,对模型ARMA(2,11)进行参数估计和显著性检验,并利用赤池消息和施瓦茨准则(AIC和SC)选择最优的模型,并对模型的残差进行白噪声检查。同理,对其他序列进行分析,确定d1和d2为平稳序列,其余序列为非平稳序列。 UK数据经过小波变换之后得到的子序列的自相关和偏自相关函数

experimental results and analysis 4 实验结果及分析 兰州大学 experimental results and analysis 教育网数据 网通数据 UK MAPE MAE RMSE ARMA 0.0707 14.5217 18.2718 0.2323 7.4936 9.1710 0.1110 465.8087 546.8644 ELM 0.0734 14.5670 19.8862 0.1716 4.6137 5.7803 0.1496 457.1843 580.6544 SVM 0.1428 29.4627 34.4769 0.2151 5.2584 6.4781 0.1733 546.4508 681.2479 W-ARMA-ELM 0.0457 9.4825 11.8322 0.1086 3.8807 5.6707 0.0685 239.8551 319.5077 不同预测模型分别对教育网数据和网通数据的预测汇总

兰州大学 5 结论 CONCLUSION

结论 5 结论 Conclusions CONCLUSION (1)小波变换 兰州大学 CONCLUSION 结论 Conclusions (1)小波变换 利用小波变换的比例收缩特性,将具有长程相关或者自相似等本质特性的网络流量数据进行分解和重构,变成多条短相关的子序列,然后使用自相关和偏自相关相结合的方式确定序列的平稳性。 (2)组合:ARMA+ELM 由于线性短相关模型ARMA对平稳序列有非常大预测优势,非线性ELM方法对非平稳数据预测效果更好

兰州大学 谢谢! THANKS