吉林大学学报(工学版) ›› 2010, Vol. 40 ›› Issue (05): 1313-1317.

• 论文 • 上一篇    下一篇

面向预定义过程的强化学习WS组合

付燕宁,张家臣,刘磊   

  1. 吉林大学 计算机科学与技术学院|长春 130012
  • 收稿日期:2009-06-05 出版日期:2010-09-01 发布日期:2010-09-01
  • 通讯作者: 付燕宁(1965-),男,副教授,博士.研究方向:面向服务的计算,本体及本体工程. E-mail:fuyn@jlu.edu.cn E-mail:fuyn@jlu.edu.cn
  • 作者简介:付燕宁(1965-),男,副教授,博士.研究方向:面向服务的计算,本体及本体工程. E-mail:fuyn@jlu.edu.cn
  • 基金资助:

    国家自然科学基金项目(60873044)

Process oriented WS composition via reinforcement learning

FU Yan-ning,ZHANG Jia-chen,LIU Lei   

  1. College of Computer Science and Technology,Jilin University,Changchun 130012,China
  • Received:2009-06-05 Online:2010-09-01 Published:2010-09-01

摘要:

将强化学习应用到基于预定义过程的WS组合,提出了QoS实际性能驱动的随机强化学习Web服务组合方法。利用该方法可以根据WS的实际性能逐渐为模型中的任务学习到优化的任务分配策略,根据任务分配策略所选择的WS的协同执行能最大程度地满足用户的服务请求。与同类方法相比,该方法根据服务的QoS实际性能将WS以往性能数据的利用与持续不断地对新的优化组合的探索融合到一起,逐渐学习到与过程模型相对应的优化服务组合。通过对熵取值范围的讨论,说明了对以往策略的利用与持续不断探索之间的关系。

关键词: 计算机应用, 组合服务, 预定义过程, 强化学习, 服务选择, 合成器

Abstract:

A randomized reinforcement learning approach for Web Service (WS) composition is proposed to determine the optimal WS to execute the task in a predefined process model. This approach can learn the optimal task allocation policy corresponding to the task in a given model based on actual performance of WS. It can also identify the optimal WS corresponding to the task in a given model based on task allocation policy. By this approach, the coordinated execution can continually satisfies user's service request to the optimal levels. Compared with other similar methods, the approach integrates the exploitation of acquired data about the past performance of individual services with the optimal, undirected, continual exploration of new composition according to QoS actual performance so as to learn the optimal WS composition corresponding to the process method. The relation between exploitation and exploration is accounted for discussing the range of the entropy.

Key words: computer application, composite service, predefined process, reinforcement learning, service choice, composer

中图分类号: 

  • TP393.09
[1] 刘富,宗宇轩,康冰,张益萌,林彩霞,赵宏伟. 基于优化纹理特征的手背静脉识别系统[J]. 吉林大学学报(工学版), 2018, 48(6): 1844-1850.
[2] 王利民,刘洋,孙铭会,李美慧. 基于Markov blanket的无约束型K阶贝叶斯集成分类模型[J]. 吉林大学学报(工学版), 2018, 48(6): 1851-1858.
[3] 金顺福,王宝帅,郝闪闪,贾晓光,霍占强. 基于备用虚拟机同步休眠的云数据中心节能策略及性能[J]. 吉林大学学报(工学版), 2018, 48(6): 1859-1866.
[4] 赵东,孙明玉,朱金龙,于繁华,刘光洁,陈慧灵. 结合粒子群和单纯形的改进飞蛾优化算法[J]. 吉林大学学报(工学版), 2018, 48(6): 1867-1872.
[5] 刘恩泽,吴文福. 基于机器视觉的农作物表面多特征决策融合病变判断算法[J]. 吉林大学学报(工学版), 2018, 48(6): 1873-1878.
[6] 欧阳丹彤, 范琪. 子句级别语境感知的开放信息抽取方法[J]. 吉林大学学报(工学版), 2018, 48(5): 1563-1570.
[7] 刘富, 兰旭腾, 侯涛, 康冰, 刘云, 林彩霞. 基于优化k-mer频率的宏基因组聚类方法[J]. 吉林大学学报(工学版), 2018, 48(5): 1593-1599.
[8] 桂春, 黄旺星. 基于改进的标签传播算法的网络聚类方法[J]. 吉林大学学报(工学版), 2018, 48(5): 1600-1605.
[9] 刘元宁, 刘帅, 朱晓冬, 陈一浩, 郑少阁, 沈椿壮. 基于高斯拉普拉斯算子与自适应优化伽柏滤波的虹膜识别[J]. 吉林大学学报(工学版), 2018, 48(5): 1606-1613.
[10] 车翔玖, 王利, 郭晓新. 基于多尺度特征融合的边界检测算法[J]. 吉林大学学报(工学版), 2018, 48(5): 1621-1628.
[11] 赵宏伟, 刘宇琦, 董立岩, 王玉, 刘陪. 智能交通混合动态路径优化算法[J]. 吉林大学学报(工学版), 2018, 48(4): 1214-1223.
[12] 黄辉, 冯西安, 魏燕, 许驰, 陈慧灵. 基于增强核极限学习机的专业选择智能系统[J]. 吉林大学学报(工学版), 2018, 48(4): 1224-1230.
[13] 傅文博, 张杰, 陈永乐. 物联网环境下抵抗路由欺骗攻击的网络拓扑发现算法[J]. 吉林大学学报(工学版), 2018, 48(4): 1231-1236.
[14] 曹洁, 苏哲, 李晓旭. 基于Corr-LDA模型的图像标注方法[J]. 吉林大学学报(工学版), 2018, 48(4): 1237-1243.
[15] 侯永宏, 王利伟, 邢家明. 基于HTTP的动态自适应流媒体传输算法[J]. 吉林大学学报(工学版), 2018, 48(4): 1244-1253.
Viewed
Full text


Abstract

Cited

  Shared   
  Discussed   
No Suggested Reading articles found!