e-chain-开源workflow工作流开源吗

WorkflowSim&工作流仿真软件介绍
WorkflowSim 大数据工作流仿真软件介绍
现在的大数据应用都非常复杂,并不仅仅能够通过一个或者几个MapReduce任务来描述。更加复杂的描述大数据应用的是工作流
(workflow)。
&(http://www.workflowsim.org/)是由南加州大学(University
of Southern California)的Pegasus
WMS组开发的一套开源工作流仿真软件。WorkflowSim可用于验证图算法(Graph
algorithm)、分布式研究(distributed
computing)、工作流调度算法(scheduling)、资源调度算法(resource
provisioning)等问题的研究。
其工作原理是在暨有的CloudSim仿真软件基础上,提供workflow层次的仿真。工作流可以用有向图来描述(Directed
Acyclic Graph)
DAG,图的任何一个节点都是一个由用户制定执行的任务(task),节点之间有通过数据输入输出形成的依赖关系(dependency)。工作流引擎会依据其依赖关系按顺序执行,同时执行也会调用用户所选择的调度算法,比如HEFT,MINMIN等等算法已经在WorkflowSim里边实现并且测试通过了。
用户也可以添加自己的调度算法。
在实际运行过程中,因为很多工作流非常大,甚至到达几千上万个任务,而通常我们只有几十个计算节点。这个时候就需要使用task
clustering这个技术来聚合相类似的任务从而形成任务群(clustered
job),有时候也通用称之为job。每个job包含了多个task,然后提交给运行环境的时候是整体提交的,这样可以节省很多延迟(submission
delay),等到了某一个计算节点的时候再打开任务群然后分别执行。
如何形成job就需要各种算法,有包括了balanced task clustering可以综合考虑依赖关系的,也有fault
tolerant clustering可以综合考虑规避failure的。这些也都已经在WorkflowSim里边实现。
其行为最为接近Pegasus工作流管理系统。
WorkflowSim是一套开源软件,所有源代码和介绍都可以在/WorkflowSim/找到,使用目前流行的Git做软件版本控制。
使用非常简单,下载完源代码之后,只需要在任何一个WorkflowSim example里边选择所需要的dax
文档,并且修改里边的daxPath变量,即可运行。
比如选择“WorkflowSim-1.0/examples/org/workflowsim/examples/WorkflowSimBasicExample1.java”这个例子,将里边的daxPath改成在你当前环境下的文件路径即可。比如如果你下载到了。
WorkflowSim在config/dax文件夹下面已经提供了很多DAX文件可供仿真。
这些工作流的介绍可以参考:http://pegasus.isi.edu/workflow_gallery/index.php
同时我们还提供WorkflowGenerator可以生成你所需要的任何工作流DAX文件
https://confluence.pegasus.isi.edu/display/pegasus/WorkflowGenerator
如果对WorkflowSim感兴趣并且想进一步开发功能,可建议(但不限于)研究以下方面
基于价格的调度算法,CloudSim本身已经实现了每个task的cost,但是WorkflowSim还没有合适的调度算法。
2. 动态资源调度算法。WorkflowSim目前还是静态的把计算节点建立好然后运行工作流。
3. 多数据中心支持。目前只测试了单数据中心支持。
数据日志支持,讲已有的工作流管理系统的log转换成为trace从而可以在WorkflowSim里边仿真。目前只测试过Pegasus。
可靠调度算法,在仿真Failure的情况下调度算法应该如何变得更鲁棒?目前failure的生成已经开发完成,但是相应的算法还没有。
6. 自适应算法或者分布式算法。目前仅有一个中心调度算法,分布式算法也可以在WorkflowSim上面实现。
7. 基于duplication的算法。在计算节点有余的时候,可以自动复制一部分任务到空闲的计算节点上。
已投稿到:
以上网友发言只代表其个人观点,不代表新浪网的观点或立场。01.国内开源workflow渐渐发展起来国内开源workflow渐渐发展起来了····
目前已经存在两个开源引擎:AglieFlow和Willow
AglieFlow是由兄弟主持的,
是属于huihoo的一个子项目,是由ZosaTapo兄弟主持的 Willow ...查看完整版&&&02.英特尔:希望国内的山寨能尽快发展起来上网本,这个继MID产品、UMPC产品之后而来的衍生产品,在08年里的出货量让所有的人大跌眼镜,火爆的销售几乎给进入窘境的笔记本市场开辟了一条新路,直接拉动英特尔Atom凌动处理器出货量为之上涨,英特尔中国大区...查看完整版&&&03.原创:国内开源PHP CMS程序评测在建VerySW的时候,我就一直在寻找开源的PHP CMS程序,没有办法谁叫咱们没有那么多钱呢。好了废话不多说,下面就开始;
1.织梦内容管理系统简称DedeCms
最新版本为DedeCms OX 4.x.x,...查看完整版&&&04.国内最大开源CMS终于发布这个程序实际还有一个细小的东西没完成,因为今天有事,暂时无法处理,故提前发了出来,不过这不会涉及数据库的改动,因此可以先使用,3.1的升级程序稍后才会提供。下载地址:/html/chanpinxi...查看完整版&&&05.国内号称开源程序是真的开源吗?他们真的是开源了吗?我今天不谈其他软件,只谈谈我所熟悉的几个php代码。
据我所知,开源软件应该遵守Open Source Initiative(OSI)批准的协议。而经过OSI组织通过批准的开源协议目前有58种。我们在常见的开源协...查看完整版&&&06.MySQL倒下 开源数据库发展或受重创-业内资讯MySQL被称为是“最受欢迎的开源数据库”,如今,它的命运却取决于Oracle与Sun并购案的结果。有消息说,正在调查该交易的欧盟委员会将在11月19日做出是否批准该交易的决定。2008年2月被Sun以10亿美元收购的MySQL,...查看完整版&&&07.红帽CEO:金融危机可加速开源发展Whitehurst在亚太地区巡回访问活动中发表了以上观点,他认为,经济危机将会让企业对技术架构应用进行合并压缩,从而减少开支.他表示,“由于经济形势的恶化,预计将来会看到企业减少在新应用方面的投资.”而且,他表示...查看完整版&&&08.红帽CEO:金融危机可加速开源发展北京时间10月18日消息,据国外媒体报道,开源厂商红帽首席执行官Jim Whitehurst在访问悉尼时表示,全球经济危机将推进开源软件的发展。Whitehurst在亚太地区巡回访问活动中发表了以上观点,他认为,经济危机...查看完整版&&&09.红帽呼吁美联邦法院限制专利促开源发展红帽公司公开向软件专利制度挑战,要求美国联邦法院,修改专利标准,以促进开源产业发展。 红帽表示,尽管专利制度的建立是为了促进创新,但是对于开源产业却并非如此。当开源运行最初兴起的时候,软件专利权勉强获得...查看完整版&&&10.红帽呼吁美联邦法院限制专利促开源发展4月9日消息,红帽公司公开向软件专利制度挑战,要求美国联邦法院,修改专利标准,以促进开源产业发展。 红帽表示,尽管专利制度的建立是为了促进创新,但是对于开源产业却并非如此。当开源运行最初兴起的时候,软件专...查看完整版&&&&今日推荐&&&幽默笑话百态军事探索娱乐女性健康旅游互联网·······&&01.国内开源workflow渐渐发展起来国内开源workflow渐渐发展起来了····
目前已经存在两个开源引擎:AglieFlow和Willow
AglieFlow是由兄弟主持的,
是属于huihoo的一个子项目,是由ZosaTapo兄弟主持的 Willow ...查看完整版&&&02.英特尔:希望国内的山寨能尽快发展起来  上网本,这个继MID产品、UMPC产品之后而来的衍生产品,在08年里的出货量让所有的人大跌眼镜,火爆的销售几乎给进入窘境的笔记本市场开辟了一条新路,直接拉动英特尔Atom凌动处理器出货量为之上涨,英特尔中国大区...查看完整版&&&03.原创:国内开源PHP CMS程序评测在建VerySW的时候,我就一直在寻找开源的PHP CMS程序,没有办法谁叫咱们没有那么多钱呢。好了废话不多说,下面就开始;
1.织梦内容管理系统简称DedeCms
最新版本为DedeCms OX 4.x.x,...查看完整版&&&04.国内最大开源CMS终于发布这个程序实际还有一个细小的东西没完成,因为今天有事,暂时无法处理,故提前发了出来,不过这不会涉及数据库的改动,因此可以先使用,3.1的升级程序稍后才会提供。下载地址:/html/chanpinxi...查看完整版&&&05.国内号称开源程序是真的开源吗?他们真的是开源了吗?我今天不谈其他软件,只谈谈我所熟悉的几个php代码。
据我所知,开源软件应该遵守Open Source Initiative(OSI)批准的协议。而经过OSI组织通过批准的开源协议目前有58种。我们在常见的开源协...查看完整版&&&06.MySQL倒下 开源数据库发展或受重创-业内资讯  MySQL被称为是“最受欢迎的开源数据库”,如今,它的命运却取决于Oracle与Sun并购案的结果。有消息说,正在调查该交易的欧盟委员会将在11月19日做出是否批准该交易的决定。2008年2月被Sun以10亿美元收购的MySQL,...查看完整版&&&07.红帽CEO:金融危机可加速开源发展  Whitehurst在亚太地区巡回访问活动中发表了以上观点,他认为,经济危机将会让企业对技术架构应用进行合并压缩,从而减少开支.他表示,“由于经济形势的恶化,预计将来会看到企业减少在新应用方面的投资.”而且,他表示...查看完整版&&&08.红帽CEO:金融危机可加速开源发展  北京时间10月18日消息,据国外媒体报道,开源厂商红帽首席执行官Jim Whitehurst在访问悉尼时表示,全球经济危机将推进开源软件的发展。  Whitehurst在亚太地区巡回访问活动中发表了以上观点,他认为,经济危机...查看完整版&&&09.红帽呼吁美联邦法院限制专利促开源发展红帽公司公开向软件专利制度挑战,要求美国联邦法院,修改专利标准,以促进开源产业发展。 红帽表示,尽管专利制度的建立是为了促进创新,但是对于开源产业却并非如此。当开源运行最初兴起的时候,软件专利权勉强获得...查看完整版&&&10.红帽呼吁美联邦法院限制专利促开源发展4月9日消息,红帽公司公开向软件专利制度挑战,要求美国联邦法院,修改专利标准,以促进开源产业发展。 红帽表示,尽管专利制度的建立是为了促进创新,但是对于开源产业却并非如此。当开源运行最初兴起的时候,软件专...查看完整版&&&&  免责声明:本文仅代表作者个人观点,与王朝网络无关。王朝网络登载此文出于传递更多信息之目的,并不意味着赞同其观点或证实其描述,其原创性以及文中陈述文字和内容未经本站证实,对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,请读者仅作参考,并请自行核实相关内容。&王朝美图& 11:32:44&&&&&&&转载本文&UBB代码&HTML代码复制到剪贴板...&更多内容··········&&&&频道精选&&网友关注··········&&热点推荐&01&&02&&03&&04&&05&&06&&07&&08&&09&&10&&&&王朝女性&&|&&|&&|&&|&&|&&|&&|&&|&&|&&|&&|&&|&王朝分栏&&|&&|&&|&&|&&|&&|&&|&&|&&|&&|&王朝编程&&|&&|&&|&&|&&|&&|&&|&&|&&|&&|&王朝导购&&|&&|&&|&&|&&|&&|&&|&&|&&|&&|&王朝其他&&|&&|&&|&&|&&|&&|&&&&2005-&&版权所有&君,已阅读到文档的结尾了呢~~
e-chain-workflow易擎工作流引擎产品介绍(开发、实施)ppt
扫扫二维码,随身浏览文档
手机或平板扫扫即可继续访问
e-chain-workflow易擎工作流引擎产品介绍(开发、实施)ppt
举报该文档为侵权文档。
举报该文档含有违规或不良信息。
反馈该文档无法正常浏览。
举报该文档为重复文档。
推荐理由:
将文档分享至:
分享完整地址
文档地址:
粘贴到BBS或博客
flash地址:
支持嵌入FLASH地址的网站使用
html代码:
&embed src='/DocinViewer-4.swf' width='100%' height='600' type=application/x-shockwave-flash ALLOWFULLSCREEN='true' ALLOWSCRIPTACCESS='always'&&/embed&
450px*300px480px*400px650px*490px
支持嵌入HTML代码的网站使用
您的内容已经提交成功
您所提交的内容需要审核后才能发布,请您等待!
3秒自动关闭窗口

我要回帖

更多关于 开源workflow工作流 的文章

 

随机推荐