Oozie 管理Hdoop作业(job)的工作流程调度管理系统
用几句话就可以概括什么是Oozie:
- Oozie是一个管理Hdoop作业(job)的工作流程调度管理系统。
- Oozie的工作流是一系列动作的直接周期图。
- Oozie协调作业就是通过时间(频率)和有效数据触发当前的Oozie工作流程
- Oozie是Yahoo针对Apache Hadoop开发的一个开源工作流引擎。
用于管理和协调运行在Hadoop平台上(包括:HDFS、Pig和
MapReduce)的Jobs。Oozie是专为雅虎的全球大规模复杂
工作流程和数据管道而设计。
- Oozie围绕着两个核心进行:工作流(Workflow)和
协调器(Coordinator),前者定义任务拓扑和执行逻辑,后
者负责工作流的依赖和触发。
更多内容,请参考下列资源:
- Apache官网:https://oozie.apache.org/
- Oozie开发指导:http://blog.cloudera.com/blog/category/oozie/
- OOzie中文实例介绍:http://www.infoq.com/cn/articles/oozieexample
本文由用户 jopen 自行上传分享,仅供网友学习交流。所有权归原作者,若您的权利被侵害,请联系管理员。
转载本站原创文章,请注明出处,并保留原始链接、图片水印。
本站是一个以用户分享为主的开源技术平台,欢迎各类分享!