oozie简介

匿名 (未验证) 提交于 2019-12-03 00:18:01

没有华丽的文字描述直接上官方简介翻译,几句话就能概括什么是Oozie:

  • Oozie是一个管理Hdoop作业(job)的工作流程调度管理系统
  • Oozie的工作流是一系列动作的直接周期图(DAG)
  • Oozie协调作业就是通过时间(频率)和有效数据触发当前的Oozie工作流程
  • Oozie是Yahoo针对Apache Hadoop开发的一个开源工作流引擎。用于管理和协调运行在Hadoop平台上(包括:HDFS、Pig和MapReduce)的Jobs。Oozie是专为雅虎的全球大规模复杂工作流程和数据管道而设计
  • Oozie围绕两个核心:工作流和协调器,前者定义任务的拓扑和执行逻辑,后者负责工作流的依赖和触发
  • Oozie围绕着两个核心进行:工作流(Workflow)和协调器(Coordinator),前者定义任务拓扑和执行逻辑,后者负责工作流的依赖和触发

  • oozie版本:使用cdh5.9.0版本集成的4.1.0 后续文章案例若无特殊说明 oozie都是基于此版本

  1. Apache官网:https://oozie.apache.org/
  2. Cloudera oozie 文档:https://archive.cloudera.com/cdh5/cdh/5/oozie/
文章来源: oozie简介
易学教程内所有资源均来自网络或用户发布的内容,如有违反法律规定的内容欢迎反馈
该文章没有解决你所遇到的问题?点击提问,说说你的问题,让更多的人一起探讨吧!