liubang000 2018-04-23
Apache软件基金会发布Apache Oozie v5.0.0,这是对Hadoop工作流调度程序的更新。此发行版的新功能包括将启动器从MapReduce mapper转到了YARN ApplicationMaster,从Tomcat 6切换到Jetty 9,更新第三方库,重写工作流图生成器,支持JDK 8,弃用Instrumentation以支持度量标准,添加索引加速数据库查询,并修复CVE-2017-15712。
Apache Oozie副总裁Robert Kanter说,“Apache Oozie 5的旗舰功能,YARN上的Oozie最早是在4年前的一天黑客马拉松项目中开始的,很高兴看到Oozie社区已经开始使用它,并且已经就绪。这对Oozie架构来说是一个巨大的变化,我认为用户会对它带来的好处感到满意。”
Apache Oozie是一个用来管理Hadoop任务的工作流调度系统,是基于有向无环图的模型(DAG)。Oozie支持大多数的Hadoop任务的组合,常见的有Java MapReduce,Streaming map-reduce,Pig,Hive,Sqoop ,Distcp,也可以结合一些脚本如Shell,Python,Java来很灵活的完成一些事情。同时,它也是一个可伸缩的,可扩展,高可靠的的系统 。