用oozie命令行的方式在yarn上运行spark任务

2017-12-28 11:47:56 浏览数 (1)

注意：杀死yarn进程的命令 yarn application -kill applicationID

1.做这个实验之前你的服务器上最好装了cdh集群，以及添加必要的组件，如hadoop，oozie，spark，yarn等。 2.需要准备一个关于spark的demo架包，我写的是WordCount功能的jar，网上关于这个的一大堆。