目标：使用Oozie调度MapReduce任务 分步执行： 1）找到一个可以运行的mapreduce任务的jar包（可以用官方的，也可以是自己写的） 2）拷贝官方模板到oozie-apps

来源：https://juejin.im/post/5abdd6f6f265da23793c4458

Azkaban 是由 Linkedin 公司推出的一个批量工作流任务调度器，主要用于在一个工作流内以一个特定的顺序运行一组工作和流程，它的配置是通过简单的 key:value 对的方式，通过配置中的 Dependencies 来设置依赖关系。Azkaban...

Flow 库是在 Kotlin Coroutines 1.3.2 发布之后新增的库。

接着说谷歌，上篇文章提到了 GFS 。那么谷歌为什么要硬着头皮去啃分布式系统这块硬骨头呢？首先，我们要知道谷歌刚开始成立时是一家搜索公司，方便用户查询互联网上的信息。因此谷歌必须要存储整个互联网上的信息，那这个数据...

注意： 目前，Azkaban 上传的工作流文件只支持 xxx.zip 文件。zip 应包含 xxx.job 运行作业所需的文件和任何文件（文件名后缀必须以.job 结尾，否则无法识别）。作业名称在项目中必须是唯一的。...

中间件是一种实现「关注点分离」的设计模式，有多种实现方式，本文仅探讨koa/redux是如何设计中间件。该模式有两个特点：

reduce() ：接收一个函数（必须）和一个初始值（可选），该函数接收两个参数：

Apache Hive数据仓库软件可以使用SQL方便地阅读、编写和管理分布在分布式存储中的大型数据集。结构可以投射到已经存储的数据上。提供了一个命令行工具和JDBC驱动程序来将用户连接到Hive。...

divmod(x,y) 函数中传入两个数字，返回的是x/y的一个结果的元组（商，余数）