原文 | https://www.ibrahima-ndaw.com/blog/15-must-known-javascript-array-methods-in-2020/

十年前我们只有Hadoop，大家首先通过HDFS实现海量数据的共享存储，然后使用MapReduce以批处理的方式处理这些海量数据，这一切看起来似乎十分完美。

福哥答案2020-09-11：#福大大架构师每日一题#[Hive调优及优化的12种方式](https://zhuanlan.zhihu.com/p/80718835?utm_source=qq)1

9月11日，在腾讯全球数字生态大会大数据专场上，腾讯云大数据产品副总经理雷小平重磅发布了全链路数据开发平台WeData，同时发布和升级了流计算服务、云数据仓库、ES、企业画像等6款核心产品，进一步优化和提升了腾讯云大数据...

「为了回馈图雀社区的读者，图雀酱特地挑选了几本书籍送给大家，文末有送书活动详情哦~」

通常来讲，计算节点和存储节点是同一个，即mapreduce框架和hadoop分布式文件系统运行在相同的节点集群，使得任务调度更加高效，网络带宽更聚合。

有天在运行一个例行任务的时候，在 reducer 到 100% 的时候，任务突然崩了，以前跑的好好的程序怎么突然就崩了呢？，打开track url一看，报了如图所示的错误：...

1. JobName指定有意义JobName, 一般是自己的名字+Job作用。mapred.job.name="xxx_test"2. Reduce的个数说明1mapred.reduce.tasks3. Job的task并发数# mappermapred.job.max.map.running# ......

即进程组。默认情况下，只有一个组，一个 job 即为一个组，也即一个 world。

本文涉及到Flink SQL UDAF，Window 状态管理等部分，希望能起到抛砖引玉的作用，让大家可以借此深入了解这个领域。