最新 最热

BigData--MapReduce进阶(二)之工作机制

Bean对象实现WritableComparable几口,重写compareTo()方法

2020-09-24
0

BigData--Hive数据仓库工具

Hive通过给用户提供的一系列交互接口,接收到用户的指令(SQL),使用自己的Driver,结合元数据(MetaStore),将这些指令翻译成MapReduce,提交到Hadoop中执行,最后,将执行返回的结果输出到用户交互接口。...

2020-09-24
0

Python进阶(一)

1、args 和 *kwargs*args *args 是⽤来发送⼀个⾮键值对的可变数量的参数列表给⼀个函数. pythondef test_var_args(f_arg, *argv): print("first normal arg:", f_arg) for arg in argv:......

2020-09-24
0

BigData--Yarn资源调度器

YARN主要由ResourceManager、NodeManager、ApplicationMaster和Container等组件构成

2020-09-24
1

一天一大 leet(有序矩阵中第 K 小的元素)难度:中等-Day20200702

给定一个 n x n 矩阵,其中每行和每列元素均按升序排序,找到矩阵中第 k 小的元素。请注意,它是排序后的第 k 小元素,而不是第 k 个不同的元素。

2020-09-24
0

BigData--Hadoop数据压缩

要想对正在被写入一个输出流的数据进行压缩,我们可以使用createOutputStream(OutputStreamout)方法创建一个CompressionOutputStream,将其以压缩格式写入底层的流。...

2020-09-24
0

String - 151. Reverse Words in a String

Given an input string, reverse the string word by word.

2020-09-23
0

恕我直言你可能真的不会java第10篇-集合元素归约

Stream API为我们提供了Stream.reduce用来实现集合元素的归约。reduce函数有三个参数:

2020-09-23
0

初识Hadoop

Hadoop这个名字并不是什么具有实际意义的单词,而是Hadoop项目作者的孩子给一个棕黄 色大象玩具的命名

2020-09-23
1

分布式资源调度——YARN框架

YARN是Hadoop2.x才有的,所以在介绍YARN之前,我们先看一下MapReduce1.x时所存在的问题:

2020-09-23
1