最新 最热

Python 的mapreduce 单词统计

#!/usr/bin/env pythonimport random'abc..z'alphaStr = "".join(map(chr, range(97,123)))fp = open("word.txt", "w")maxIter = 100000for i in range(maxIter): ...

2021-11-03
0

第十一篇:setState 到底是同步的,还是异步的?

setState 对于许多的 React 开发者来说,像是一个“最熟悉的陌生人”:

2021-11-02
1

Python(七)

Python 内建了 map() 函数。map() 函数接收两个参数,一个是函数,一个是 Iterable,map 将传入的函数依次作用到序列的每个元素,并把结果作为新的 Iterator 返回。由于结果是一个 Iterator,Iterator 是惰性序列,因此我们还可...

2021-11-01
0

JavaScript(五)

这一篇,我们讲讲 JavaScript 引用类型中的 Object、Array 和 Date。在 ECMAScript 中,引用类型是一种数据结构,用于将数据和功能组织在一起。它也常被称为类,但这种称呼并不妥当。尽管 ECMAScript 从技术上讲是一门面向对...

2021-10-29
0

Hive计算引擎大PK,万字长文解析MapRuce、Tez、Spark三大引擎

Hive从2008年始于FaceBook工程师之手,经过10几年的发展至今保持强大的生命力。截止目前Hive已经更新至3.1.x版本,Hive从最开始的为人诟病的速度慢迅速发展,开始支持更多的计算引擎,计算速度大大提升。...

2021-10-27
0

Hive重点难点:Hive原理&优化&面试(上)

Hive SQL的执行计划描述SQL实际执行的整体轮廓,通过执行计划能了解SQL程序在转换成相应计算引擎的执行逻辑,掌握了执行逻辑也就能更好地把握程序出现的瓶颈点,从而能够实现更有针对性的优化。此外还能帮助开发者识别看似...

2021-10-25
0

C++ 动态新闻推送 第34期

从reddit/hackernews/lobsters/meetingcpp摘抄一些c++动态

2021-10-25
1

大数据必知必会 | Hive架构设计和原理

大家好,我是梦想家 Alex 。在上一篇文章 简单介绍 HDFS,MapReduce,Yarn 的 架构思想和原理,收获和反响还不错,那本篇内容,我们继续,本篇文章,我来为大家介绍 Hive 架构思想和设计原理。...

2021-10-22
0

简单介绍 Hadoop三大核心组件 的 架构思想和原理

大家好,我是 梦想家Alex 。之前实际上我也写了不少关于大数据技术组件的文章,例如:

2021-10-22
1

MapReduce 的核心知识点,你都 get 到了吗 ?(干货文章,建议收藏!)

众所周知,Hadoop 中最核心的两大组件就是 HDFS 和 MapReduce。其中 HDFS 提供了承载海量数据存储的能力,而 MapReduce 则提供了海量数据高并行计算的能力。关于 HDFS 的介绍,之前已经写了两篇来分别介绍 HDFS 的架构 和 ...

2021-10-22
1