最新 最热

React:FrontendWiki前端维基项目&&用纯CSS实现树

首先很幸运,我们的组长来自北大研院,从未与北大学子共事过,今日闻名不如人,真真实实感受到思维上的不一样之处,从思维角度就让我或多或少有些成长。...

2022-08-01
1

Java Stream流

stream是顺序流,由主线程按顺序对流执行操作;parallelStream是并行流,内部以多线程并行执行的方式对流进行操作,如果对流中的数据处理没有顺序要求就可以使用并行流。(一般不建议使用并行流,不熟悉的话很容易踩坑,使用情况经...

2022-08-01
0

大数据开发工程师需要具备哪些技能?[通俗易懂]

数据相关的工具、产品和技术:比如批量数据采集传输的 Sqoop 、离线数据处理的Hadoop 和Hive 、实时流处理的 Storm和 Spark 以及数据分析的R语言等。

2022-07-31
0

vuex使用教程(最好最详细的乒乓教程)

1、利用npm包管理工具,进行安装 vuex。在控制命令行中输入下边的命令就可以了。

2022-07-29
0

Hive小文件问题:如何产生、造成影响、解放办法

1.从Hive的角度看,小文件会开很多map,一个map开一个JVM去执行,所以这些任务的初始化,启动,执行会浪费大量的资源,严重影响性能。

2022-07-29
0

大数据常见问题:数据倾斜

一般都发生在Sql中group by和join on上,而且和数据逻辑绑定比较深。

2022-07-29
0

hive 参数设置大全

如果你懒得看上文,推荐一套参数设置: set hive.execution.engine=tez; set mapreduce.map.memory.mb=8192; set mapreduce.reduce.memory.mb=8192; set hive.exec.reducers.max=999; s...

2022-07-29
0

大数据计算引擎:impala对比hive

Hive: 依赖于MapReduce执行框架,执行计划分成map->shuffle->reduce->map->shuffle->reduce…的模型。如果一个Query会被编译成多轮MapReduce,则会有更多的写中间结果。由于MapReduce执行框架本身的特点,过多的中间过程会...

2022-07-29
0

将 useReducer 应用于 Web Worker,擦出奇妙的火花

有这么一个场景,当加载一个网页时,它突然变得无响应,直到所有的资源完全加载完毕才响应。但是,当资源加载时,用户可能无法执行页面上的某些功能,比如单击、选择或拖动元素。这个时候你可能会想到使用 Web workers帮助我们解...

2022-07-29
0

使用高阶函数:让你的 JS 代码更牛更有范

首先,高阶函数的确切含义是:比典型函数更高的抽象级别。它是对其他函数执行操作的函数。在此定义中,操作可能意味着将一个或多个函数作为参数,或者将一个函数作为结果返回。 你不必同时做这两个事情。进行一项或多项操作...

2022-07-29
0