最新 最热

【最全的大数据面试系列】Hadoop面试题大全(二)

ZKFailoverController主要职责   1)健康监测:周期性的向它监控的NN发送健康探测命令,从而来确定某个NameNode是否处于健康状态,如果机器宕机,心跳失败,那么zkfc就会标记它处于一个不健康的状态。   2)会话管理:如果NN是健康...

2021-12-14
0

Vue团队核心成员开发的39行小工具 install-pkg 安装包,值得一学!

本文仓库 https://github.com/lxchuan12/install-pkg-analysis.git,求个star^_^[1]

2021-12-13
0

基于树莓派部署 code-server

code-server 是 vscode 的服务端程序,通过部署 code-server 在服务器,可以实现 web 端访问 vscode。进而可以达到以下能力:

2021-12-09
0

Vue3 学习笔记 —— (一)深入理解组合式 API

Vue3 是向下兼容 Vue2 API 的,但是 Vue3 中提供了一种全新的 Composition API

2021-12-08
0

大数据必经之路-认识Spark

在进行了解spark 和 mapReduce的区别时,看到一个大佬所讲:人们在 Spark 出现之后,才开始对 MapReduce 不满。原来大数据计算速度可以快这么多,编程也可以更简单。而且 Spark 支持 Yarn 和 HDFS,公司迁移到 Spark 上的成本...

2021-12-07
0

Hadoop初始化不成功,Start-all报错

使用root配置的hadoop并启动会出现报错

2021-12-07
0

Hadoop3.x 学习笔记

一开始我使用的是在Mac系统下 Docker 中建立了三个环境来搭建的,但是由于HDFS操作的时候是客户端直接联系DataNode来进行数据操作的原理,Mac下不能直接访问到Docker中的容器服务,也不能通过桥接连接,所以我后来改为在Virt...

2021-12-07
0

大仓实践录:Lerna/NPM/Yarn Workspace 方案组合和性能对比

仓就是仓库(repository,简称 repo)。通常我们使用多个仓库(简称多仓,multi-repo)来管理项目代码,也就是每个仓库负责一个模块或包的编码、构建、测试和发布,代码规模相对较小,所以也称为小型规模仓库(简称小仓)。而单一(mono)仓库(...

2021-12-07
0

数栈技术分享:一文带你了解Flink jm、tm启动过程和资源分配

4)在perJob模式下,最终调用的是YarnJobClusterEntrypoint

2021-12-07
0

hadoop常用命令总结及百万调优

以下参数是在用户自己的MR应用程序中配置就可以生效(mapred-default.xml)

2021-12-07
0