最新 最热

Spark 如何摆脱java双亲委托机制优先从用户jar加载类?

spark的类加载及参数传递过程还是很复杂的,主要是因为他运行环境太复杂了,不同的集群管理器完全不一样,即使是同一集群管理器cluster和client也不一样,再加上这块探究还是需要一定的java功底和耐心的,会使得很多人望而却步...

2020-06-09
0

0778-7.0.3-如何在CDP中实现你的第一个Spark例子

先new -> directory 再 make directory as -> sources Root

2020-06-04
1

Hadoop3的新增功能介绍

Hadoop 3.x版本是Hadoop版本中的下一个重要里程碑。关于Hadoop 3.x在Hadoop 2.x基础上增强了哪些功能,很多人都在考虑这个问题。因此,在本文中,我们将介绍Hadoop3中的新增功能以及它与旧版本的区别。...

2020-06-02
0

node_modules 困境

Ryan 对于 node.js 的十大遗憾之一就是支持了 node_modules,node_modules 的设计虽然能满足大部分的场景,但是其仍然存在着种种缺陷,尤其在前端工程化领域,造成了不少的问题,本文总结下其存在的一些问题,和可能的改进方式。...

2020-06-01
0

如何在 Ubuntu 20.04 上安装 Yarn

本文最先发布在: https://www.itcoder.tech/posts/how-to-install-yarn-on-ubuntu-20-04/

2020-05-29
0

monorepo--依赖

19年,团队沉淀了组件库、图表库、工具库等基础建设相关内容。上述的内容均为独立工程维护,起初我们采用 Git Subtree + npm install <folder> 来关联各个项目,带来了开发、调试的便利,同时也带了一些复杂性。...

2020-05-28
0

hadoop2.x全分布式集群搭建(一主二从)

然后生成了id_rsa与id_rsa.pub,分别是私有与公有秘钥,我们要把公有秘钥复制到一个authorized_keys文件内,这个文件的作用就是完成无密码访问。 然后执行:...

2020-05-26
0

Mac安装yarn并配置环境变量PATH,运行报错问题解决

根据官网的安装教程,安装完成并配置环境变量打开终端,输入以下命令// 切换root权限sudo -s// 输入密码password:// 编辑bash_profile文件vi ./bash_profile// 按s键进行编辑,添加以下配置export PATH="$PATH:/usr/local/...

2020-05-26
0

CDH+Kylin三部曲之三:Kylin官方demo

Yarn的内存参数设置之后一定要重启Yarn使之生效,否则Kylin提交的任务是会由于资源限制而无法执行;

2020-05-26
1

CDH+Kylin三部曲之二:部署和设置

本文是《CDH+Kylin三部曲》系列的第二篇,上一篇《CDH+Kylin三部曲之一:准备工作》已将所需的机器和文件准备完毕,可以部署CDH和Kylin了;

2020-05-26
1