前言 隔行如隔山，这句话同样适用于任何时候，即时同一个专业，深入下去的话，差别也是巨大的。今天，讲下自己如何学习binder进程间通信的机制的一些见解。开始的时候，只知道 Binder 是个很底层的东西，甚至对于具体是什么用都不...
在CDH集群中spark1和Spark2版本可以共存，为了更好的体验及使用Spark新版本的API或修改已知旧版本的bug，现需要将CDH集群中Spark2的版本升级至Spark2.2最新，本篇文章主要介绍如何通过Cloudera Manager将Spark2.1版本升级...
在前面的文章《CDH5.13和CM5.13的新功能》中Fayson介绍过Cloudera发布CDH5.13时，同时也发布了Kafka3.0版本（即社区0.11版），目前社区最新版本为1.0。由于Kafka3.0和Spark2.2需要JDK8的支持，所以在升级Kafka3.0和Spark2.2版...
Gateway节点又称为客户端节点，通常用作访问Hadoop集群的接口机。它主要会部署一些客户端的配置，脚本命令，比如HDFS的core-site.xml，hdfs-site.xml以及hadoop的操作命令。...
无需额外花费过多的学习成本，sparklyr（https://spark.rstudio.com）可以让R用户很方便的利用Apache Spark的分布式计算能力。之前Fayson介绍了什么是sparklyr，大家知道R用户可以编写几乎相同的代码运行在Spark之上实现本地...
