最新 最热

【源码解读】| LiveListenerBus源码解读

异步事件列队主要由LinkedBlockingQueue[SparkListenerEvent] 构建,默认大小为10000

2022-07-07
0

业内首本!个推《大数据降本提效实战手册》免费领取

近日,个推重磅发布业内首本《大数据降本提效实战手册》,手册集技术解析、应用实践于一体,深度剖析了七大经典存算场景实践,是一本不容错过的大数据降本提效武功秘籍!...

2022-07-06
1

hive、hadoop面试题

有如下hive记录表records,记录车辆的过车信息: create table records( id string, //记录编号 indate string, //过车记录时间 plate_no string, //车辆号牌 device_id int, //经过的设备编号 ) p......

2022-07-05
0

关于Apache Mesos的一些想法

我关注Apache Mesos很长时间了。Apache Mesos从研究论文开始,2010年成为Apache孵化项目,后来从ASF“毕业”,并于2013年建立商业实体Mesosphere。

2022-07-05
1

Spark部分流程说明

Spark首先进入的是org.jivesoftware.launcher.Startup类的main方法。

2022-07-05
1

ONgDB图数据库与Spark的集成

图计算是研究客观世界当中的任何事物和事物之间的关系,对其进行完整的刻划、计算和分析的一门技术。图计算依赖底于底层图数据模型,在图数据模型基础上计算分析Spark是一个非常流行且成熟稳定的计算引擎。下面文章从ONg...

2022-07-04
0

Hadoop2.6版本集群环境搭建

2、linux版本:[spark@S1PA11 ~]$ cat /etc/issueRed Hat Enterprise Linux Server release 5.4 (Tikanga)

2022-07-04
1

Spark SSH配置

127.0.0.1       localhost.localdomain localhost::1             localhost6.localdomain6 localhost6

2022-07-04
0

深入理解 SQL 中的 Grouping Sets 语句

SQL 中 Group By 语句大家都很熟悉,根据指定的规则对数据进行分组,常常和聚合函数一起使用。

2022-07-03
0

Spark实战1:单节点本地模式搭建Spark运行环境

http://d3kbcqa49mib13.cloudfront.net/spark-1.1.0-bin-hadoop1.tgz

2022-07-03
1