最新 最热

Job Submission failed with exception 'java.net.ConnectException(Call From ....to node01:8032 fa

今天在hive上,执行一个命令,通过从一个表中查询出的数据导入到另一个表的时候,出现了下面的结果。

2021-01-26
0

大数据技术原理与应用之【Spark】习题

①Spark的计算模式也属于MapReduce,但不局限于Map和Reduce操作,还提供了多种数据集操作类型,编程模型比MapReduce更灵活;

2021-01-26
0

MapReduce的jobHistory介绍

接下来小菌将分享如何在CDH集群环境下开启jobHistory服务。(不清楚集群环境搭建的小伙伴们可以参考小菌之前的博客哦(Hadoop(CDH)分布式环境搭建)

2021-01-22
0

hadoop三节点集群完全分布式安装

1.1 hadoop版本 3.1.4 (hadoop-3.1.4.tar.gz )

2021-01-22
0

yarn node -list

[yarn@bigdata016 ~]$ yarn node -list2021-01-12 00:07:07,642 INFO [main] client.ConfiguredRMFailoverProxyProvider (ConfiguredRMFailoverProxyProvider.java:perfo...

2021-01-14
0

FsImage Analyse Tool

该工具提供自动化解析HDFS集群FSImage文件,并解析成文本文件存储在HDFS中;解析后的信息通过Hive映射成表,并通过Hive进行相关信息统计,使用有数生成相关报表。...

2021-01-08
0

Flink学习笔记

流式计算是大数据计算的痛点,第1代实时计算引擎Storm对Exactly Once 语义和窗口支持较弱,使用的场景有限且无法支持高吞吐计算;Spark Streaming 采用“微批处理”模拟流计算,在窗口设置很小的场景中有性能瓶颈,Spark 本身...

2021-01-08
0

Fair Scheduler和Capacity Scheduler比较

本节提供有关选择Capacity Scheduler的好处和性能改进的信息,以及Fair Scheduler和Capacity Scheduler之间的功能比较。

2021-01-08
0

将CDH就地升级到CDP PvC基础版概览

升级CDP私有云基础包括两个主要步骤,即升级Cloudera Manager和升级集群。您不需要同时升级Cloudera Manager和集群,但是Cloudera Manager和集群的版本必须兼容。Cloudera Manager的主要+次要版本必须等于或高于CDH或Clo...

2021-01-08
1

CDP PVC基础版的新功能

如果您是CDH或HDP用户,则除了从CDH和HDP版本转移到CDP的功能之外,还可以查看CDP私有云基础版中可用的新功能。

2021-01-08
1