最新 最热

大数据技术Hbase 和 Hive 详解

目录两者的特点各自的限制应用场景----大数据技术Hbase 和 Hive 详解, 今天给大家介绍一下关于零基础学习大数据视频教程之HBASE 和 HIVE 是多么重要的技术,那么两者有什么...

2022-07-29
1

部署Hadoop2.0高性能集群

[root@tiandong63 ~]# more /etc/hosts 192.168.199.3 tiandong63192.168.199.4 tiandong64192.168.199.5 tiandong65

2022-07-27
1

Ubuntu 18.04.1上安装Hadoop 3.1.1集群详解

本文将介绍如何在基于Ubuntu的系统上安装多节点Hadoop 3.1.1集群,作者将在Ubuntu 18.04.1上安装一个包含HDFS的三节点Hadoop集群。

2022-07-27
0

Ubuntu单机安装配置Hadoop

因为是课程要求,所以在自己电脑上安装了Hadoop,由于没有使用虚拟机,所以使用单机模拟Hadoop的使用,可以上传文件,下载文件。

2022-07-27
1

HBase集群环境配置

这里搭建一个 3 节点的 HBase 集群,其中三台主机上均为 Region Server。同时为了保证高可用,除了在 hadoop001 上部署主 Master 服务外,还在 hadoop002 上部署备用的 Master 服务。Master 服务由 Zookeeper 集群进行协调...

2022-07-27
1

HBase简介

要想明白为什么产生 HBase,就需要先了解一下 Hadoop 存在的限制?Hadoop 可以通过 HDFS 来存储结构化、半结构甚至非结构化的数据,它是传统数据库的补充,是海量数据存储的最佳方法,它针对大文件的存储,批量访问和流式访问都...

2022-07-27
1

Flink Standalone Cluster

Flink 支持使用多种部署模式来满足不同规模应用的需求,常见的有单机模式,Standalone Cluster 模式,同时 Flink 也支持部署在其他第三方平台上,如 YARN,Mesos,Docker,Kubernetes 等。以下主要介绍其单机模式和 Standalone Clu...

2022-07-27
1

基于ZooKeeper搭建Spark高可用集群

这里搭建一个 3 节点的 Spark 集群,其中三台主机上均部署 Worker 服务。同时为了保证高可用,除了在 hadoop001 上部署主 Master 服务外,还在 hadoop002 和 hadoop003 上分别部署备用的 Master 服务,Master 服务由 Zookeep...

2022-07-27
1

Spark部署模式与作业提交

需要注意的是:在集群环境下,application-jar 必须能被集群中所有节点都能访问,可以是 HDFS 上的路径;也可以是本地文件系统路径,如果是本地文件系统路径,则要求集群中每一个机器节点上的相同路径都存在该 Jar 包。...

2022-07-27
1

CentOS 7.5安装Azkaban详解

Azkaban Web 服务器:azkaban-web-server-2.5.0.tar.gz

2022-07-26
0