最新 最热

第一篇:Centos7 Hadoop 2.7.7 集群部署

可知 2T 挂载在 data 目录下,所以接下来的部署主要在 data 目录下进行。

2021-12-27
1

TDW2021 腾讯设计周 | 不能来现场?那就来直播间买买买吧!

以下文章来源于腾讯设计周 ,作者TDW2021 腾讯设计周 | 线上市集直播间 2021.12.27 10:30 开播啦 ! 各位「美好事物」热爱者【腾讯设计周线上市集】直播间首次开播啦 预约线上直播,邂逅心动好物 腾讯设计周携十二支...

2021-12-25
0

Hadoop 部署模式

Hadoop的部署模式有四种:本地模式、伪分布式模式、完全分布式模式、HA完全分布式模式。

2021-12-24
0

linux显示所有文件的大小,显示文件夹下文件的个数,hadoop命令中查看文件夹下的个数命令,模糊查询

linux 下查看文件个数及大小       ls -l |grep “^-“|wc -l       或       find ./company -type f | wc -l       查看某文件夹下文件的个数,包括子文件夹里的。       ls -lR|grep...

2021-12-23
1

【最全的大数据面试系列】Flume面试题大全

线上数据一般主要是落地(存储到磁盘)或者通过 socket 传输给另外一个系统,这种情况下,你很难推动线上应用或服务去修改接口,实现直接向 kafka里写数据,这时候你可能就需要 flume 这样的系统帮你去做传输。...

2021-12-21
0

Spring Boot 通过 spring-boot-starter-hbase 集成 HBase

HBase 是什么?HBase 是在 Hadoop 分布式文件系统(简称:HDFS)之上的分布式面向列的数据库。而且是 2007 最初原型,历史悠久。

2021-12-17
1

Spring Boot 整合 HBase

HBase是一个分布式的、面向列的开源数据库,Hadoop 数据库。搭建基于 Hadoop 和 ZK 。

2021-12-17
1

Hadoop大数据生态系统及常用组件

什么是大数据,多大算大,100G算大么?如果是用来存储1080P的高清电影,也就是几部影片的容量。但是如果100G都是文本数据,比如云智慧透视宝后端kafka里的数据,抽取一条mobileTopic的数据如下:【107,5505323054626937,局域网,局域网...

2021-12-16
0

Spark 极简教程

何谓计算引擎,一言以蔽之,就是专门处理数据的程序,在大数据之前,人们用数据库来处理数据,人们常说的SQL,它是一种DSL,它的背后正是数据库的计算引擎,但是数据库的计算和存储通常被集成在一起,统称为数据库引擎。...

2021-12-16
1

Hadoop vs Spark

Hadoop vs SparkBig Data Architecturehttps://www.youtube.com/watch?v=xDpvyu0w0C8

2021-12-16
1