最新 最热

Spark全分布部署和HA

基于Zookeeper的Standby Masters ZooKeeper提供了一个Leader Election机制,利用这个机制可以保证虽然集群存在多个Master,但是只有一个是Active的,其他的都是Standby。当Active的Master出现故障时,另外的一个Standby Mast...

2023-02-25
1

zookeeper搭建全分布

tickTime=2000 tickTime这个时间是作为Zookeeper服务器之间或客户端与服务器之间维持心跳的时间间隔,也就是每个tickTime时间就会发送一个心跳。

2023-02-25
1

Kafka快速入门(安装集群)

5)分别在 hadoop103 和 hadoop104 上修改配置文件/opt/module/kafka/config/server.properties中的 broker.id=1、broker.id=2

2023-02-16
2

以 standalone 模式启动 Aapche Pulsar

如果你的服务器可用内存不足4GB,可能会在启动Pulsar时失败,在启动Pulsar之前设置内存:

2023-02-09
1

每天20分钟之elastic-job-lite的应用

官网: https://shardingsphere.apache.org/elasticjob/current/cn/user-manual/elasticjob-lite/

2023-01-14
1

通过Zookeeper获取激活的HDFS节点

前言public static void main(String[] args) throws IOException, InterruptedException, KeeperException { String hadoopZkNode = "/hadoop-ha/hacluster/ActiveStandb...

2023-01-13
2

NLP 转后端开发,顺利拿到字节实习 offer!!

简单介绍一下我的基本情况,上海双非本 + 985 硕,目前在读研二。本科 + 研究生大部分时间都在搞算法, NLP 相关,今年终于认识到了理想和现实的差距,遂在 5 月份下定决心转后端开发。之后处理一些事情,暑假 7 月底的时候正式...

2023-01-11
2

微系列:4、在Centos中,搭建Zookeeper集群

压缩包并解压 https://zookeeper.apache.org/releases.html

2023-01-09
1

在项目中使用Curator的Java 客户端搭建后进行长TCP连接和TCP权限配置【Zookeeper】

在Zookeeper的运行过程中,客户端会在会话超时的到期范围内向服务器发送请求(包括读写)或ping请求,俗称心跳检测,以完成会话激活,从而保持会话的有效性。...

2022-12-31
1

大数据NiFi(二):NiFi架构

NiFi的基本设计理念是基于数据流的编程Flow-Based Programming(FBP),应用是由处理器、连接器组成的网络。数据进入一个节点,由该节点对数据进行处理,根据不同的处理结果将数据路由到后续的其他节点进行处理。这是NiFi的流...

2022-12-31
1