最新 最热

【ES三周年】通过Elasticsearch来搭建搜索引擎

Elasticsearch也简称为ES,其实就是一个实时搜索和分析引擎,它可以近乎实时的数据存储、检索与分析数据。ES是一个基于开源的可高扩展的分布式全文搜索引擎,它自身可扩展性非常好,可以扩展到能够处理PB级别的数据。ES是基...

2023-02-15
1

Shell 编程(一):Shell 变量的高级用法

变量 string=”Bigdata process framework is Hadoop , Hadoop is an open source project” 执行脚本后,打印输出 string 字符串变量,并给出用户以下选项:

2023-02-12
1

大数据必知必会:Hadoop(1)单机环境安装

bin目录下存放的是Hadoop相关的常用命令,比如操作HDFS的hdfs命令,以及hadoop、yarn等命令。

2023-02-06
1

MapReduce报错:「MKDirs failed to create file」

MapReduce报错:「MKDirs failed to create file」0. 写在前面1. 程序代码及报错信息输入、输出路径程序代码报错信息2. 查找资料3. 原因分析4. 参考----

2023-01-31
1

大数据未来发展的趋势在哪里?

2022年11月30日,腾讯全球数字生态大会上,发布了和知名分析机构IDC合作的《IDC 2022年云上产品演进趋势白皮书》。大数据作为重点赛道之一,在白皮书里面也传递了腾讯云对这个赛道发展趋势的判断:云原生,数据治理,数智融合,隐...

2023-01-10
1

割韭菜来了,星环科创板上市大涨。。。

2022年10月18日,星环信息科技股份有限公司,正式登录科创板。星环发售价是47.34元一股,开盘后涨到72元,涨幅超过50%。

2023-01-10
1

DataNode发生full GC优化及建议

问题现象:emr控制台“集群监控”-->“集群事件”里会出现“ DataNode 发生full GC ”的告警事件

2023-01-06
1

NameNode发生full GC优化及建议

问题现象:emr控制台“集群监控”-->“集群事件”里会出现“ NameNode 发生full GC ”的告警事件

2023-01-06
1

【数据架构】数据湖与数据仓库之间的五大差异

根据Google的说法,对“大数据”的兴趣已经持续了好几年,而且在过去几年里真正的兴起。这篇文章的目的是为了帮助突出数据湖泊和数据仓库之间的差异,帮助您就如何管理数据做出明智的决定。...

2023-01-05
1

隐私计算-Oblivious Transfer算法理论研究与实践

安全计算,又称安全多方计算(MPC: Secure Multi-party Computation2),是指多个参与方在不透露各自数据的前提下,按照约定的安全计算协议,协同完成某个共同的计算任务。形式化描述为:多个参与方$C_1$,$C_2$,$C_3$ $...$ $C_n$拥...

2022-12-19
1