最新 最热

kylin安装---安装系列十一

配置环境变量添加如下:/etc/profile和 ~/.bash_profile

2023-06-29
3

hadoop+hbase+hive+Spark环境性能调优---安装系列九

spark-env.sh: spark.speculation  的节点上也尝试执行该任务的一个副本。打开此选项会帮助减少大规模集群中个别较慢的任务带来的影响。默认值false spark.driver.memory 为driver进程分配的内存。注意:在客户端模式...

2023-06-29
4

hive报错---安装系列六

1.创建一个web项目,把olap4j.jar  Mondrian.jar以及hive相关的jar包放进项目中

2023-06-29
3

hive环境---安装系列五

tar -zxvf apache-hive-1.2.1-bin.tar.gz -C /itcast/

2023-06-29
3

sqoop导入hive

使用--hive-import就可以将数据导入到hive中,但是下面这个命令执行后会报错,报错信息如下:

2023-06-28
5

Hive和HBase的区别

Apache Hive是一个构建于Hadoop(分布式系统基础架构)顶层的数据仓库,注意这里不是数据库。Hive可以看作是用户编程接口,它本身不存储和计算数据;它依赖于HDFS(Hadoop分布式文件系统)和MapReduce(一种编程模型,映射与化简;...

2023-06-28
3

【上进小菜猪】深入了解Hadoop:HDFS、MapReduce和Hive

在当今的大数据时代,数据的处理和分析已经成为企业发展的必要条件之一。Hadoop作为一种开源的大数据处理框架,已经成为后端大数据处理的重要工具之一。本文将介绍如何在后端使用Hadoop进行大数据处理,包括Hadoop的安装和...

2023-05-09
3

问题随记 —— Cannot create directory /tmp/hive. Name node is in safe mode.

问题描述Hive 启动时出现以下问题:Exception in thread "main" java.lang.RuntimeException: org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.hdfs.server.namenode.SafeMod...

2023-05-07
3

hive与pig对比

1、SQL vs 脚本语言:Hive使用类SQL语言(HQL)进行数据处理和查询,类似于传统的关系型数据库,而Pig使用Pig Latin这种脚本语言。

2023-03-31
1

hive与hbase对比

1、数据模型:Hive是基于Hadoop的关系型数据仓库,支持类SQL语言进行数据查询和处理,数据存储在Hadoop分布式文件系统中。HBase是一个分布式的列式NoSQL数据库,以键值对的方式存储数据,可以直接访问数据。...

2023-03-31
2