最新 最热

Cloudera Manager管理控制台

Cloudera Manager是一个用于管理、配置和监控CDP私有云基础集群和Cloudera Runtime服务的应用程序。

2020-11-25
0

连夺双奖,腾讯云大数据云原生究竟凭什么?

300+参评项目,100+入围项目,10000+开发者公开票选,20+专家评审,10+主编团打分,历经数月打磨,由 InfoQ 发起组织的【 2020 中国技术力量年度榜单评选】结果揭晓: 腾讯云大数据云原生技术脱颖而出,荣获 2020年度十大云原生创新...

2020-11-25
0

Spark on YARN基础

不管使用哪种模式,Spark应用程序的代码是一模一样的,只需要在提交的时候通过--master参数来指定我们的运行模式即可

2020-11-24
0

gRPC Node.js快速开始

本文翻译自gRPC官网的Node.js示例,链接地址为:https://www.grpc.io/docs/languages/node/和Quick start

2020-11-24
0

什么是yarn?

什么是yarn?马克-to-win @ 马克java社区:YARN (Yet Another Resource Negotiator,另一种资源协调者)是Hadoop的一个资源管理系统,可为上层应用提供资源管理和调度。以下二图来自于hadoop官网。...

2020-11-24
0

大数据篇---hadoop学习一、搭建hadoop环境(centos7)二、hadoop知识点

大咖揭秘Java人都栽在了哪?点击免费领取《大厂面试清单》,攻克面试难关~>>>

2020-11-13
0

Hive数据仓库之权限管理

延续数据仓库之Hive快速入门 - 离线&实时数仓架构一文,本文将介绍一下Hadoop/Hive自带的权限控制,权限控制是大数据平台非常重要的一部分,关乎数据安全。...

2020-11-12
0

sqoop——将mysql数据库的数据表导入到hdfs上

sqoop是用来将mysql数据库上的内容导入到hdfs,或者将hdfs上的数据导入mysql的(相互之间转化)一个工具。 前提:开启hdfs、yarn服务,关闭safe模式 (1)首先,在mysql上创建测验表:...

2020-11-11
0

hive(3)——在hive中使用自己写的函数(python实现)

如果我们想在hive中添加自己写的函数,可用如下方法: 前提:已经开启hdfs,yarn服务,并且关闭safe模式,打开mysql ps:udf是mapper类型的,进来一个数据,出去一个数据 (1)用python写好想要实现的函数 这里我的测试表是这样一份表,我想...

2020-11-11
0

hive(3)——使用mapreduce

当查询数据复杂时,hive就会调用hadoop里的mapreduce,前提:开启hdfs和yarn服务。

2020-11-11
1