最新 最热

Spark On HBase

MapReduce早已经对接了HBase,以HBase作为数据源,完成批量数据的读写。如今继MapReduce之后的Spark在大数据领域有着举足轻重的地位,无论跑批,流处理,甚至图计算等都有它的用武之地。Spark对接HBase成为不少用户的需求。...

2019-09-24
1

云数据库HBase企业级安全解析

1.Access Controller coprocessor实现的ACL权限控制;

2019-09-24
1

大数据和云计算技术周报(第93期)

有赞是一个商家服务公司,提供全行业全场景的电商解决方案。在有赞,大量的业务场景依赖对实时数据的处理,作为一类基础技术组件,服务着有赞内部几十个业务产品,几百个实时计算任务,其中包括交易数据大屏,商品实时统计分析,日志...

2019-09-24
1

大数据和云计算技术周报(第91期)

文章首先回顾了 HBase 的数据模型和数据层级结构,对数据的每个层级的作用和构架均进行了详细阐述;随后介绍了数据写入和读取的详细流程;最后介绍了老版本到新版本 Region 查找的演进。...

2019-09-24
1

HBase实战 | HBase在人工智能场景的使用

近几年来,人工智能逐渐火热起来,特别是和大数据一起结合使用。人工智能的主要场景又包括图像能力、语音能力、自然语言处理能力和用户画像能力等等。这些场景我们都需要处理海量的数据,处理完的数据一般都需要存储起来,这...

2019-09-24
1

HBase应用实践专场-HBase问题排查思路

如果重度依赖HBase,有必要对HBase源码进行深入理解,建议根据日志去找追踪源码!!!

2019-09-24
1

图文简述HBase的用途(一)

我们平常在存储数据时,会想到用Mysql关系型数据库、大硬盘文档存储等。但是,面临互联网自媒体时代的出现,采用Mysql来存储微信类评论数据、零碎图片、零碎视频,采用Mysql的数据库,已经力不从心。表现在:1、Mysql数据库字段...

2019-09-24
1

图文简述flume的巨大用途

谈到大数据,我们很常会想到hdfs、mapreduce、hbase、spark、hive等高大上的大数据工具或底层组件,但我们不能忘了饮水思源,我们的大数据的数据从哪里来呢? 有来自于mysql、oracle等关系型的结构化数据库,也有来自html、log...

2019-09-24
1

HBase的部署

本文的HBase安装是在Hadoop已经安装好的基础上实现的,所以之前要导出JAVA_HOME、HADOOP_HOME( 单机模式不需要,伪分布式模式和分布式模式需要)等环境变量以及配置好SSH互信等。 0 公共配置 导出HBase的环境变量...

2019-09-24
1

如果光猫+hadoop,有化学反应吗?

运营商关注光网的发展与客户的使用体验,客户的互联网使用体验提质一般采用两种方式进行处理。一是观注在OLT上每个用户的光衰进行主动处理,二是通过客服热线或用户测试网站进行被动处理。但这种方式仍存在问题,通过OLT主...

2019-09-24
1