spark访问Redis并进行操作

2022-05-07 14:16:18 浏览数 (1)

Redis是一种高性能的内存数据库,其应用场合非常广泛,在一些实时性要求比较高的场景中,以Redis作为架构来实现的是比较多的。

Redis提供了好几种数据结构,如Set, List, Hash等。可以适应不同的场合要求。

但是也发现Redis存在一个问题,其没有表格的概念,而是以字典(键空间)的方式来管理的,这与传统的SQL方式是不大像的。

为了实现对Redis的高性能管理,想利用spark来实现对Redis访问一下。利用Redis官方提供的Spark访问引擎,还是能迅速实现的Redis的访问的。

其结果如图所示。不过也得注意,所访问的键空间的类型必须提前知道,否则会存在取值失败的现象。

0 人点赞