平行链是什么？吴思进说，平行链是一个简单、易扩展的区块链，由一条“主链”与多条“平行链”共同构成。平行链和主链保持既独立又连结的关系，在主链之下，平行链可以拥有自己的超级节点和状态机，但平行链的安全性是由主链提供...

R怎么读入表格数据最快？R中有6个常用数据读取函数：utils::read.csv: 默认使用的读入方式 (read.table)readr::read_csv: readr包中的读入函数 (RStudio中默认也包含了这一方式)data.table::fread: 来自data.table包base...

当您需要对大数据进行随机、实时的读写访问时，请使用Apache HBase™。这个项目的目标是在商用硬件集群上托管非常大的表——数十亿行X数百万列。Apache HBase是一个开源的、分布式的、版本化的、非关系型的数据库，它模...

接上一篇文章，上篇文章说到hudi适配hbase 2.2.6，这篇文章在spark-shell中操作hudi，并使用hbase作为索引。要完成以下实验，请先确保你已经按照文章步骤对hudi进行适配。并且得到了hudi-spark3-bundle_2.12-0.9.0.jar...

在hudi中，hbase可以作为索引数据的存储，hudi默认使用的hbase版本为1.2.3。

之前在《初识 HBase - HBase 基础知识》中提到过，HBase 的数据物理存储格式为多维稀疏排序 Map, 由 key 及 value 组成：

HBase 数据库默认的客户端程序是 HBase Shell，它是一个封装了 Java 客户端 API 的 JRuby 应用软件。用户可以在 HBase 的 HMaster 主机上通过命令行输入 hbase shell，即可进入 HBase 命令行环境，以命令行的方式与 HBase ...

Hadoop 中的 HDFS 是文件存储的基础，但是如果要对存储在 HDFS 中的文件进行更改、删除等操作会十分费劲。这是由于 Hadoop 只能执行批量处理，且只能以顺序方式访问数据，当需要更改数据时，必须搜索整个数据集，从海量文件数...

在我接触的很多应用开发中，搜索引擎（ElasticSearch）是充当业务宽表使用，也就是聚合多张业务表，免去线上查询的join操作。

随着公司业务的不断发展，团队不断壮大的同时，项目也随之臃肿起来，如何保障团队协作的高效，自然的想到了组件化这个话题。下面总结下本人的梳理和思考。...