区块链数据分析基础工具

BlockETL软件包用于比特币区块链数据分析中的数据抽取/转换/加载（ETL），可以从原始的比特币区块文件中抽取区块与交易数据并加载入通用SQL数据库，以便于后续的数据分析处理，非常适合区块链数据分析相关的毕业设计或课题研究项目。BlockETL官方下载地址：http://sc.hubwiz.com/codebag/blocketl-java/。

1、软件包概述

BlockETL软件包的主要特性如下：

直接读取原始区块文件，抽取速度快
将原始区块和交易数据加载至SQL数据库，便于后续的区块链数据分析
支持多流水线并行处理，可自己控制并发流水线数量
结构设计清晰，代码便于扩展

BlockETL软件包采用Java开发，支持Windows、OSX和Linux等多种操作系统，当前版本1.0.0，主要类/接口及关系如下图所示：

BlockETL软件包的目录组织及主要代码文件清单参见官网说明：http://sc.hubwiz.com/codebag/blocketl-java/

2、软件包使用方法

在开始使用软件包之前，请先安装好gradle 6、jdk 8和所选择的SQL数据库。下面以MySQL为例说明使用过程：

安装mysql服务器，参考文档：Install and Upgrading MySQL。
安装jdk 8，参考文档：JDK 8 Installation
安装gradle 6，参考文档：Gradle Installation。

2.1 初始化数据库/表结构

进入软件包的sql目录，使用ddl.sql脚本创建数据库和基础表结构：

代码语言：javascript复制

mysql -u root -p < ddl.sql

上述命令会要求交互输入root用户的密码，也可以使用其他有足够权限的用户名/密码。成功执行后，上述命令将创建数据库bitcoin_analysis和基础数据表：

blocks：比特币区块头数据表
transactions：比特币交易头数据表
tx_inputs：比特币交易输入数据表
tx_output：比特币交易输出数据表

2.2 抽取流程配置

首先根据自己的基础环境配置，修改demo/src/App.java文件中的区块目录和数据库连接信息并保存：

代码语言：javascript复制

String dataDir = "…";					           //区块数据文件目录
String dbUrl = "jdbc:…. ";               //SQL数据库连接URL  
String dbUser = "…",                     //SQL数据库用户名
String dbPassword = "…";                 //SQL数据库密码
String network = "mainnet";              //主网：mainnet，测试网：testnet