【大家的项目】一个实验性的纯rust hdfs 客户端

2024-01-05 15:02:40 浏览数 (2)

rust 社区基本没有纯 rust 实现的 hdfs 客户端, 在使用前需要下载依赖和配置环境变量, 所以我实现了一个不依赖 java 的 hdfs client 端 hdfs-client.

有如下特性

  • 依赖简单, 使用方便
  • FileReader 实现了 Read Seek, 使用方法普通 std::fs::File 类似
  • FileWriter 支持 create 和 append 模式和 Write trait
  • 支持 checksum 校验

示例代码如下

代码语言:javascript复制
use std::io::Read;
use hdfs_client::HDFS;

fn main() {
    let mut fs = HDFS::connect("127.0.0.1:9000", "root").unwrap();
    let mut fd = fs.open("/test/hello.txt").unwrap();
    let mut content = String::new();
    fd.read_to_string(&mut content).unwrap();
    println!("{content}");
}

欢迎试用和提建议.

0 人点赞