2021年3月25日
基于Apache Spark 3.1.1的CDS 3.1在CDP Private Cloud Base 7.1.6上正式发布,这是CDS 3的小版本更新发布,主要改进包括:
- Parcel包含spark-hbase connector;
- Apache Spark 3.1.1的所有性能增强提升,比如新的优化器规则和改进的子表达式消除;
- 统一创建表SQL的语法;
- Shuffled hash join改进;
下载地址:
https://archive.cloudera.com/p/spark3/3.1.7270.0/
参考文档:
https://docs.cloudera.com/cdp-private-cloud-base/7.1.6/cds-3/topics/spark-spark-3-overview.html