大数据处理实践探索 ---- 大数据机器学习:spark mlib 【编程实践 预测收入】

2021-03-15 22:15:44 浏览数 (1)

文章大纲

  • 1. 数据导入
    • spark 环境加载
    • 基本处理
  • 2.进行主成分分析(PCA)
  • 3.训练分类模型并预测居民收入
  • 4.超参数调优

1. 数据导入

代码语言:javascript复制
#//导入需要的包
from pyspark.ml.feature import PCA 
from pyspark.sql import Row
from pyspark.ml.linalg import Vector

0 人点赞