主要分享大数据相关的知识，如Spark、Hudi

原创 Spark ML LR 用 setWeightCol 解决数据不平衡

前言 如题，记录在Spark ML LR中如何解决数据不平衡。参考：Dealing with unbalanced datasets in Spark MLlib 1、数据不平衡 指label == 1和label == 0 的数据比例的很多，如80%和20%，这样导致模型的结果的准确率也不平衡，不准确。 2、setWeightCol 主要代码 val labelCol = "label" de...