q298211995的博客

原创 Dask并行模式训练xgboost

文章目录1. 准备Dask2. 准备数据3.分割训练集和测试集4. 训练模型5. 模型预测6.计算模型正确率1. 准备Dask保证两台计算机在同一局域网下，并且Python和Dask是同一个版本。分别在两台计算机中打开cmd，在主计算机的cmd中输入dask-scheduler，计算机将自动返回一个ip地址。在副计算机中输入dask-worker+ip地址，即可建立Dask分布式。 2. 准备数据首先准备用于dask_xgboost的数据集。这里准备的数据集是2.5GB的新闻数据，新闻数据已经转换