【scikit-learn】GridSearchCV 在windows中并行计算出错的问题

先说下环境:Win10+spyder+py3.6

  • 控制CPU个数的参数n_job当设置为1时程序能够正常运行。
  • 但是当n_job>1或者n_job=-1时,程序会报错,报错内容如下:
    错误I
  • 通过大量查阅资料,以及很多人尝试的标准解决方法如下:
    官方解决方案
  • 按照该方法描述修改后,CSDN有位博主确实能够成功运行了。可是这边进行了同样的修改后,问题并没有解决,还是出现上述错误。
  • 这时stackoverflow上有位大佬说可以按如下方式解决:
    大佬解决方案
  • 按照他一波操作后,依然没什么卵用。
  • 但是呢,在重新打开spyder首次运行程序时,却发生了以下的报错内容,这让人似乎感觉到了一线生机:
    错误II
  • 之后再运行都是出现错误I的内容。
  • 总结一下程序发生错误的问题如下:
    1.重启spyder(相当于重启kernel),首次运行程序会发生错误II
    2.之后无论怎样运行程序,都是发生错误I
  • 于是直觉告诉我错误II才是本质原因,经过一波操作后,设置 __spec__ = None,成功解决该问题。

贴下成功运行的代码:

from sklearn.datasets import load_wine
from sklearn.model_selection import GridSearchCV
from sklearn import svm
from sklearn.ensemble import BaggingClassifier

def Test(): 
    data = load_wine()
    Feat = data.data
    Label = data.target
    bag_clf = BaggingClassifier( base_estimator=svm.SVC(kernel='rbf'), bootstrap=True,n_jobs=-1)
    bag_clf.fit(Feat,Label) 
    Params = [{"base_estimator__C":[1,2,3],
               "base_estimator__gamma":[1.2,0.9],
               "max_features":[0.3,0.4,0.5],
               "max_samples":[0.9,0.8,0.7],
               "n_estimators":[60,80,100],
               "random_state":[120,100]}]
    grid_search = GridSearchCV(bag_clf, Params, cv=5,verbose=1.1,n_jobs=-1)
    grid_search.fit(Feat,Label)
    print('bestparam=',grid_search.best_params_ ,'score=',grid_search.best_score_)
        
if __name__ == '__main__':
    __spec__ = None
    Test() 

运行结果如下:
运行结果
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容

  • 这个不错分享给大家,从扣上看到的,就转过来了 《电脑专业英语》 file [fail] n. 文件;v. 保存文...
    麦子先生R阅读 6,668评论 5 24
  • 你有太多的风景想看,可你的双腿还走不了太远;你有太多的朋友相交,可留下来的只有那么几个;你有太多的心情想分享,可最...
    温渺baby阅读 956评论 0 2
  • 对象和类 基本概念 对象:对象是类的一个实例,有属性和行为。例如,一条狗是一个对象,它的属性有:颜色、名字、品种;...
    追风剑007阅读 311评论 0 0
  • 前方一条通往远方的路它要通往何处,它要通往那片迷失的沙漠,还是那茂密的森林,或者通往那死寂的冥冥之乡。 ...
    答案在风中飞扬阅读 255评论 0 1