neuralcoref崩溃等问题解决方法

spacy降级

按照neuralcore所给方式安装出现各种问题，首先如果安装spacy最新版本的话，加载直接崩溃，我在jupyter上直接kernel中断，我一开始试着把spacy降级，直到2.1.x的时候可以兼容，如果你需要加载最新版本的模型，请看下面一种方法

从source安装

测试环境：

• Ubuntu 18.04
• python 3.6
  我是使用的anaconda3，如果你是用的virtualenv意思是一样的（修改copy部分即可），下面指令一条一条执行就可以，首先安装spacy

conda create -n tenv python=3.6
conda activate tenv
pip install cython boto3
git clone https://github.com/explosion/spaCy.git
cd spaCy
pip install -r requirements.txt
python setup.py build_ext --inplace

下面是拷贝包文件到虚拟环境中

cp -R spacy  ~/anaconda3/envs/tenv/lib/python3.6/site-packages/

下面安装neuralcoref

git clone https://github.com/huggingface/neuralcoref.git
cd neuralcoref
python setup.py build_ext --inplace
cp -R neuralcoref ~/anaconda3/envs/tenv/lib/python3.6/site-packages/

到这里如果没问题的话就安装完成了，下面可以测试一下

python -m spacy download en
python -c "import spacy; nlp = spacy.load('en'); import neuralcoref; neuralcoref.add_to_pipe(nlp); doc = nlp(u'My sister has a dog. She loves him.'); print(doc._.coref_clusters)"

没有问题的话应该输出

[My sister: [My sister, She], a dog: [a dog, him]]

neuralcore是不支持中文的，如果你想要在中文上实现，可以按照官方给出的方法training