本文介绍了Spacy：尝试设置冲突的文档：一个令牌只能是一个实体的一部分，因此请确保您正在设置的实体不会重叠的处理方法，对大家解决问题具有一定的参考价值，需要的朋友们下面随着小编来一起学习吧！
问题描述
我正在尝试使用Spacy从文本中提取所需的自定义实体。
import spacy
from spacy_lookup import Entity
data = {0:["count"],1:["unique count","unique"]}
def processText(text):
nlp = spacy.blank('en')
for i,arr in data.items():
fLabel = "test:"+str(i)
fEntitty = Entity(keywords_list=list(set(arr)),label=fLabel)
fEntitty.name = fLabel
nlp.add_pipe(fEntitty)
match_doc = nlp(text)
print(match_doc.ents)
processText("unique count of city")
但上述代码抛出的错误与
类似ValueError: [E103] Trying to set conflicting doc.ents: '(1, 2, 'test:0')' and '(0, 2, 'test:1')'. A token can only be part of one entity, so make sure the entities you're setting don't overlap.
提前谢谢！！
推荐答案
在空格中，命名实体永远不能重叠。如果&Jon Allen&是一个名字，你就不应该把&John&也注释为一个名字。因此，在培训之前，您必须解决这些重叠/冲突的案例。
在评论中讨论后编辑：
您需要实现on_match函数以筛选出非重叠集合的匹配项。
这篇关于Spacy：尝试设置冲突的文档：一个令牌只能是一个实体的一部分，因此请确保您正在设置的实体不会重叠的文章就介绍到这了，希望我们推荐的答案对大家有所帮助，也希望大家多多支持编程学习网！
本站部分内容来源互联网,如果有图片或者内容侵犯您的权益请联系我们删除！