时间戳

首页 > 解决方案 > 如何从给定句子中删除关键字

python - 如何从给定句子中删除关键字

问题描述

如何从短语中删除关键字？

例如，

莱昂内尔·安德烈斯·梅西（Lionel Andrés Messi）是一名阿根廷职业足球运动员，司职前锋，同时担任西班牙巴塞罗那俱乐部和阿根廷国家队的队长。

如何从这句话中删除关键字（人名除外），例如“美国人”、“足球运动员”、“巴塞罗那”等等。

我意识到关键字必须是名词，并且我遇到了一个名为 NLTK 的库，也许这可以帮助我实现我想要实现的目标。

函数示例：

remove(sentence, word_to_not_remove)

>>> sentence = 'Lionel Andrés Messi is an Argentine professional footballer who plays as a forward and captains both Spanish club Barcelona and the Argentina national team.'
>>> remove(sentence, 'Lionel Andrés Messi')
footballer

标签： pythonnlpnltksentence-similarity

解决方案

我认为您需要的是 NER（命名实体识别）。

作为第一步，您可以查看 Spacy [ https://explosion.ai/demos/displacy-ent ]

import spacy
text = "Lionel Andrés Messi is an Argentine professional footballer who plays as a forward and captains both Spanish club Barcelona and the Argentina national team."
nlp = spacy.load("en_core_web_sm")
doc = nlp(text)

for ent in doc.ents:
    print(ent.text, ent.start_char, ent.end_char, ent.label_)

Andrés Messi 7 19 PERSON
Argentine 26 35 NORP
Spanish 101 108 NORP
Barcelona 114 123 GPE
Argentina 132 141 GPE

PS：如果您需要特定的实体提取，您可能需要针对您的特定用例对其进行训练

更多文档：https ://spacy.io/usage/linguistic-features#named-entities

在这里可视化：https ://explosion.ai/demos/displacy-ent

推荐阅读