nlp - 如何查找与命名实体相关的所有维基百科页面？

Question

给定一个文本，我希望找到与文本中提到的命名实体相关的所有维基百科页面的链接。有没有可靠的方法来做到这一点？

例如，考虑文本，

Mark Elliot Zuckerberg 是美国互联网企业家和慈善家。

" 鉴于此，我正在查看带有以下链接的输出：

• https://en.wikipedia.org/wiki/Mark_Zuckerberg
• https://en.wikipedia.org/wiki/Americans
• https://en.wikipedia.org/wiki/Internet
• https://en.wikipedia.org/wiki/Entrepreneurship
• https://en.wikipedia.org/wiki/Philanthropy

考虑到 NLP 的当前状态，这可能吗？非常感谢！

标签： nlpmediawikistanford-nlpwikipedianamed-entity-recognition

Answer 1

正如@Jindřich 告诉你的那样，你应该毫无疑问地看看实体链接，有时还有（命名的）实体消歧或“维基化”。学术界在这个主题上做了很多工作（看看 TAC、KBP、NEEL 挑战）。

许多软件都这样做，仅举几例：

• DBpedia 聚焦
• IBM 沃森
• 巴贝尔菲

请注意，结果高度依赖于您将处理的文本类型，并且您可能需要在使用软件之前评估它们的可靠性。