neural-network - GloVe 嵌入 - 未知/词汇外标记
问题描述
我想知道是否有用于GloVe嵌入的通用(默认)词汇表外 (OOV)令牌。特别是对于来自斯坦福大学的预训练: https ://nlp.stanford.edu/projects/glove/
我在 SO 上找到了这个:glove.6B.50d.txt 中的“unk”是什么?
给出的答案表明该代币"unk"
代表OOV 代币,并在 Github 上共享了 Glove 项目的链接作为证据。
然而,这对我来说似乎不是很确定,因为该链接仅指"<unk>"
代码中的标记(不是"unk"
),但"<unk>"
确实存在于词汇表中!
所以我想知道,是否有任何(默认)用于 GloVe的 OOV 令牌(什么可用于未知/看不见的单词),如果有,它是什么?
解决方案
推荐阅读
- reactjs - 我们可以通过 API 使用 Json 数据来使用 React-Table 显示大约 100000 行吗?
- python - 如何在python中更新字典中的列表值
- jira - 关于问题更新事件的 JIRA 问题链接
- mysql - Orbeon Forms 2018.1.1 CE 和 MySQL:在任何已创建表单的摘要页面上收到“执行搜索错误”
- azure - 将 arm 模板部署到 azure 时出现内部服务器错误
- azure - 在 Azure 中保护 api 到 api 连接
- python-3.x - 多线程爬虫运行一段时间后越来越慢
- python - 有什么方法可以更快地运行此代码?
- flurry - Flurry Analytics 用户路径通过事件参数
- spring-mvc - log4j 没有在我的控制器中显示映射的 url