I.8 小结
本附录讨论了与词汇项意义相关的广泛问题,重点包括:
词义是词的意义所在;定义和意义关系是在词义层级上,而非词形层级上定义的。
许多词具有多义性,即拥有多个义项。
义项间关系包括同义、反义、部分关系,以及下位和上位等分类学关系。
WordNet 是大型英语词汇关系数据库,许多其他语言也有各自的 WordNet。
词义消歧(WSD)是判断一个词在语境中采用哪个正确义项的任务。有监督方法使用一个句子语料库,其中单个词(词汇样本任务)或所有词(全词任务)都以人工方式标注了来自 WordNet 等资源的义项。SemCor 是规模最大的 WordNet 义项标注语料库。
WSD 的标准有监督算法是使用上下文嵌入的最近邻算法。
使用词性及目标词上下文中各词嵌入的基于特征算法也表现良好。
WSD 的一个重要基线是最高频义项;在 WordNet 中,这等同于选择第一个义项。
另一个基线是名为 Lesk 算法的基于知识的 WSD 算法;它选择词典定义与目标词上下文共享词数最多的义项。
词义归纳是在无监督条件下学习词义的任务。