代码之家 › 专栏 › 技术社区 › Kaiser

Space用于命名实体识别(NER)的损失函数是什么

named-entity-recognition loss-function spacy

Kaiser · 技术社区 · 3 年前

我有兴趣了解空间库在命名实体识别背景下用于训练模型的特定损失函数。Space是否为NER任务推荐了标准损失函数?对于特定的净入学率情景,是否有推荐的替代损失函数?我还想知道loss函数是否可以自定义,以及它是如何在Space库中实现的。 . . . . 感谢您提供如此详细的答复。我真的很感谢你的帮助!

0 回复 | 直到 3 年前

syllogism_ 3 年前

这个问题的答案比你想象的要复杂,因为spaCy使用了一个基于过渡的NER模型,并以模仿学习为目标。算法最好的描述是这个视频,尤其是结构化预测部分: https://www.youtube.com/watch?v=sqDHBH9IjRU

用于决定不同动作之间的实际损失函数也有点棘手。实现方式如下: https://github.com/explosion/spaCy/blob/0367f864fe90dfa1dcdd0bfaf8f06dbcd5e97e45/spacy/syntax/_parser_model.pyx#L153

我相信我已经在其他评论中描述过了,但我不能立即找到它。基本上可能有几个同样好的转换,我们希望目标函数能够解释这一点。第4节对此进行了描述: https://aclanthology.org/P05-1022.pdf

推荐文章

Shadi · 命名实体识别大写问题

8 年前

akay · 斯坦福NLP NER,情绪,SUTime性能问题

8 年前

user1170883 · 斯坦福CRFClassizer性能评估输出

8 年前

MenorcanOrange · MITIE-ner模型

8 年前

meow · NLTK标记化但不拆分命名实体

8 年前

vinita · 基于数据库中的值作为训练集从电子邮件中提取字段

9 年前

hamsy · R中的自定义令牌注释

9 年前

AbtPst · 如何为StanfordNER清理句子

10 年前

Mark · 使用CoreNLP提取多单词命名实体

12 年前