KnowBERT
KnowBERT
2024年7月9日创建
附件不支持打印
加载失败,
•
论文:Knowledge Enhanced Contextual Word Representations
•
源码:NULL
KnowBERT 重点也是在如何将知识库里的结构化信息融入大规模预训练模型中去,主要是通过 Knowledge Attention and Recontextualization component (KAR) 实现的。论文中关于BERT模型和知识库的介绍这里就不再啰嗦,直奔主题看看 KAR 到底是怎样的。