缺失参照实体找回任务的延伸思考



报告人邓思锐
报告时间2024-11-06
讨论组语法理论与语言工程
关键词参照实体缺失,空间参照,空间理解评测
摘要或简介

围绕缺失参照实体找回任务的设计和评测展开讨论。首先,针对SpaCE2024参赛队伍的评测结果,补充分析了①实体距离;②目标实体、参照实体、方位词组合方式,两方面特征对模型表现的影响。然后,介绍Jordan Zlatev(1997, 2003, 2007)、Levinson(1996)、方经民(1999)等对语言中空间参照框架和策略的分类及阐释,指出SpaCE2024参照找回任务的主要考察对象实际上是方经民(1999)所提出的位置参照点,但人类对空间语义的认知还需结合观察点和方向参照点,所以导致当前的评测方式存在①人类判断有分歧,给出的“参照物-方位词”组合可能不合乎认知习惯;②考察流于表面形式,可能不能真正涉及认知层面,两方面的缺陷,这也是参照找回评测任务亟待解决的问题。最后,简单分享了一些有关空间图式和参照找回x异形同义同源题构造的认识。

发布人dsr
发布范围讨论组内部
讨论记录

讨论认为,报告指出的问题确实是缺失参照实体找回任务需着重改进之处,有以下建议:
1. 尽可能从考察形式方面优化设计,使题目可以深入到空间语义认知,且更符合人类感知;
2. 需进一步提升语料质量和数量,特别是前者。语料标注中,需补上“目标实体”(及其它必要要素);
3. 提高与其它子任务的同源题比例。存在替换词对的语料组,都要出现在参照找回的任务考察范围内。

下载次数1
浏览次数51

 登录后可执行更多操作


© CCL of   Peking University  2019