斯坦福SQuAD机器阅读理解大赛中夺冠

admin发布

在由斯坦福大学发起的机器阅读理解领域权威评测SQuAD(Stanford Question Answering Dataset)中,哈工大讯飞联合实验室荣获冠军,提交的系统不仅在EM指标(精准匹配率)超过人类平均水平,并成为首个F1指标(模糊匹配率)上超过89%的系统。

SQuAD挑战赛成绩榜单

科大讯飞高级副总裁、AI研究院院长、认知智能国家重点实验室主任胡国平表示,科大讯飞非常高兴看到更多研究人员加入到机器阅读理解技术的研究中来。前不久微软亚洲研究院、阿里巴巴分别在EM指标上超过人类平均水平,并且有许多中国团队在榜单中名列前茅,我们对中国研究机构在这个领域所取得的好成绩表示祝贺。但同时,我们必须清楚地认识到,虽然目前的系统在SQuAD挑战赛中超过了人类平均水平,但这并不能代表机器在机器阅读理解任务上“完全”打败了人类。

他表示,真正的阅读理解过程远比我们想象的要复杂,以目前的技术水平还很难做到深层的推理和归纳。鉴于此,目前科大讯飞还在积极探索其他类型的阅读理解,例如基于知识、常识的阅读理解以及基于综合线索的阅读理解,并取得了一定的成绩。相信在不久的将来,科大讯飞将在机器阅读领域为大家展示更多的可能。