【网易智能讯8月19日消息】近日,MRQA 2019阅读理解国际评测落下帷幕,百度平均 F1值72.55%,排名第一。
据了解,本次评测包括训练集和测试集共18个阅读理解数据集,覆盖面广,综合难度高。从数据源角度看,包括百科、新闻、搜索结果、电影、生物医药甚至演讲脚本。从应用任务角度来看,评测不仅包含了面向问答设计的数据集,还包含了面向信息抽取、语义解析等任务设计的数据集。
此外,从语言理解的能力来看,评测除了包含传统的抽取式问答数据集,还包含了多个需要推理和计算的数据集。
据介绍,针对上述问题,百度在本次评测中提出了一个通用的“预训练-微调”模型训练框架D(ecathlon)-NET,以此为优势取得了平均 F1值72.55%。(定西)