Lilian Weng — Lil’Log·· 2020-10-29AI 评估 · 28/100分数表示内容值得关注的程度,依据实质份量、信息增量、证据强度、读者相关性和可用性,按内容类型加权。显示分数为两次独立评分的平均值。AI 判断可能有误,评分不代表事实已被核实,也不同于热点榜的讨论热度。
如何构建开放域问答系统?解析 Retriever-Reader 等三大框架
How to Build an Open-Domain Question Answering System?
AI 导读
开放域问答(ODQA)要求模型在无相关上下文的情况下回答事实型问题,可分为开放书与闭卷两类。基于 DrQA 的 retriever-reader 框架先用 TF-IDF 等检索器从 Wikipedia 取回相关文档,再由 reader 抽取答案;Lewis 等人发现公开 QA 数据集训练集与测试集重叠严重,58-71% 的测试答案曾出现在训练集中。
来源:Lilian Weng — Lil’Log · lilianweng.github.io