IBM自动辩论系统架构及其性能评估
| 来源:【字号:大 中 小】
2021年3月18日,IBM可参与人类辩论的AI 系统——Project Debater登上了Nature封面,介绍了Project Debater 的架构并进行了性能评估。
Project Debater包含四个主要模块:论据挖掘、论据知识库(AKB)、论点反驳和辩论构建。论据挖掘模块负责找出与辩题相关的论据和反驳论据。AKB 模块包含一般辩论相关的立论论据、反驳论据及其他相关文本,而不仅针对某一辩题,给出一道辩题它就可以找出最相关的材料。论点反驳模块从前两个模块中匹配反驳对手发言的潜在反对主张,并基于匹配结果生成潜在的回应。辩论构建模块则选择其他模块建议的文本,并将其组合成流畅的表述。其中前两个模块是辩论语音的内容来源。
为评估Project Debater的整体性能,文章比较了Project Debater与一个多文档摘要系统和一个微调的GTP-2语言模型的公开演讲生成性能,请注解者评估,并进行周期性评估跟踪其随时间的进展情况,评估结果均显示了Project Debater优良性能。