LLM2D
Factify5WQA 概述:基于五W问题的事实验证
Overview of Factify5WQA: Fact Verification through 5W Question-Answering
作者: Suryavardan Suresh, Anku Rani, Parth Patwa, Aishwarya Reganti, Vinija Jain, Aman Chadha, Amitava Das, Amit Sheth, Asif Ekbal
发布日期: 10/8/2024
arXiv ID: oai:arXiv.org:2410.04236v1

摘要

研究人员发现,假新闻的传播速度远快于真实新闻。这在当今社会是一个重大问题,尤其是在社交媒体成为年轻人群体主要新闻来源的今天。因此,事实核查成为一项重要任务,许多媒体网站也为此做出贡献。鉴于在线假新闻的数量庞大,人工事实核查是一项繁琐的任务。Factify5WQA 共享任务旨在通过提供一个基于方面问题的问答事实核查方法的数据集,来推动自动假新闻检测研究。每个声明及其支持文档都与 5W 问题相关联,这些问题有助于比较两个信息源。该任务的目标性能指标是通过使用 BLEU 分数比较答案来衡量答案的准确性,然后是分类的准确性度量。该任务中包含使用自定义训练设置和预训练语言模型等方法的提交结果。表现最佳的团队取得了 69.56% 的准确率,比基线提高了近 35%。