qa4pc/QA4PC
收藏Hugging Face2021-11-23 更新2024-03-04 收录
下载链接:
https://hf-mirror.com/datasets/qa4pc/QA4PC
下载链接
链接失效反馈官方服务:
资源简介:
QA4PC数据集是一个用于跨政策合规性检测的问答数据集。它包含训练集和评估集,训练集通过转换ShARC数据生成,评估集分为蕴含任务和问答任务。蕴含任务数据包括政策、问题、场景和答案,而问答任务数据则包含问题和逻辑表达式树。
The QA4PC dataset is a question answering dataset dedicated to cross-policy compliance detection. It includes a training set and an evaluation set. The training set is generated by converting the ShARC dataset, and the evaluation set is divided into two tasks: textual entailment and question answering. The textual entailment task dataset comprises policy texts, questions, scenarios, and answers, whereas the question answering task dataset consists of questions and logical expression trees.
提供机构:
qa4pc原始信息汇总
数据集概述
训练集
-
训练集数据来源于ShARC数据集,通过执行以下命令下载并转换:
wget https://sharc-data.github.io/data/sharc1-official.zip unzip sharc1-official.zip python create_train_from_sharc.py -sharc_dev_path sharc1-official/json/sharc_dev.json -sharc_train_path sharc1-official/json/sharc_train.json
评估集
蕴含数据
- 包含政策和问题、场景及答案(是、否、可能)的数据文件:
dev_entailment_qa4pc.jsontest_entailment_qa4pc.json
QA数据
-
包含QA任务数据文件:
dev_sc_qa4pc.jsontest_sc_qa4pc.json
-
包含开发和测试集的表达树数据文件:
trees_dev_test_qa4pc.json
搜集汇总
数据集介绍

构建方式
QA4PC数据集旨在通过问答机制实现跨策略合规性检测,其构建过程基于ShARC数据的深度转化。研究人员首先从ShARC官方渠道获取原始数据,随后通过自定义脚本将ShARC格式的对话树结构转换为适用于合规性检测的问答对与蕴含关系样本。训练集由ShARC的开发集与训练集经过格式统一与任务适配生成;评估集则细分为蕴含任务数据与问答任务数据,分别对应不同的推理形式。此外,数据集还额外提供了表达式树结构,用于描述策略、问题与逻辑表达式之间的复杂映射关系,从而支撑更精细的合规推理研究。
特点
该数据集具备鲜明的多任务适配特性,同时支持蕴含判定与问答两种核心任务,为跨策略合规检测提供了统一的评估基准。其蕴含任务数据包含策略、问题、场景与答案(是/否/可能),每个样本均保留ShARC数据源的树型结构与来源信息,确保可追溯性。问答任务数据则聚焦于场景与问题的直接交互。表达式树结构的引入进一步增强了逻辑表达的可解释性,使得策略与问题之间的依赖关系得以显式建模。这种设计不仅提升了数据集的实用价值,也为后续研究提供了丰富的结构化信息。
使用方法
使用QA4PC数据集时,研究者可依据任务需求选择对应的子集。对于蕴含任务,可直接加载dev_entailment_qa4pc.json与test_entailment_qa4pc.json文件,其中包含策略、场景、问题与答案的完整映射。对于问答任务,则使用dev_sc_qa4pc.json与test_sc_qa4pc.json文件,专注于场景与问题的直接问答。如需深入分析策略逻辑结构,可结合trees_dev_test_qa4pc.json中的表达式树数据进行联合建模。训练集需通过提供的脚本从ShARC数据自主生成,确保数据使用的一致性与可复现性。所有数据均以JSON格式存储,便于直接导入常见的数据处理框架。
背景与挑战
背景概述
QA4PC数据集由相关研究团队于近年来创建,旨在通过问答机制解决跨策略合规性检测这一新兴研究问题。该数据集基于ShARC数据进行转换与扩展,聚焦于策略文档与用户场景之间的逻辑对齐,核心研究问题在于如何利用自然语言理解技术自动判断给定场景是否符合特定策略规则。QA4PC的提出为策略合规性自动化评估提供了标准化基准,推动了人机交互中决策支持系统的发展,对法律、医疗及金融等领域的合规性检查具有重要影响力。
当前挑战
QA4PC所解决的领域问题在于策略合规性检测中的语义歧义与逻辑复杂性,现有模型难以准确理解策略中的条件语句与多步推理。构建过程中面临的主要挑战包括:原始ShARC数据需转换为蕴含与问答任务格式,涉及策略树与场景的精确对齐;数据标注需确保策略问题与答案的一致性,避免因自然语言变体导致的噪声;此外,跨策略场景的多样性要求数据集覆盖广泛的政策领域,以评估模型的泛化能力,这增加了数据收集与质量控制的难度。
常用场景
经典使用场景
QA4PC数据集专为基于问答的跨策略合规性检测任务而设计,其经典使用场景聚焦于通过问答范式评估用户行为是否符合复杂政策条文。该数据集以ShARC为基础,将政策文本、场景描述与结构化问答树结合,要求模型在理解多轮对话逻辑后,从预定义答案集(是/否/可能)中判定合规性。研究者常利用其蕴含任务(Entailment)和问答任务(QA)双轨设计,测试模型在跨政策领域(如法律、医疗、金融)的泛化推理能力,尤其关注政策间冲突与隐含条件下的逻辑一致性。
衍生相关工作
基于QA4PC衍生的工作主要集中在三个方向:一是改进逻辑树构建策略,如引入对比学习增强政策间差异表征(如PolicyCLIP);二是扩展至多语言政策合规检测,通过跨语言迁移学习实现中文、德语政策文本的适配(如XPolicyQA);三是结合大型语言模型进行零样本推理,涌现出利用Chain-of-Thought提示增强政策解释的尝试(如CoT-Policy)。这些工作进一步验证了问答范式在政策理解领域的普适性,并催生了面向动态政策更新的持续学习框架。
数据集最近研究
最新研究方向
QA4PC数据集聚焦于通过问答机制实现跨策略合规性检测,这一前沿方向在人工智能与法律交叉领域引发广泛关注。随着全球监管环境日趋复杂,特别是金融、医疗和隐私保护等领域的合规要求日益严格,传统规则匹配方法难以应对多源政策间的冲突与动态更新。该数据集基于ShARC框架构建,将自然语言问答与逻辑表达树相结合,为模型提供了从政策文本中提取可执行合规规则的能力。近期研究热点包括利用预训练语言模型进行端到端的合规推理,以及探索跨领域迁移学习以降低标注成本。该工作不仅推动了可解释AI在合规自动化中的应用,还为构建人机协同的智能审计系统奠定了数据基础,其影响辐射至法律科技与负责任AI的交叉领域。
以上内容由遇见数据集搜集并总结生成



