hansard
收藏数据集概述:Canadian Hansard (A2AJ)
数据集地址: https://huggingface.co/datasets/a2aj/hansard
维护方: Access to Algorithmic Justice (A2AJ)
许可协议: MIT License(数据集代码及A2AJ的数据处理工作),同时需遵守每个文档的 upstream_license 字段中的上游许可(可能包含商业使用限制等)。
数据状态: Alpha版本,持续更新中(最后更新于2026-06-28)。
数据集摘要
该数据集提供加拿大立法机构的议会辩论记录(Hansard)的结构化转录文本,每行代表一次“干预”(即发言者发言或程序性记录)。目前涵盖安大略省立法议会的数据,旨在支持计算法律与政治研究,例如:
- 程序化搜索议会记录中的模式。
- 追踪辩论、政策和语言随时间的演变。
- 为法规解释收集立法目的和意图的证据。
- 将议会讨论与立法和判例法关联。
- 支持法律技术原型设计和面向公众利益的语言模型研究(尤其是促进边缘化和低收入社区诉诸司法)。
数据集规模与结构
| 管辖区域 | 行数 | 会议天数 | 日期范围 | 语言 |
|---|---|---|---|---|
| 安大略省立法议会 | 1,347,812 | 4,474 | 1974-03-05 → 2026-06-02 | en |
总行数:1,347,812
数据字段说明
每行代表一个“干预”(发言者发言或程序性记录)。
| 字段 | 类型 | 描述 |
|---|---|---|
ID |
string | 稳定的行标识符(会议日期 + 序列号) |
Date |
string | 会议日期(YYYY-MM-DD) |
jurisdiction |
string | 立法机构(例如 ontario) |
chamber |
string | 立法机构内的具体议院(例如 legislative_assembly) |
language |
string | 源页面语言(例如 en) |
OrderofBusiness |
string | 高层级议程标题 |
SubjectofBusiness |
string | 特定主题/事项 |
PersonSpeaking |
string | 发言人标签(程序性行为行为行留空) |
intervention_type |
string | speech(发言)或 procedural(程序性记录) |
Intervention |
string | 干预文本内容 |
upstream_license |
string | 来源立法机构的许可/归属条款 |
source_url |
string | 该行数据来源的页面URL |
缺失值以空字符串或null表示,程序性行的 PersonSpeaking 字段为空。
数据语言
当前仅覆盖英语;未来可能为双语管辖区域增加法语版本。
数据拆分
每个管辖区域(目前为安大略省 ontario )的数据在单个 train 拆分中提供。
数据加载方式
可使用 Hugging Face datasets 库加载:
python from datasets import load_dataset rows = load_dataset("a2aj/hansard", "ontario", split="train") df = rows.to_pandas()
数据也以Parquet格式提供:
python import pandas as pd df = pd.read_parquet("hf://datasets/a2aj/hansard/ontario/train.parquet")
工作示例笔记本可在 GitHub 获取。
数据创建与来源
- 策展理由: 民主化加拿大议会记录,支持大规模实证研究,推动负责任的人工智能在司法和民主领域的应用。仅在网站服务条款允许的情况下进行爬取。
- 源数据与标准化: 从官方立法机构网站爬取HTML页面,解析为结构化行。文本进行最小化标准化(HTML转纯文本、空白清理),议程标题映射到
OrderofBusiness/SubjectofBusiness,每次发言或程序性记录生成一行。 - 非官方版本声明: 此处文本为非官方副本,权威版本请参考
source_url中的源URL。 - 非附属/认可声明: A2AJ及数据集制作与所列立法机构或政府无隶属关系,亦不获其认可。
使用注意事项
- 社会影响: 开放议会数据可减少信息不对称,但也可能被滥用。鼓励衍生工具应促进而非损害诉诸司法和民主问责制。
- 偏差与代表性: 汉萨德记录反映在特定编辑和程序性惯例下议会的言论,并非所有政治活动的中立或完整记录。
- 局限性: 解析过程为自动化且近似。不同议会的HTML格式存在差异,
speech/procedural分类为启发式方法,附件PDF未被解析(仅解析HTML记录)。依赖任何行数据前请对照官方来源核实。
数据策展方与联系方式
- 策展方: Access to Algorithmic Justice (A2AJ)
- 联系邮箱: a2aj@yorku.ca
- 致谢: 本研究成果部分获得安大略法律基金会、加拿大社会科学与人文研究理事会资助,Digital Research Alliance of Canada提供计算资源,难民研究中心、难民法律实验室、Osgoode Hall法学院提供行政支持。




