openhands-feedback
收藏资源简介:
OpenHands Feedback Dataset是一个用户与OpenHands AI编码助手交互和反馈的集合。该数据集包含用户与AI编码助手交互的真实示例,包括成功和失败的交互,以及用户对响应质量和帮助性的反馈。数据集目前包含275个用户交互示例(60%为正面反馈,40%为负面反馈),总大小约为310MB。每个示例包括用户与助手之间的完整交互轨迹、用户的反馈以及交互的元数据。数据由All Hands AI收集和存储,该公司由OpenHands维护者创立,旨在支持和改进OpenHands。数据集以Parquet格式提供,包含版本、反馈、权限、时间戳和轨迹等字段。该数据集旨在用于改进AI编码助手、研究人机交互模式、分析代码生成中的常见故障模式以及开发更好的评估指标。数据集在发布前经过质量控制,并遵循MIT许可证。
OpenHands Feedback Dataset
数据集描述
什么是 OpenHands Feedback?
OpenHands Feedback Dataset 是一个用户与 OpenHands AI 编码助手交互和反馈的集合。该数据集包含用户与 AI 编码助手交互的真实示例,包括成功和失败的交互,以及用户对响应质量和帮助性的反馈。
数据集目前包含 275 个用户交互示例(60% 正面反馈和 40% 负面反馈),总大小约为 310MB。每个示例包括用户与助手之间的完整交互轨迹,以及用户的反馈和交互的元数据。
数据收集者
数据由 All Hands AI 收集和存储,该公司由 OpenHands 维护者创立,旨在支持和改进 OpenHands。用户通过 OpenHands 界面(通过点赞/点踩按钮)提供反馈时,可以选择公开或私下提交反馈。
数据收集过程
用户可以通过以下方式在 OpenHands 交互过程中提供反馈:
- 点击点赞或点踩按钮
- 提供电子邮件地址(可选,用于潜在的后续问题)
- 选择是否公开他们的反馈
数据结构
数据集以 Parquet 格式提供,包含以下字段:
version: 标识反馈格式的字符串feedback: 用户反馈文本permissions: 指示反馈是公开还是私有的字段timestamp: 反馈提交的时间trajectory: 包含交互步骤的列表,包含:content: 消息内容extras: 附加元数据id: 消息标识符message: 实际消息文本observation: 系统观察source: 消息来源(用户/助手)timestamp: 消息发送的时间
使用和限制
预期用途
该数据集旨在用于:
- 改进 AI 编码助手
- 研究人机交互模式
- 分析代码生成中的常见故障模式
- 开发更好的编码助手评估指标
隐私和伦理
- 仅包含公开共享的反馈
- 已删除个人信息和电子邮件地址
- 已审查数据以删除任何敏感信息
- 在发布前,贡献公开反馈的用户有机会选择退出
数据集创建
数据质量
数据集在发布前进行质量控制:
- 删除低质量反馈
- 删除提交者电子邮件地址
- 审查敏感信息
- 验证数据格式和完整性
更新
数据集将定期更新,以包含新的公开反馈并进行处理。更新将遵循相同的质量控制和隐私保护流程。
附加信息
许可证
该数据集在 MIT 许可证下发布,与 OpenHands 本身的许可证相同。
引用
如果您在研究中使用此数据集,请引用:
bibtex @misc{openhands-feedback, title={OpenHands Feedback Dataset}, author={All Hands AI}, year={2024}, howpublished={url{https://huggingface.co/datasets/all-hands/openhands-feedback}} }
反馈和支持
如有问题、疑虑或请求删除数据:
- 联系:contact@all-hands.dev
- GitHub: OpenHands Repository
请求删除特定数据:
- 对于单个条目:使用提交时提供的链接和密码
- 对于所有数据:从提交时使用的电子邮件地址联系 contact@all-hands.dev




