autoevaluate/autoeval-eval-financial_phrasebank-sentences_allagree-c1bf87-48200145240
收藏Hugging Face2023-10-04 更新2024-03-04 收录
下载链接:
https://hf-mirror.com/datasets/autoevaluate/autoeval-eval-financial_phrasebank-sentences_allagree-c1bf87-48200145240
下载链接
链接失效反馈官方服务:
资源简介:
---
type: predictions
tags:
- autotrain
- evaluation
datasets:
- financial_phrasebank
eval_info:
task: multi_class_classification
model: ahmedrachid/FinancialBERT-Sentiment-Analysis
metrics: ['bleu', 'google_bleu']
dataset_name: financial_phrasebank
dataset_config: sentences_allagree
dataset_split: train
col_mapping:
text: sentence
target: label
---
# Dataset Card for AutoTrain Evaluator
This repository contains model predictions generated by [AutoTrain](https://huggingface.co/autotrain) for the following task and dataset:
* Task: Multi-class Text Classification
* Model: ahmedrachid/FinancialBERT-Sentiment-Analysis
* Dataset: financial_phrasebank
* Config: sentences_allagree
* Split: train
To run new evaluation jobs, visit Hugging Face's [automatic model evaluator](https://huggingface.co/spaces/autoevaluate/model-evaluator).
## Contributions
Thanks to [@du](https://huggingface.co/du) for evaluating this model.
类型:预测结果
标签:
- AutoTrain
- 模型评估
数据集:
- 金融情感语料库(FinancialPhraseBank)
评估信息:
任务:多类别文本分类
模型:ahmedrachid/金融BERT情感分析模型(FinancialBERT-Sentiment-Analysis)
评估指标:['BLEU', 'Google BLEU']
数据集名称:金融情感语料库
数据集配置:全标注一致句子集(sentences_allagree)
数据集划分:训练集
列映射规则:
文本字段:sentence
目标标签字段:label
---
# AutoTrain评估器数据集卡片
本仓库包含由[AutoTrain](https://huggingface.co/autotrain)生成的针对以下任务与数据集的模型预测结果:
* 任务:多类别文本分类
* 模型:ahmedrachid/金融BERT情感分析模型(FinancialBERT-Sentiment-Analysis)
* 数据集:金融情感语料库
* 配置:全标注一致句子集(sentences_allagree)
* 划分:训练集
如需发起新的评估任务,请访问Hugging Face的[自动模型评估器](https://huggingface.co/spaces/autoevaluate/model-evaluator)。
## 贡献声明
感谢[@du](https://huggingface.co/du)完成本次模型评估。
提供机构:
autoevaluate原始信息汇总
数据集卡片
数据集信息
- 类型: 预测
- 标签: autotrain, evaluation
- 数据集: financial_phrasebank
评估信息
- 任务: 多类文本分类
- 模型: ahmedrachid/FinancialBERT-Sentiment-Analysis
- 评估指标: [bleu, google_bleu]
- 数据集名称: financial_phrasebank
- 数据集配置: sentences_allagree
- 数据集分割: train
- 列映射:
- text: sentence
- target: label
搜集汇总
数据集介绍

构建方式
该数据集源自金融领域情感分析任务,基于FinancialBERT模型在financial_phrasebank数据集的sentences_allagree配置上生成预测结果。构建过程采用AutoTrain自动化评估框架,通过多类文本分类任务对模型进行评测,将原始文本字段映射为sentence,目标标签映射为label,最终形成包含模型预测值的结构化数据集。
特点
数据集聚焦于金融短语的情绪一致性分析,仅保留所有标注者完全同意的样本,确保了标签的高可靠性。其独特之处在于结合了领域专用模型FinancialBERT与通用评估指标(如BLEU和Google BLEU),为金融文本情感分类提供标准化基准。数据划分明确,仅使用训练集,便于快速复现和对比实验结果。
使用方法
用户可通过HuggingFace的自动模型评估工具直接加载该数据集,用于验证FinancialBERT在金融短语情感分析上的表现。使用时需注意字段映射关系,将文本列指定为sentence,标签列指定为label。该数据集适合作为多分类任务的验证集,支持BLEU等指标的计算,便于与其他模型进行横向比较。
背景与挑战
背景概述
在金融自然语言处理领域,情感分析是一项关键任务,旨在从非结构化文本中提取市场情绪与投资倾向。该数据集由AutoTrain评估平台生成,基于FinancialBERT模型(ahmedrachid/FinancialBERT-Sentiment-Analysis)在financial_phrasebank语料库上的预测结果,由研究人员@du于近期提交。金融短语银行数据集聚焦于金融新闻句子的情感分类,其“sentences_allagree”配置确保了标注一致性。该资源为多类别文本分类任务提供了基准评估,推动了金融领域预训练语言模型性能的量化比较,对量化投资与风险管理研究具有重要参考价值。
当前挑战
当前挑战主要体现为两方面。在领域问题层面,金融情感分析需应对专业术语歧义、市场语境依赖以及跨时间维度的语义漂移,单一模型难以兼顾长尾事件与罕见表达。在构建过程中,自动评估面临标注质量验证难题:尽管采用全同意配置,但原始数据集的标注一致性仍需通过人工抽检与跨模型分歧分析来确保;同时,评估指标仅依赖BLEU与google_bleu等生成式度量,未能充分捕捉分类任务中精确率与召回率等核心维度,限制了评价的全面性。
常用场景
经典使用场景
在金融文本情感分析领域,autoevaluate/autoeval-eval-financial_phrasebank-sentences_allagree-c1bf87-48200145240 数据集作为经典的多分类基准,广泛用于评估模型对金融短语情感倾向的判别能力。研究者通常将其作为标准测试集,验证诸如FinBERT等预训练语言模型在金融语境下的情感极性分类效果,涵盖积极、消极与中性三类标签,从而推动金融自然语言处理任务的标准化评测。
实际应用
在实际应用中,该数据集驱动的模型被部署于金融机构的舆情监控系统,用于实时分析新闻、财报及社交平台上的市场情绪,辅助投资决策与风险管理。此外,其衍生工具还可自动标注客户反馈中的情感倾向,优化客服与营销策略,体现了从学术研究到商业落地的价值闭环。
衍生相关工作
基于此数据集,衍生出多项经典工作,包括FinancialBERT、FinBERT等专用于金融文本的预训练模型,以及针对情感分析任务优化的微调框架。这些工作不仅提升了领域内情感分类的精度,还催生了如跨语言金融情感分析、细粒度情感识别等前沿方向,为金融科技领域的自然语言处理研究奠定了基石。
以上内容由遇见数据集搜集并总结生成



