r20-portfolio-ai-perception
收藏资源简介:
R20数据集名为'AI品牌认知中的组合框架',主要用于研究企业组合框架是否会影响大型语言模型对品牌的认知。数据集包含2,930条结构化观察数据,来自一个控制实验,涉及11个品牌、4个组合(LVMH、Unilever、Procter & Gamble、Toyota)和10个来自7种训练传统的LLM。实验包括直接评分、推荐提示和多轮对话等多种提示模式。关键发现表明,组合框架对AI品牌认知没有系统性影响(平均|delta DCI| = .31,8/11品牌TOST等效性)。数据集包含多个文件,如data.csv、main_experiment.jsonl等,分别对应不同的实验条件。数据集适用于文本生成、品牌认知和跨文化分析等任务。
The R20 dataset, titled "Combination Frameworks in AI Brand Perception", is primarily designed to investigate whether corporate combination frameworks influence large language models' (LLMs) brand perception. It contains 2,930 structured observational data points derived from a controlled experiment, involving 11 brands, 4 conglomerates (LVMH, Unilever, Procter & Gamble, Toyota), and 10 LLMs across 7 training paradigms. The experiment adopts multiple prompting modes including direct rating, recommendation prompts, and multi-turn dialogues. Key findings indicate that combination frameworks exert no systematic impact on AI brand perception, with a mean |delta DCI| = .31 and 8 out of 11 brands passing TOST equivalence testing. The dataset includes multiple files such as data.csv, main_experiment.jsonl, etc., corresponding to different experimental conditions respectively. This dataset is applicable to tasks including text generation, brand perception research, and cross-cultural analysis.
R20: Portfolio Interference in AI Brand Perception 数据集概述
数据集基本信息
- 数据集名称:R20: Portfolio Interference in AI Brand Perception
- 数据集地址:https://huggingface.co/datasets/spectralbranding/r20-portfolio-ai-perception
- 语言:英语、法语、中文、日语、俄语
- 许可证:MIT
- 任务类别:文本生成
- 标签:品牌感知、LLM评估、投资组合干扰、光谱品牌理论、光谱免疫、跨文化、PRISM-B、维度崩溃、意识门、LVMH、Unilever、宝洁、丰田、欧莱雅、吉利、Yandex、多轮对话、推荐提示、母语
- 数据规模:1K<n<10K
- DOI:10.57967/hf/8380
研究概述
本数据集包含7,975条结构化观测数据,来自一项预注册实验,旨在测试企业投资组合框架是否会改变大型语言模型对品牌的感知。实验涵盖7种投资组合原型(LVMH、Unilever、P&G、Toyota、LOreal、Geely、Yandex)中的20个品牌,由来自7种训练传统的13个LLM在4种提示模式下进行评分,包括自然推荐提示、带有对话中投资组合揭示的多轮对话以及母语框架。
关键发现:投资组合框架对AI品牌感知未产生系统性影响(平均|delta DCI| = .26,0/20个品牌FDR显著,TOST等价性检验18/20个品牌通过)。这种“光谱免疫”在所有7种训练传统中均成立。唯一例外是多轮投资组合揭示模式下的吉利汽车(d = -1.11,FDR显著),表明反向抱负动力学可能在扩展对话情境中部分渗透AI感知。
实验设计
| 参数 | 值 |
|---|---|
| 品牌 | 20个(路易威登、迪奥、芬迪、多芬、Axe、Ben & Jerrys、汰渍、帮宝适、吉列、丰田、雷克萨斯、巴黎欧莱雅、兰蔻、卡尼尔、吉利汽车、沃尔沃、领克、Yandex搜索、Yandex出租车、Yandex市场) |
| 投资组合 | 7个(LVMH、Unilever、P&G、Toyota、LOreal、Geely、Yandex) |
| 模型 | 13个,来自7种训练传统(西方、中国、俄罗斯、印度、日本、欧洲、韩国) |
| 重复次数 | 每个单元5次 |
| 评分量表 | 1–5 PRISM-B |
| 总观测数 | 7,975(从8,022个响应文件中解析) |
| 解析成功率 | 99.4% |
| 实验成本 | 约5美元 |
提示模式
| 模式 | 描述 |
|---|---|
| 直接评分(单独+投资组合) | 标准的8维度PRISM-B评分提示 |
| 推荐(单独+投资组合) | 自然的“你对[品牌]有何看法?”框架 |
| 多轮对话 | 第1轮:单独评分,第2轮:揭示投资组合所有权并重新评分 |
| 母语消融 | 为传统匹配的模型提供法语、中文、日语、俄语提示 |
测试模型
| 模型 | 训练传统 | 部署方式 |
|---|---|---|
| Claude Sonnet 4 | 西方(美国,Anthropic) | 云端API |
| GPT-4o-mini | 西方(美国,OpenAI) | 云端API |
| Gemini 2.5 Flash | 西方(美国,Google) | 云端API |
| Grok-3-mini | 西方(美国,xAI) | 云端API |
| Llama 3.3 70B | 西方(美国,Meta) | 云端API |
| DeepSeek V3 | 中国 | 云端API |
| YandexGPT 5 Pro | 俄罗斯 | 云端API |
| Sarvam M | 印度 | 云端API |
| GPT-OSS-Swallow 20B | 日本(东京工业大学) | 云端API |
| Gemma 4 27B | 西方(美国,Google) | 本地(Ollama) |
| Qwen3 235B | 中国(阿里巴巴) | 云端API(Cerebras) |
| Mistral Large | 欧洲(法国) | 云端API |
| EXAONE 3.5 32B | 韩国(LG AI研究所) | 本地(Ollama) |
数据集结构
| 列名 | 类型 | 描述 |
|---|---|---|
brand |
字符串 | 品牌名称 |
portfolio |
字符串 | 母投资组合 |
condition |
字符串 | 单独、投资组合、推荐_单独、推荐_投资组合、多轮对话、母语_* |
model |
字符串 | 模型标识符 |
model_name |
字符串 | 完整模型名称 |
tradition |
字符串 | 训练传统 |
temperature |
浮点数 | 采样温度(均为0.7) |
repetition |
整数 | 1–5 |
semiotic–temporal |
浮点数 | 8个维度评分(1–5) |
假设检验结果
| ID | 假设 | 状态 |
|---|---|---|
| H1 | LVMH建设性干扰 | 不支持 |
| H2 | Unilever破坏性干扰 | 不支持 |
| H3 | P&G可忽略干扰 | 支持 |
| H4 | 丰田/雷克萨斯抱负性干扰 | 不支持(雷克萨斯 d = .52,未通过FDR) |
| H5 | 光谱免疫(TOST等价性) | 支持(18/20个品牌在+/-1.0 DCI内) |
| H6 | 欧莱雅大众-奢侈品梯度 | 不支持 |
| H7 | 吉利反向抱负(多轮对话) | 支持(d = -1.11,FDR显著) |
| H8 | 母语话语激活 | 部分支持(模型特定,无方向性) |
文件列表
data.csv– 完整数据集(在HF查看器中自动渲染)data.jsonl– JSONL格式的完整数据集main_experiment.jsonl– 仅直接评分条件recommendation.jsonl– 仅推荐提示条件multiturn.jsonl– 仅多轮对话ablation_system_prompt.jsonl– 仅系统提示消融
引用格式
bibtex @article{zharnikov2026portfolio_interference, title={Does Corporate Ownership Matter to {AI}? Portfolio Interference in Large Language Model Brand Perception}, author={Zharnikov, Dmitry}, year={2026}, doi={10.5281/zenodo.19555282}, note={Working Paper} }
相关数据集
- https://huggingface.co/datasets/spectralbranding/r15-ai-search-metamerism – 21,350次调用,24个LLM,维度崩溃基线




