X2C

X2C数据集是专门为真实人形机器人面部表情模仿而设计的一个高质量、高多样性、大规模的数据集。它包含10万个（图像、控制值）对，每张图像描绘了一个具有多样化微表情的人形机器人，并使用30个控制值对其进行注释，以表示真实表情配置。数据集的创建过程涉及从人形机器人执行面部表情动画的视频中提取图像，并由志愿者进行手动编辑和注释。X2C旨在解决现有数据集规模小、多样性不足、标注维度低的问题，为研究人形机器人面部表情模仿提供了新的资源。

The X2C dataset is a high-quality, large-scale and highly diverse dataset specifically developed for facial expression imitation of real humanoid robots. It consists of 100,000 (image, control value) pairs. Each image captures a humanoid robot displaying diverse micro-expressions, and is annotated with 30 control values to characterize the real facial expression configuration. Dataset construction involves extracting frames from videos of humanoid robots executing facial expression animations, followed by manual editing and annotation conducted by volunteers. X2C aims to address the shortcomings of existing datasets, such as small scale, insufficient diversity and low annotation dimensionality, providing a novel resource for research on humanoid robot facial expression imitation.

搜集汇总

数据集介绍

构建方式

在仿人机器人情感交互研究领域，构建高质量数据集是推动真实面部表情模仿技术发展的关键。X2C数据集通过精心设计的四阶段流程实现数据采集：首先由多文化背景志愿者在仿真环境中创建关键帧动画，采用三次贝塞尔曲线、线性和阶梯插值算法生成细腻的表情变化；其次以0.02秒固定间隔采样视频帧，通过结构相似性指数（SSIM>0.99）剔除近似重复帧；随后基于动画元数据建立插值方程，同步计算30维控制值的精确标注；最终形成10万张512×512分辨率图像与对应控制值的严格对齐数据对。该流程通过参数化控制单元（如眉毛4自由度、嘴唇12自由度）实现表情的解剖学合理性验证，并采用硅胶皮肤保护机制确保物理机器人安全。

使用方法

该数据集支持端到端的仿生表情控制研究，典型应用包含两个层级：在基础研究层面，研究者可通过回归模型学习图像特征到控制值的映射关系，X2CNet框架验证了ResNet18特征提取器配合Huber损失函数的优化效果；在应用开发层面，30维控制值可直接驱动物理机器人执行器，实现从虚拟到实体的跨平台表情复现。使用时应划分80%训练集与20%测试集，采用AdamW优化器（初始学习率1e-3）配合余弦退火调度。对于非对称表情生成等特殊任务，建议重点分析Brow Outer Left/Right等成对控制参数的协同变化模式。数据集配套提供的动画元数据（关键帧时序、插值类型）支持研究者开发新型表情生成算法。

背景与挑战

背景概述

X2C数据集由麦考瑞大学和中山大学的研究团队于2025年提出，旨在解决人形机器人情感交互中精细面部表情模仿的难题。作为首个包含10万组（图像，控制值）对的大规模数据集，其创新性体现在30维高精度动作参数标注体系，突破了传统数据集在数据规模（如Smile数据集仅1.5万样本）和标注维度（如Coexpression仅11维）的局限。该数据集通过物理机器人Ameca（32自由度）及其虚拟孪生体构建，覆盖基础情绪、复合表情及非对称表情等复杂形态，为人形机器人情感计算研究提供了标准化基准，显著推动了跨模态情感交互、仿生运动生成等方向的发展。

当前挑战

在领域问题层面，X2C需解决三大核心挑战：1）情感表达的粒度控制难题，要求系统能精准捕捉人类眉毛微颤（0.01弧度级精度）、嘴角不对称运动等亚情绪特征；2）跨模态映射的复杂性，需建立高维视觉特征（512×512×3图像空间）与30维连续控制值的非线性对应关系；3）生理合理性约束，避免生成人类无法实现的机械表情（如嘴唇'W'形扭曲）。在构建过程中，研究团队面临：1）机械损耗风险，极端控制值可能导致硅胶皮肤永久变形，需通过虚拟环境预筛选；2）时空对齐难题，采用结构相似性指数（SSIM>0.99去重）和0.05秒严格同步采样确保数据一致性；3）文化偏差消除，需协调多国志愿者设计动画以平衡表情语义理解差异。

常用场景

经典使用场景

X2C数据集在仿人机器人面部表情模仿研究中具有重要应用价值。该数据集通过提供10万对（图像，控制值）样本，为研究者提供了丰富的仿人机器人面部表情数据。这些数据涵盖了从基本情绪到复杂微妙表情的广泛范围，包括不对称表情等自然人类行为特征。数据集的高质量和多样性使其成为训练和评估面部表情模仿算法的理想基准。

解决学术问题

X2C数据集有效解决了仿人机器人研究中的几个关键问题。首先，它填补了高质量、大规模仿人机器人面部表情数据的空白，克服了现有数据集规模小、多样性不足的局限。其次，通过精确的30维控制值标注，实现了对机器人面部执行器的精细控制，为研究微妙表情模仿提供了可能。最后，数据集包含的不对称表情模拟了更自然的人类行为，提升了机器人表情的真实性。

实际应用

在实际应用方面，X2C数据集为开发具有情感交互能力的服务型机器人提供了重要支持。基于该数据集训练的模型可使机器人在医疗护理、教育辅导、客户服务等场景中展现更自然、更具表现力的面部表情，从而提升人机交互的亲和力和信任度。特别是在需要情感共鸣的领域，如自闭症治疗和老年人陪护，这种能力显得尤为重要。

数据集最近研究

最新研究方向

近年来，X2C数据集在人形机器人情感交互领域引起了广泛关注。该数据集以其高多样性、大规模标注和精确控制值的特点，为机器人面部表情模仿研究提供了重要支持。前沿研究方向主要集中在以下几个方面：首先，基于X2C数据集的人形机器人面部表情生成技术，通过深度学习模型实现从人类表情到机器人控制值的精确映射；其次，结合多模态感知技术，探索机器人情感表达的实时性和自然性；此外，研究还关注如何利用X2C数据集提升机器人在教育、医疗等场景中的情感交互能力。这些研究不仅推动了人形机器人技术的发展，也为情感计算和人机交互领域带来了新的机遇。

相关研究论文

• X2C: A Dataset Featuring Nuanced Facial Expressions for Realistic Humanoid Imitation

  麦考瑞大学, 中山大学 · 2025年