总部地址
杭州市滨江区西兴街道中国数谷3号楼16楼
景联文EGO+手套数据集:机器人缺的“手感”,藏在这只手套里
2026年,触觉正在成为具身智能行业绕不开的关键词。 一个愈发清晰的行业共识是:仅靠视觉,机器人难以完成拧瓶盖、插零件、拿鸡蛋这类需要力道分寸的操作。视觉提供“物体的样子”,而抓取依赖“接触的状态”——后者只存在于手指与物体接触的瞬间,无法通过摄像头直接捕捉。
触觉仍是当前具身智能数据链条上的明显短板。从公开数据看,全球触觉数据集数量尚不足视觉数据集的万分之一,视觉—触觉—动作对齐数据稀缺,直接制约VLA模型在精细操作上的表现。更关键的是,触觉数据不仅要“有”,还要多模态在同一时间轴上对齐、标定可用、能直接训练。
景联文科技推出EGO+手套数据集,正是瞄准这一痛点,把机器人缺失的 “手感感知”,连同动作、视觉数据同步采集下来。并以结构化、可训练格式交付。
视觉、动作、触觉的一次“同框”
EGO+手套数据集采用“第一视角头显+触觉数据手套”双设备同步采集,完整记录连续操作的全流程数据。六路相机视频流、全套位姿与IMU传感器数据、26个手套数据通道、约121万条同步消息——视觉、动作与触觉三类数据,在同一 UTC 时间轴上实现微秒级对齐。
它直接解决了多模态数据处理中最耗时的校时与标定难题:数据交付即为结构化的可训练格式,无需再投入大量成本做多路原始数据的时间校准。
核心数据规格
EGO 第一视角
六目视频流:双目RGB+四目灰度相机,含完整内参、外参与畸变标定
头部位姿与 IMU:头部6DoF位姿(位置 + 四元数)、加速度计与陀螺仪原始数据、IMU标定文件
环境音频:同步采集的环境录音(m4a格式)
触觉数据手套(26个数据通道)
hand_joint_angles:每指5自由度关节角度 + 逐指置信度,采样频率约 118Hz
emf_poses /tip_poses/hand_skeleton:手部关节6D位姿、指尖位姿、手部骨架数据,采样频率约118Hz
tactile 系列(5路):触觉阵列原始读数、分区触觉、二值接触、触觉点云、触觉残差,采样频率约118Hz(二值接触为60Hz)
imu_data /palm:原始+融合双路输出,包含掌部姿态四元数、角速度、线加速度,采样频率约785Hz
tf /tf_static:全身坐标变换树,高频持续发布
同步与标定能力
全部模态数据均附带统一UTC时间戳,精度达微秒级,到手即可直接开展时序对齐与多模态融合研究,免去繁杂的校时工程;双目相机内外参、IMU零偏与尺度标定、TF/TF-static坐标变换树全部随数据交付,运动重建与动作重定向可开箱即用。
五大核心适用方向
VLA与模仿学习训练:第一视角视觉、手部动作、触觉三路精准配对的数据,可直接用于 VLA 模型、扩散策略等具身大模型的训练与微调。
接触后精细操作优化:抓握力控、插拔微调、擦拭恒压控制等 “接触发生后” 的精细动作优化,可依托触觉通道的高颗粒度数据实现突破。
触觉智能前沿研究:为视觉 - 触觉融合、接触事件检测、材质属性感知等方向提供高分辨率素材,支撑触觉与动作联合预训练研究。
灵巧手重定向与跨机体迁移:完整的手部关节角度与姿态数据,天然适配人手到机器人灵巧手的运动重定向,以及触觉表示的跨机体对齐。
多模态对齐算法基准测试:微秒级统一时间戳的多模态数据,可作为时序对齐算法、多模态融合方法的标准测试基准。
景联文科技:把触觉数据做成标准化工程能力
EGO+手套数据集不是一次定制化采集的副产品,它处在景联文科技具身智能数据金字塔的L3层级——以第一视角Ego采集搭配触觉数据手套,输出全手指关节角度与完整手部姿态数据,为精细手部操作任务提供核心数据支撑;层级更高的L4,则通过真机遥操作完成真实动力学反馈与接触闭环验证。

作为国内领先的AI数据生产运营商,景联文科技已将 “采集标准、标定流程、质量管控、封装交付” 全流程沉淀为工程化规范:依托覆盖全国的实景采集网络,结合SolarSense数据工程平台与QApex数据生态平台双引擎,从多硬件同步标定、多环节质量校验到标准化数据封装,形成完整可控的数据生产闭环,保障各层级数据的一致性与可用性。
整套数据金字塔以 “任务对齐组” 实现跨层级数据联动:同一条任务线共享统一的任务ID、物体版本、初始状态与成败判定规则。当真机执行出现失败时,可反向回溯至Ego、UMI、手套等各层级数据定位根因,形成 “看到→理解→迁移→执行” 的完整证据链路,而EGO+手套数据集正是这条链路中承接视觉认知、落地触觉执行的关键节点。
当行业仍在讨论 “Ego数据的规模是否足够”,竞争的焦点早已转向更深层的命题:什么样的数据,才能真正训练出能在真实世界稳定执行任务的机器人?
景联文科技的答案是:视觉、动作、触觉多模态深度融合,且在同一时间轴上精准对齐、工程化交付的高质量数据。
如需获取数据集详细规格文档与样例数据,欢迎后台留言或联系商务团队咨询对接。