GPU 并行触觉仿真框架开源，解决 GelSight 视触觉传感器 sim2real 虚实迁移痛点

一、行业研发痛点触觉实验落地成本高、横向对比难当前具身智能、柔性抓取研发中科研团队常搭配GelSight Mini 视觉触觉传感器、多型号灵巧手开展真机测试但灵巧手等硬件标定周期长难以同步完成多传感方案对照传统触觉模拟器并行算力有限仿真与真机存在明显 Sim2Real 域差制约强化学习大规模训练落地。近日卡内基梅隆大学联合 Genesis AI 推出 Tactile Genesis 仿真工具深度适配 Genesis World 多物理引擎提供标准化可配置触觉仿真底座降低多模态触觉算法、仿生电子皮肤研发迭代成本。Tactile Genesis全功能总览图二、七大触觉仿真模态高度还原实体传感物理特征框架统一封装 7 类主流触觉信号完整复现市面硬件运行特性其中ElastomerTaxel模块可精准复刻GelSight Mini硅胶挤压、剪切形变效果对标 FOTS、HydroShear 仿真方案后形变误差更低。平台业内原生支持体素温度场、接触音频双模态感知同时内置漂移、死点、通道串扰等真实硬件噪声模型。GelSight形变仿真对比图算力层面单 RTX A6000 显卡可承载上万并行仿真环境据论文 Figure4 基准测试相较传统仿真工具算力效率提升 3~20 倍显存占用明显下降。仿真模块支持自由挂载于Allegro Hand、XHand1、Inspire Hand、Shadow Hand、Franka 机械臂、UR机械臂等任意曲面触觉像素Taxel可自定义排布与分辨率快速复现各类灵巧手硬件布局。三、消融实验输出参考结论为触觉硬件设计提供依据团队依托手内旋转、物体重定位、螺丝刀旋拧三组任务开展消融测试输出多项具备参考价值的研发方向1.触觉传感覆盖范围的影响高于像素分辨率仅指尖传感方案表现存在局限在通用抓取场景下全手指尖 指节 掌心布局提升显著整机均匀布置约 200 个触觉像素即可满足多数灵巧操作需求超高分辨率硬件增益有限。2.逐像素六维力 / 力矩传感在连续滑移类任务适配性更强GelSight Mini视触觉传感器更适合物体纹理、轮廓识别细分场景二者各有适用场景。3.仅依靠关节本体感知无法支撑精细抓取触觉是手内操作不可或缺的感知输入现有商用温度传感器灵敏度暂不足以仅依靠热信号区分同质物体。多传感器消融实验曲线图团队完成星动纪元XHand1真机仿真迁移验证仿真聚合触觉信号与真机实测成功率匹配度良好需说明本次验证仅针对手指聚合压力信号暂未实现高精度视觉触觉全模态迁移。四、开源生态降低国内机器人研发门槛整套触觉仿真模块集成开源 Genesis World 工程配套消融实验脚本同步开放适配 PyTorch 强化学习开发管线面向人形机器人、工业柔性抓取、多模态感知科研团队提供低成本仿真方案助力国内具身智能技术快速迭代。参考论文论文主页https://neuroagents-lab.github.io/tactile-genesis/论文链接https://arxiv.org/abs/2606.22332欢迎关注 “欣佰特科技” 持续为大家带来 “具身智能领域”前沿技术及应用详情可邮件咨询salescnbestec.com