b
bigai/TongSIM-Asset
数据集数据集查看器文件和版本
下载使用量0

TongSIM

Pleias

首页 GitHub 论文

GitHub

访问 Github:https://github.com/bigai-ai/tongsim

什么是 TongSIM-Asset?

随着人工智能(AI)的快速发展,尤其是多模态大型语言模型领域的进步,研究重点正从单模态文本处理转向更为复杂的多模态和具身智能领域。具身智能侧重于在真实模拟环境中训练智能体,依靠物理交互和动作反馈,而非传统的标注数据集。为促进具身智能研究,我们推出了 TongSIM——一个用于训练和评估具身智能体的高保真通用平台。

TongSIM-Asset 是 TongSIM 平台的数字资产包。该资产包目前包含 100 多个多样化的多房间室内场景,以及分属 500 多个类别的数千个 3D 可交互物体。通过提供这一开源资产,TongSIM-Asset 为通用具身智能体的开发和测试提供了统一且强大的工具,助力不同 AI 领域的研究人员推动具身智能研究的发展。

此数据集旨在用于 TongSIM 模拟器中的具身家庭交互任务,例如物体重排、视觉导航、多智能体具身模拟以及各种定制化任务。

请注意,该数据集严格限于非商业学术研究使用。所有材料均根据 许可证 授权。

数据集内容(本仓库):

TongSIM-Asset 提供了一个基于 Unreal Engine 5.6 版本构建的项目。该数据集包含 100 个场景,用作挑战赛评估的测试集。所有场景均可在 60FPS 及以上帧率运行。

  • 3000 余个物体,涵盖 500 余种类别。
  • 100 个场景。
  • 10 余个智能体,包括成人和儿童。
  • 100 余种智能体动画。

场景

物体

智能体

动画

数据集结构

├── Config
│   ├── */*.ini
├── Content
│   ├── Animations
|      ├── *.uasset
│   ├── Characters
|      ├── *.uasset
│   ├── Maps
|      ├── *.uasset
│   ├── Objects
|      ├── *.uasset
├── Docs
│   ├── *.md
│   ├── *.png
└── TongSimLite.uproject

安装 Unreal Engine 5.6:

TongSIM-Asset 项目基于 Unreal Engine 5.6 版本构建,需首先安装该引擎。

访问 Unreal Engine 官网

访问 Unreal Engine 文档


引用 TongSIM-Asset

在您的研究中使用 TongSIM-Asset 吗?请引用以下论文:arxiv

@article{sun2025tongsim,
  title={TongSIM: A General Platform for Simulating Intelligent Machines},
  author={Sun, Zhe and Wu, Kunlun and Fu, Chuanjian and Song, Zeming and Shi, Langyong and Xue, Zihe and Jing, Bohan and Yang, Ying and Gao, Xiaomeng and Li, Aijia and others},
  journal={arXiv preprint arXiv:2512.20206},
  year={2025}
}