Chemistry3D: Robotic Interaction Benchmark for Chemistry Experiments

模拟引擎的出现彻底改变了机器人学习和操作效率，提供了经济高效的管道。然而，缺乏一个专门针对化学情景定制的通用模拟平台阻碍了机器人操作和反应过程可视化的进展。为了解决这一问题，我们提出了Chemistry3D，这是一个创新的工具包，集成了广泛的化学和机器人知识。Chemistry3D不仅使机器人能够执行化学实验，而且还提供了实时的温度、颜色和pH值变化的可视化。基于NVIDIA Omniverse平台构建的Chemistry3D提供了机器人操作、视觉检查和液体流控制接口，便于模拟液体和透明实体等特殊对象。利用这个工具包，我们设计了RL任务、目标检测和机器人操作场景。此外，为了区分渲染引擎和真实世界之间的差异，我们使用Sim2Real进行了透明物体检测实验，验证了该工具包的出色模拟性能。源代码可在https://github.com/huangyan28/Chemistry3D找到，相关教程可在https://www.omni-chemistry.com找到。

Chemistry3D试图解决的问题是缺乏适用于化学场景的通用模拟平台，这妨碍了机器人操作和反应过程可视化的进展。

Chemistry3D是一个创新的工具包，集成了广泛的化学和机器人知识，通过NVIDIA Omniverse平台构建。它不仅使机器人能够进行化学实验，还提供了反应过程中温度、颜色和pH值变化的实时可视化。该工具包为机器人操作、视觉检查和液体流控制提供了接口，便于模拟液体和透明实体等特殊对象。

该工具包的亮点包括：提供了机器人操作、视觉检查和液体流控制的接口；能够实时可视化反应过程中的温度、颜色和pH值变化；使用Sim2Real进行了透明物体检测实验，验证了其出色的模拟性能。论文提供了开源代码和相关教程。

最近在这个领域中，还有一些相关研究，如：Sim-to-Real Transfer Learning for Robotics；Deep Reinforcement Learning for Robotic Manipulation with Asynchronous Off-Policy Updates；Real-time Liquid Simulation using Variational Autoencoders with Applications to Robotics。