ICE: Interactive 3D Game Character Editing via Dialogue

文本驱动的游戏内3D角色自动定制系统消除了复杂的角色控制参数操作过程。然而，目前的方法受到单轮生成的限制，无法进行进一步的编辑和细粒度修改。本文提出了一个交互式角色编辑框架（ICE），以实现多轮基于对话的精细化过程。简而言之，我们的ICE提供了一种更加用户友好的方式，使玩家能够迭代地传达创意想法，同时确保所创建的角色符合玩家的期望。具体而言，我们提出了一个指令解析模块（IPM），利用大型语言模型（LLMs）将多轮对话解析为每轮清晰的编辑指令提示。为了可靠且快速地在细粒度水平上修改角色控制参数，我们提出了一个语义引导的低维参数求解器（SLPS），以零-shot方式根据提示编辑角色控制参数。我们的SLPS首先定位与细粒度修改相关的角色控制参数，然后在低维空间中优化相应的参数，以避免不现实的结果。广泛的实验结果证明了我们提出的ICE在游戏内角色创建方面的有效性以及ICE的优越编辑性能。项目页面：https://iceedit.github.io/。

本文旨在解决游戏中角色自定义系统的单次生成和修改不够细致的问题，提出了一种基于对话的交互式角色编辑框架（ICE）。

该框架利用大型语言模型将多轮对话解析为每轮编辑指令提示，并通过语义引导的低维参数求解器在零样本的情况下对角色控制参数进行精细修改。

实验结果表明，该框架在游戏中角色创建和编辑方面具有良好的效果和优越的性能。该项目还提供了开源代码和相关数据集。

近期的相关研究包括基于GAN的角色自定义和基于对话的角色创建方法等。