IDA: Breaking Barriers in No-code UI Automation Through Large Language Models and Human-Centric Design

企业数字平台中，商业用户花费了大量时间在重复性任务上，这突显了自动化的重要性。尽管 UI 自动化的低代码工具有所进展，但其复杂性仍是非技术商业用户采用的重要障碍。然而，最近大型语言模型（LLMs）的进展创造了新的机会，通过提供更强大、更简单、更人性化的编程环境来克服这一障碍。本文介绍了 IDA（Intelligent Digital Apprentice），这是一种新型的无代码 Web UI 自动化工具，专门设计为赋予没有技术背景的商业用户使用。IDA采用了人性化的设计原则，包括通过演示进行引导编程、语义编程模型和教师-学生学习隐喻，这些都是针对商业用户的技能集量身定制的。通过利用LLMs，IDA克服了传统上限制无代码解决方案可能性的一些关键技术障碍。我们已经开发了IDA的原型，并进行了涉及真实世界商业用户和企业应用的用户研究。有希望的结果表明，用户可以有效地利用IDA创建自动化。定性反馈表明，IDA被认为是用户友好和可信赖的。这项研究有助于通过无代码用户界面自动化发挥AI助手的潜力，提高商业用户的生产力。

论文试图解决企业数字平台中重复任务自动化的问题，尤其是非技术业务用户使用低代码工具进行UI自动化的复杂性问题。

通过利用大型语言模型（LLMs）创建智能数字助手IDA，采用指导式编程、语义编程模型和师生学习隐喻等人性化设计原则，使非技术业务用户更轻松地进行UI自动化。

论文开发了IDA原型，并进行了用户研究，结果表明用户能够有效地利用IDA进行自动化，且IDA被认为用户友好和可信。

近期相关研究包括：《Low-Code/No-Code技术综述》、《面向非技术用户的自动化测试平台》等。