Compound Schema Registry

模式演化在管理数据库系统中至关重要，以确保在不同数据版本之间兼容性。模式注册表通常通过管理、验证和确保模式兼容性来解决实时数据流中的模式演化挑战。然而，当前的模式注册表在处理复杂的语法变化，如字段重命名或类型更改时存在困难，这通常需要大量手动干预并可能会影响服务。为了增强模式演化的灵活性，我们提出了使用由复合 AI 系统促进的广义模式演化（GSE）。该系统采用大型语言模型（LLMs）来解释模式更改的语义，支持更广泛的语法修改而不会中断数据流。我们的方法包括开发一种任务特定的语言，模式转换语言（STL），以生成模式映射作为中间表示形式（IR），简化在不同数据处理平台上集成模式更改的过程。初步结果表明，这种方法可以提高模式映射的准确性和效率，展示了 GSE 在实际应用中的潜力。

提高数据库系统中的模式演化的灵活性，解决当前模式注册表在复杂语法修改方面的局限性

使用大型语言模型（LLMs）解释模式更改的语义，支持更广泛的语法修改，开发特定任务的语言Schema Transformation Language（STL）生成模式映射作为中间表示（IR），简化模式更改的集成，提高准确性和效率

使用GSE来增强模式演化的灵活性，设计了STL语言，提高了模式映射的准确性和效率，展示了GSE在实际应用中的潜力

当前领域中的相关研究包括：《Schema Evolution in Data Lakes》、《Schema Evolution in NoSQL Databases: A Survey》等