摘要
本发明涉及一种基于云端脚本配置的数据采集与处理系统,包括:数据接入模块,用于接收多源异构的原始数据;模型配置模块,提供适配模型、映射模型和计算模型三类可配置的数据处理模型;脚本与表达式管理模块,用于存储用户上传的 Groovy 脚本或表达式,并生成脚本内容的哈希指纹;执行引擎,根据数据处理模型绑定的脚本或表达式动态执行逻辑;缓存模块,以所述哈希指纹为键缓存已编译的脚本实例;输出模块,输出处理后的结构化数据。本发明结合 Groovy 脚本与表达式引擎的能力,构建灵活的数据处理模型体系(包括适配模型、映射模型与计算模型),支持数据接入、转换、计算等环节的模块化配置和热更新,有效提升了系统的通用性、扩展性和维护效率。