摘要
本发明公开了一种支持多模态输入的低代码平台应用智能生成系统,通过集成YOLOv7图像识别、Transformer语音语义解析及自动化代码生成技术,实现了草图与语音指令的智能融合与快速应用开发。核心模块包括多模态输入处理(支持手绘草图、语音指令及混合输入)、UI组件解析(基于空间关系算法的层级解析)、Vue.js代码生成、RESTAPI自动绑定及MaterialDesign规范优化,支持响应式布局与表单验证规则自动添加。实验表明,系统较传统开发效率提升300%,语音识别准确率达92.7%,代码生成质量通过率100%,显著降低非技术人员开发门槛,开发周期缩短至分钟级,支持插件扩展(如AR输入)与主流云平台(AWS/Azure/GCP)对接,适用于快速构建企业级应用场景。