基于多模态大模型对比及双重校验的界面异常检测方法

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
基于多模态大模型对比及双重校验的界面异常检测方法
申请号:CN202510973678
申请日期:2025-07-15
公开号:CN120472282B
公开日期:2025-09-09
类型:发明专利
摘要
本发明涉及大模型技术领域,公开了基于多模态大模型对比及双重校验的界面异常检测方法,包括:部署若干图像对比专用的大模型;获取UI样式图集和程序界面截图集,筛选出相似性低于第一预设阈值的样本对组成第一样本对集;利用多个大模型分别对第一样本对集中的样本对进行图像对比,将对比结果为不一致的数量超过大模型数量一半的样本对组成第二样本对集;通过像素级对比定位第二样本对集中的样本对的错误像素点,绘制第一错误框;通过各UI样式的各层级的样式信息对比定位第二样本对集中的样本对的错误像素点,绘制第二错误框;融合第一错误框和第二错误框,获得错误标注图片并上报。本发明有效解决了现有技术在UI一致性自动化测试中的痛点。
技术关键词
异常检测方法 多模态 样本 像素点 样式 界面 文本区域识别 坐标 层级 图像 对比度 直方图 图片 亮度 通道 颜色 分辨率 数值