一种基于大模型和RAG技术的视频伪造检测方法及系统

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
一种基于大模型和RAG技术的视频伪造检测方法及系统
申请号:CN202511108697
申请日期:2025-08-08
公开号:CN121033640A
公开日期:2025-11-28
类型:发明专利
摘要
本发明涉及一种基于大模型和RAG技术的视频伪造检测方法及系统,该方法包括:S1、对于输入视频,通过视频分析工具提取关键帧;S2、通过视频分析工具和视觉语言模型对输入视频和关键帧进行分析,得到音频转录文本、关键帧的描述内容及视频叙事描述内容;S3、将音频转录文本和关键帧的描述内容融合,生成结构化特征向量;S4、基于视频叙事描述内容,通过检索增强生成技术,检索最新论文、工具文档及案例资料,提取Top‑K相关文档片段组成结果集,动态更新检测规则库;S5、将步骤S3和步骤S4的输出结果输入混合专家模型,进行推理判断,得到推理判断结果。该方法显著提升了复杂场景下的伪造识别准确性,同时提升了伪造检测结果的可解释性。
技术关键词
关键帧 视频分析 音频 文本 大语言模型 视觉 计算机程序指令 生成技术 语义特征 动态更新 图像 矩阵 自然语言 索引 标记 序列 论文 嵌入特征