摘要
本申请涉及一种系统评估方法、装置、计算机设备、计算机可读存储介质和计算机程序产品。所述方法包括:获取知识文档数据集,并对知识文档数据集进行分段处理,得到各知识文档数据块;基于生成器模型对每一知识文档数据块进行特征提取,得到知识文档数据块的关键特征,并根据关键特征的位置信息和知识文档数据块的位置信息,构建关键特征的索引关系;根据生成器模型和关键特征,生成问题,并基于问题、问题对应的关键特征和关键特征的索引关系构建初始问答对;基于各初始问答对,构建评估数据集;评估数据集用于评估检索增强生成系统。采用本方法能够提高系统评估方法的效率。