采样分词重组中文拼写纠错方法、装置、设备及存储介质

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
采样分词重组中文拼写纠错方法、装置、设备及存储介质
申请号:CN202511018314
申请日期:2025-07-23
公开号:CN120509400B
公开日期:2025-09-30
类型:发明专利
摘要
本发明公开了一种采样分词重组中文拼写纠错方法、装置、设备及存储介质,所述方法通过获取预设大语言模型LLMs的所有推理轨迹;对所有推理轨迹中的目标采样句子和输入句子进行词义单元化分词,根据输入句子的分词结果对所有推理轨迹中的句子进行对齐,对对齐结果进行合并优化,获得优化对齐结果;对优化对齐结果进行评分并筛选,获得中文拼写纠错结果,能够通过深度优先的方式回溯追踪LLMs在推理过程中的所有轨迹,挖掘LLMs产生的所有内容,充分利用其丰富的语言能力,充分挖掘LLMs在推理过程中产生的内容,并利用这些内容重组出更准确的纠错结果,明显提升了基于提示和监督微调两种LLMs在CSC任务上的性能。
技术关键词
拼写纠错方法 分词 大语言模型 轨迹 纠错程序 纠错设备 列表 纠错装置 标识 编辑 处理器 算法 模块 索引 存储器 因子 编码