一种门控线性自注意力知识追踪系统
# 热门搜索 #
大模型
人工智能
openai
融资
chatGPT
验证码登录
×
发送
登录即代表您已同意AITNT
用户协议
和
隐私政策
登录
登录成功后会自动刷新界面
AITNT公众号
AITNT APP
AITNT交流群
搜索
未登录
首页
AI中心
退出
首页
AI资讯
AI技术研报
AI监管政策
AI产品测评
AI商业项目
AI产品热榜
AI 源力市场
寻求报道
一种门控线性自注意力知识追踪系统
申请号:
CN202511111760
申请日期:
2025-08-08
公开号:
CN121009962A
公开日期:
2025-11-25
类型:
发明专利
摘要
本申请公开了一种门控线性自注意力知识追踪系统,通过遗忘门和输入门构成门控状态更新模块,能够动态调节知识状态的保持与更新比例,有效模拟学习者的遗忘规律;通过保存学习者上一时刻的知识状态,实现推理阶段的单步串行计算,避免重复遍历历史数据,降低了推理计算开销,提升了预测响应速度;通过线性自注意力机制实现训练阶段的高效并行计算,显著提升了模型训练效率。
技术关键词
知识追踪系统
状态更新
矩阵
高效并行计算
sigmoid函数
遗忘规律
线性
注意力机制
阶段
输入模块
存储模块
元素
算法
动态
关系