多服务器并行数据清洗方法及装置

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
多服务器并行数据清洗方法及装置
申请号:CN202511118901
申请日期:2025-08-11
公开号:CN121029743A
公开日期:2025-11-28
类型:发明专利
摘要
本申请提供一种多服务器并行数据清洗方法及装置。该方法利用统一内存访问UMA协议建立共享内存池,通过数据块划分和负载均衡确定分片方案,采用OpenMP指令集执行并行数据清洗,使用BLAS库函数优化矩阵运算,并运用统计模型进行异常检测与修正。本方案通过统一内存架构实现高效数据共享,利用OpenMP实现细粒度并行调度,引入BLAS优化提升计算性能,有效解决了大规模数据清洗的效率问题。
技术关键词
特征值集合 共享内存池 调度表 拓扑图 数据清洗方法 负载均衡策略 分片 统计特征 划分算法 数据依赖关系 矩阵 地址映射表 服务器 有向无环图 分块算法 验证数据一致性 高效数据共享 节点