首页 期刊 计算机系统应用 基于输入样本和主数据的编辑规则挖掘算法 【正文】

基于输入样本和主数据的编辑规则挖掘算法

作者:杨辉; 于守健; 陈少总 东华大学计算机科学与技术学院; 上海201620
编辑规则   条件函数依赖   数据清洗   等价类划分  

摘要:基于编辑规则和主数据的数据修复技术能自动地、确切地修复不一致数据,但目前编辑规则的获取主要依靠专业人员的定义.为了实现数据清洗全自动化,数据规则的挖掘技术近年来成为研究热点,针对条件函数依赖提出的挖掘算法主要有CFDMiner,CTANE,FastCFD.在此基础上,扩展条件函数依赖(CFD)的定义,在编辑规则的定义下提出了一种基于输入样本和主数据的编辑规则挖掘算法,主要思路是从输入样本中挖掘出CFD,然后根据输入样本与主数据在属性上的定义域相似性求出输入样本在主数据中的对应属性,从而形成带模式组的编辑规则,此算法能有效地挖掘编辑规则.且所挖掘的编辑规则按照编辑规则语义能有效地进行数据修复.

注:因版权方要求,不能公开全文,如需全文,请咨询杂志社

学术咨询 免费咨询 杂志订阅