首页 > 大数据 > 正文

【干货】数据挖掘必须要具备知识结构类型

2016-01-13 14:40:04  来源:36大数据

摘要:概念 类描述就是通过对某类对象关联数据的汇总,分析和比较,用汇总的简洁的精确的方式对此类对象的内涵进行描述,并概括这类对象的有关特征。
关键词: 大数据
六、时间序列
 
  具有一个或多个时间属性的预测应用称为时间序列问题。时间序列是数据存在的特殊形式,序列的过去值会影响到将来值,这种影响的大小以及影响的方式可由时间序列中的趋势周期及非平稳等行为来刻画。
 
  例如:系统调用日志记录了操作系统及其系统进程调用的时间序列,通过对正常调用序列的学习可以预测随后发生的系统调用序列、发现异常的调用。表2-4给出了一个系统调用数据表。 这样的数据源可以通过适当的数据整理使之成为调用序列,如表2-5,再通相应的挖掘算法达到跟踪和分析操作系统审计数据的目的。
 
  时间序列
 
  七、偏差检测
 
  偏差检测(deviation detection)就是对数据集中的偏差数据进行检测与分析。
 
  在要处理的大量数据中,常常存在一些异常数据,它们与其它的数据的一般行为或模型不一致。这里数据记录就是偏差(deviation),也就是孤立点。
 
  偏差包括很多潜在的知识,如不满足常规类的异常例子、分类中出现的反常实例、在不同时刻发生了显着变化的某个对象或集合、观察值与模型推测出的期望值之间有显着差异的事例等。
 
  偏差的产生可能是某种数据错误造成的,也可能是数据变异所固有的结果。从数据集中检测出这些偏差很有意义,例如在欺诈探测中,偏差可能预示着欺诈行为。

第四十一届CIO班招生
国际CIO认证培训
首席数据官(CDO)认证培训
责编:pingxiaoli

免责声明:本网站(http://www.ciotimes.com/)内容主要来自原创、合作媒体供稿和第三方投稿,凡在本网站出现的信息,均仅供参考。本网站将尽力确保所提供信息的准确性及可靠性,但不保证有关资料的准确性及可靠性,读者在使用前请进一步核实,并对任何自主决定的行为负责。本网站对有关资料所引致的错误、不确或遗漏,概不负任何法律责任。
本网站刊载的所有内容(包括但不仅限文字、图片、LOGO、音频、视频、软件、程序等)版权归原作者所有。任何单位或个人认为本网站中的内容可能涉嫌侵犯其知识产权或存在不实内容时,请及时通知本站,予以删除。