聊一聊粗糙集(六)

本节我们将继续介绍粗糙集有关的概念。



上节我们介绍了知识粒度的矩阵表示形式,本节将介绍基于知识粒度属性约简定义和算法。

基于粗糙特征选择算法亦称为属性约简,其旨在保持数据集分类能力不变的前提下,通过约简冗余属性,最后得到问题的决策或分类规则。

相关定义

设决策信息系统\(S=(U,A=C \bigcup D,V,f)\),\(B \subseteq C\),如果\(B\)为\(S\)的最小属性约简,则:
\[
GP_{U}(D \mid B)=GP_{U}(D\mid C)
\]

\[
\forall a \in B,\quad GP_{U}(D \mid B -\{a\})\not= GP_{U}(D \mid B)
\]

第一个式子保证了约简集\(B\)有着与全体条件属性集\(C\)相同的划分能力;而第二个条件保证了约简集\(B\)内没有冗余属性。

近似分类精度的定义如下:
设决策信息系统\(S=(U,A=C \bigcup D,V,f)\),\(\forall X \subseteq U\),\(R\)是一个等价关系,则集合\(X\)关于等价关系\(R\)的近似分类精度为:
\[
\alpha_{R}(X)=\frac{|\underline{R}X|}{|\overline{R}X|}
\]

其粗糙度为:
\[
\rho_{R}(X)=1-\alpha_{R}(X)
\]

近似分类质量的定义如下:
设决策信息系统\(S=(U,A=C \bigcup D,V,f)\),\(\forall X \subseteq U\),\(R\)是一个等价关系,则集合\(X\)关于等价关系\(R\)的近似分类质量为:
\[
\gamma_{R}(X) =\frac{|\underline{R}X|}{|U|}
\]
或者说
决策信息系统\(S=(U,A=C \bigcup D,V,f)\),\(\forall X \subseteq U\),\(R=\{X_{1},X_{2},...,X_{m}\}\)是论域\(U\)的一个划分,将\(R\)的上近似和下近似分别定义为:
\[
\overline{R}X=\{\overline{R}X_{1},\overline{R}X_{2},...,\overline{R}X_{m} \}
\]

\[
\underline{R}X=\{\underline{R}X_{1},\underline{R}X_{2},...,\underline{R}X_{m} \}
\]

则\(R\)的近似分类精度:
\[
\alpha_{R}(X)=\frac{\sum^{m}_{i=1}|\underline{R}X_{i}|}{\sum_{i=1}^{m}|\overline{R}X_{i} |}
\]

近似分类质量:
\[
\gamma_{R}(X) =\frac{\sum_{i=1}^{m}|\underline{R}X_{i}|}{|U|}
\]

特别地,若等价关系\(R\)是被决策属性集\(D\)划分的,\(U/D=\{X_{1},X_{2},...,X_{m} \}\),\(\forall X \subseteq U\),则\(D\)的近似分类精度为:
\[
\alpha_{R}(D)=\frac{POS_{R}(D)} {\sum_{i=1}^{m}|\overline{R}X_{i} |}
\]

近似分类质量:
\[
\gamma_{R}(D) =\frac{POS_{R}(D)}{|U|}
\]

对于这种情况,我们先看一个例子,若
\[
U/D=\{X_1,X_2 \}=\{\{e_{1},e_{4},e_{5},e_{8}\},\{e_2,e_3,e_6,e_7 \} \}
\]

考虑论域\(U\)对条件属性集\(C\)划分的等价关系\(R\)
\[
U/C=\{\{e_1\},\{e_2\},\{e_3\},\{e_4\},\{e_5,e_7\},\{e_6,e_8\} \}
\]

下近似:
\[
\underline{R}X_1=\{e_1,e_4\}
\]

\[
\underline{R}X_2=\{e_2,e_3 \}
\]

近似分类质量:
\[
\gamma_{R}(D)=\frac{|\underline{R}X_1|+|\underline{R}X_2|}{|U|}=\frac{4}{8}=\frac{1}{2}
\]

再来看之前的一个例子
\(S=(U,A=C \bigcup D,V,f)\)是一个决策信息系统,考虑条件属性\(C\)对论域\(U\)划分的等价关系\(R\),\(U/C=\{\{e_{3},e_{6} \},\{e_{2},e_{5} \},\{e_{1},e_{4} \} \}\),集合\(X=\{e_{1},e_{2},e_{4}\}\),显然\(X\)是一个粗糙集,则:
\[
\underline{R}X=\{e_{1},e_{4}\} \quad \overline{R}X=\{e_{1},e_{2},e_{4},e_{5}\}
\]

近似分类精度:
\[
\alpha_{R}(X)=\frac{|\underline{R}X|}{|\overline{R}X|}=\frac{2}{4}=\frac{1}{2}
\]

粗糙度:
\[
\rho_{R}(X)=1-\alpha_{R}(X)=1-\frac{1}{2}=\frac{1}{2}
\]

近似分类质量:
\[
\gamma_{R}(X) = \frac{|\underline{R}X|}{|U|} = \frac{2}{6} =
\frac{1}{3}
\]

基于知识粒度的属性约简算法

在介绍完经典粗糙集模型一些基本的相关概念后,我们将给出粗糙集里面的一个经典算法,基于知识粒度非动态属性约简算法。



算法:基于知识粒度的经典启发式属性约简算法



输入:决策信息系统\(S=(U,A=C \bigcup D,V,f)\)
输出:论域\(U\)上的约简集\(RED_{U}\)

\(begin\)

\(\quad RED_{U} \leftarrow \varnothing\)

\(\quad for \quad 1\leq j \leq |C| \quad do\)

\(\quad \quad Calculate \quad Sig_{U}^{inner}(a_{j},C,D);\)

\(\quad \quad \quad if \quad Sig_{U}^{inner}(a_{j},C,D)>0 \quad then\)

\(\quad \quad \quad \quad RED_{U} \leftarrow (RED_{U} \bigcup {a_{j}});\)

\(\quad \quad \quad end\)

\(\quad \quad end\)

\(\quad Let \quad B \leftarrow RED_{U};\)

\(\quad while \quad GP_{U}(D \mid B) \neq GP_{U}(D \mid C) \quad do\)

\(\quad \quad for \quad each \quad a_{i}\in (C-B) \quad do\)

\(\quad \quad \quad Calculate \quad Sig_{U}^{outer}(a_{i},B,D);\)

\(\quad \quad \quad a_{0}=max\{Sig_{U}^{outer}(a_{i},B,D),a_{i} \in (C-B)\};\)

\(\quad \quad \quad B\leftarrow (B \bigcup \{a_{0} \});\)

\(\quad \quad end\)

\(\quad end\)

\(\quad for \quad each \quad a_{i} \in B \quad do\)

\(\quad \quad if \quad GP_{U}(D \mid (B-\{a_{i} \}))=GP_{U}(D \mid C) \quad then\)

\(\quad \quad \quad B \leftarrow (B-\{a_{i}\});\)

\(\quad \quad end\)

\(\quad end\)

\(\quad RED_{U} \leftarrow B;\)

\(\quad return \quad reduction \quad RED_{U}\)

\(end\)

这就是基于知识粒度非动态属性约简算法的流程了,算法的流程虽然较多,但关键点在于等价类的划分,这点解决后,它的实现就不难了。

那么粗糙集有关的内容就暂告一段落了,系列博客介绍的也只是冰山一角,这里面还有很多很多的学问呢,有兴趣的可以查阅更多资料和文献。



本文参考了:

  • 景运革. 基于知识粒度的动态属性约简算法研究[D].西南交通大学,2017.

原文地址:https://www.cnblogs.com/Gedanke/p/12359412.html

时间: 2024-11-14 12:57:19

聊一聊粗糙集(六)的相关文章

聊一聊粗糙集(一)

本系列博客将介绍经典粗糙集的相关概念和一个属性约简算法,作为系列博客的开篇之作,先不介绍具体概念,简单认识认识粗糙集. 粗糙集理论简介 粗糙集是波兰理工大学Z.pawlak教授提出用来研究不完整数据,不精确知识的表达.学习,归纳等的一套理论. 它是一种新的处理模糊和不确定性问题的数学工具,已被广泛应用于知识发现.机器学习.决策支持.模式识别.专家系统及归纳推理等领域. 粗糙集理论的特点是能够分析隐藏在数据中的事实,又不需要关于数据附加信息. 其主要思想是在保持分类能力不变的前提下,通过知识约简,

聊一聊粗糙集(四)

本节我们将继续介绍粗糙集有关的概念. 本节将介绍经典粗糙集中粒度的度量相关概念. 我们依旧使用这个决策信息系统为例. \(U\) \(a\) \(b\) \(c\) \(e\) \(f\) \(d\) 1 0 1 1 1 0 1 2 1 1 0 1 0 1 3 1 0 0 0 1 0 4 1 1 0 1 0 1 5 1 0 0 0 1 0 6 0 1 1 1 1 0 7 0 1 1 1 1 0 8 1 0 0 1 0 1 9 1 0 0 1 0 0 知识粒度 知识粒度定义如下: 给定一个决策信息

聊一聊粗糙集(五)

本节我们将继续介绍粗糙集有关的概念. 上节我们介绍了知识粒度的度量,本节将介绍知识粒度的矩阵表示形式. 我们先简单介绍矩阵的相关概念. 矩阵 先看矩阵的和,差. 矩阵的和: 若\(A=(a_{ij})_{m \times n}\),\(B=(b_{ij})_{m \times n}\)是两个\(m \times n\)的矩阵,则两个矩阵的和\(C=(c_{ij})_{m \times n}\)为 \[ C = A+B \quad \Longrightarrow \quad c_{ij}=a_{i

第十六章、例行性工作排程 (crontab)

1. 什么是例行性工作排程 1.1 Linux 工作排程的种类: at, crontab 1.2 Linux 上常见的例行性工作 2. 仅运行一次的工作排程 2.1 atd 的启动与 at 运行的方式: /etc/at.deny 2.2 实际运行单一工作排程: at, atq & atrm, batch 3. 循环运行的例行性工作排程 3.1 使用者的配置: /etc/cron.deny, crontab 3.2 系统的配置档: /etc/crontab 3.3 一些注意事项 4. 可唤醒停机期

聊一聊淘宝首页和它背后的一套

聊一聊淘宝首页和它背后的一套 作者: 小胡子哥 2016-06-02 12:00:00本文发布时间为2016年06月02日12时00分00秒 分类: 前端杂烩 标签: 淘宝首页 下面是正文内容评论数: 12条评论 从 14 年双十二结束开始接手淘宝首页,到如今差不多 1 年半时间,不久前完成了首页相关工作的交接.期间经历了两次改版和一次从 PHP 到 Node 的迁移,还是颇有感受,下面给大家分享下.我要说话 文章好像有点长,列个大纲会比较好:我要说话 一.相关背景介绍二.淘宝首页的整理变迁

《上古天真论》第六讲文字版

上古天真论篇第六讲 主讲:徐文兵  主持:梁  冬 播出时间:2009-01-10  23:00—24:00 经文:帝曰:人年老而无子者,材力尽邪?将天数然也? 岐伯曰:女子七岁,肾气盛,齿更发长.二七而天癸至,任脉通,太冲脉盛,月事以时下,故有子.三七,肾气平均,故真牙生而长极. 梁冬:大家好,欢迎收听今天的国学堂之发现中医太美之<黄帝内经>之<上古天真论>.在过去的一段时间里呢,我们得以有幸啊,和厚朴中医学堂的徐文兵老师一起来逐字逐字地体会了<黄帝内经>的精妙,我都

聊一聊即将来临的跳槽季

第十四章 - 02: 聊一聊即将来临的跳槽季 之前的文章中都是聊的技术,今天在九月即将开始的前一天,咱们来聊一聊跳槽季 古之 大佬们都有云: 金三银四,金九银十. 这句话也被 很多职场新人奉为真理,毕竟在那些躁动的几个月里,公司中请假的.裸辞的.休假的的人都变多了. 那么在面对诱惑多多的 跳槽季,我们应该做一些什么? 当然在面对这个每年都在变化的事情,我们当然需要去了解一下 职场 大数据! 来更加全面的去了解 职业 到底是一个什么样的存在. 2017年 拉钩互联网白皮书 一.2017年互联网行业

聚焦新相亲时代:女孩在京有五六套房哭着想嫁富2代

2017-09-20 07:31:00 来源: 中国青年报(北京)        举报 6984 分享到: 易信 微信 QQ空间 微博 更多 用微信扫码二维码 分享至好友和朋友圈 T + - (原标题:中青报聚焦新相亲时代:2亿人及其背后家庭组成的"擂台") 石家庄某相亲角.视觉中国 资料 平均算下来,每一分钟里,国内有22对新人拿着户口本走向民政局,进入婚姻生活:同时,8对夫妻在另外一个窗口签下离婚协议. 根据民政部公布的数字,中国的结婚率和离婚率曲线渐渐逼近一个闭合的大于号.婚姻的

三百六十度全景图如何拍摄?

三百六十度全景图如何拍摄?随着全景技术的发展,全景拍摄也成为了一种十分新潮的摄影方式.全景摄影也有很多学问,而且随着全景照片的用途越来越多,拍摄全景的设备也越来越多.今天我们就介绍几种十分另类的360全景图拍摄方法,这些酷雷曼360全景图拍摄方法让你大开眼界. 工具/原料 相机 鱼眼镜头 云台 三角支架 方法/步骤 1 吊锤辅助360全景图拍摄方法 吊线保证拍摄时相机以节点旋转,使用吊线进行全景拍摄线不要太长,50CM以内比较容易控制,有时也到一米多在胸口位置进行拍摄,重锤容易晃动,很难对准.吊