PCA降纬一步一步

import numpy as np

第一步:原始值


X1


0.9


2.4


1.2


0.5


0.3


1.8


0.5


0.3


2.5


1.3


X2


1


2.6


1.7


0.7


0.7


1.4


0.6


0.6


2.6


1.1

第二步:计算平均值

=1.17,np.mean(x1)=1.1700000000000002

=1.3,  np.mean(x2)=1.3

第三步:X1 - ,X2 - ,得到如下表格


X11


0.9-=-0.27


2.4-=1.23


1.2-=0.03


0.5-=-0.67


0.3-=-0.87


1.8-=0.63


0.5-=-0.67


0.3-=-0.87


2.5-=1.33


1.3-=0.13


X22


1-=-0.3


2.6-=1.3


1.7-=0.4


0.7-=0.6


0.7-=0.6


1.4-=0.1


0.6-=-0.7


0.6-=-0.7


2.6-=1.3


1.1-=-0.2

x11 = x1 -np.mean(x1)

x11

Out[46]: array([-0.27,  1.23,  0.03, -0.67, -0.87,  0.63, -0.67, -0.87,  1.33,  0.13])

x22 = x2 -np.mean(x2)

x22

Out[48]: array([-0.3,  1.3,  0.4, -0.6, -0.6,  0.1, -0.7, -0.7,  1.3, -0.2])

第四步:计算协方差矩阵(X11,X12)

covx12 = np.cov(x11,x2)

covx12

Out[51]:

array([[ 0.68677778,  0.60666667],

[ 0.60666667,  0.59777778]])

 

第五步:计算特征值和特征向量covx12

w,v = np.linalg.eig(covx12)

w

Out[53]: array([ 1.25057433,  0.03398123])

v

Out[54]:

array([[ 0.73251454, -0.68075138],

[ 0.68075138,  0.73251454]])

The number w is an eigenvalue of a if there exists a vector v such that dot(a,v) = w * v. Thus, the arrays a, w, and v satisfy the equations dot(a[:,:], v[:,i]) = w[i] * v[:,i]for .

 

np.dot(covx12,v[:,0])

Out[62]: array([ 0.91606388,  0.8513302 ])

 

w[0]*v[:,0]

Out[63]: array([ 0.91606388,  0.8513302 ])

 

np.dot(covx12,v[:,1])

Out[64]: array([-0.02313277,  0.02489174])

 

w[1]*v[:,1]

Out[65]: array([-0.02313277,  0.02489174])

 

根据矩阵特征向量大小排序,两个特征向量顺序为 v[:,0],v[:,1].

 

第六步:降低纬度

 

 

 

 


X11


X12


 


 


 


 


   


 


 


 


 


 

(X11,X12)10行*2列      *         V[:,0] 2行*1列     得到 = 10行*1列

从而达到由每个2纬向量变为1纬向量的目的

 

时间: 2025-01-06 11:19:22

PCA降纬一步一步的相关文章

插入排序——一步一步算法篇

插入排序 算法思想:将待排序的数据放在一个数组中,并设置一个中间量m,用来存储每次插入比较的元素. (1) a[1]自成1个有序区,无序区为a[2..n]; (2) 从i=2起直至i=n为止,将a[i]放在恰当的位置,使a[1..i]数据序列有序; ① m:=a[i]; ② 将m与前i-1个数比较 , j:=i-1; while(x #include<iostream> #include<cstdio> #include<cstring> #include<str

一步一步学习Vue(十一)

本篇继续学习vuex,还是以实例为主:我们以一步一步学Vue(四)中讲述的例子为基础,对其改造,基于vuex重构一遍,这是原始的代码: todolist.js ; (function () { var list = []; var Todo = (function () { var id = 1; return function (title, desc) { this.title = title; this.desc = desc; this.id = id++; } })(); /** *

.NET跨平台:在Mac上跟着错误信息一步一步手写ASP.NET 5程序

今天坐高铁时尝试了一种学习ASP.NET 5的笨方法,从空文件夹开始,根据运行dnx . kestrel命令的错误信息,一步一步写代码,直至将一个最简单的ASP.NET程序运行起来. 尝试的具体步骤如下. 新建一个空文件夹HelloCnblogs: mkdir HelloCnblogs && cd $_ 在这个空HelloCnblogs文件夹中运行 dnx . kestrel 命令(基于CoreCLR的dnx),运行结果是如下的出错信息: System.InvalidOperationEx

一步一步跟我学习lucene(19)---lucene增量更新和NRT(near-real-time)Query近实时查询

这两天加班,不能兼顾博客的更新,请大家见谅. 有时候我们创建完索引之后,数据源可能有更新的内容,而我们又想像数据库那样能直接体现在查询中,这里就是我们所说的增量索引.对于这样的需求我们怎么来实现呢?lucene内部是没有提供这种增量索引的实现的: 这里我们一般可能会想到,将之前的索引全部删除,然后进行索引的重建.对于这种做法,如果数据源的条数不是特别大的情况下倒还可以,如果数据源的条数特别大的话,势必会造成查询数据耗时,同时索引的构建也是比较耗时的,几相叠加,势必可能造成查询的时候数据缺失的情况

一步一步跟我学习lucene(9)---lucene搜索之拼写检查和相似度查询提示(spellcheck)

suggest应用场景 用户的输入行为是不确定的,而我们在写程序的时候总是想让用户按照指定的内容或指定格式的内容进行搜索,这里就要进行人工干预用户输入的搜索条件了:我们在用百度谷歌等搜索引擎的时候经常会看到按键放下的时候直接会提示用户是否想搜索某些相关的内容,恰好lucene在开发的时候想到了这一点,lucene提供的suggest包正是用来解决上述问题的. suggest包联想词相关介绍 suggest包提供了lucene的自动补全或者拼写检查的支持: 拼写检查相关的类在org.apache.

loadrunner安装运行一步一步来(多图)

安装loadrunner 一路遇到很多坑,很多坑,坑,为什么呢? 因为这软件是收费的,他操作文档写的很详细,就是不写基础环境的配置,下面安装过程写详细一些,减少大家没必要时间上的浪费和对此的谩骂 现在loadrunner 12的版本已经出来了,不过还没有破解,所以先安装测试11的版本,不绕圈子,先下载, 链接: http://pan.baidu.com/s/1kT8CbVh 密码: v4br 加密码是怕被删 遇到的坑 下面是通用的安装说明: 1.下载loadrunner-11.zip文件,解压缩

Rhythmk 一步一步学 JAVA (21) JAVA 多线程

1.JAVA多线程简单示例 1.1 .Thread  集成接口 Runnable 1.2 .线程状态,可以通过  Thread.getState()获取线程状态: New (新创建) Runnable (可以运行) Blocked  (被阻塞) Waiting  (等待) Timed waiting (计时等待) Terminated  (被终止) ? 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27

Rhythmk 一步一步学 JAVA (20) JAVA enum常用方法

JAVA 枚举定义常用方法: 1.static Enum valueOf(Class enum,String name) 返回指定name的枚举类型 2.Static Enum values[] 返回枚举常量集合 ? 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50

一步一步学习IdentityServer3 (1)

学习之初: IdentityServer3我自己最开始了解到的就是做一个SSO单点登录,后面发现还有单独的认证服务功能,其实它还可以做APIs的访问控制,资源授权,另外还可以为提供第三方登录,其他的自由定制目前也在学习中. 网络飞速发展的今天,庞大的数据,庞大的用户,庞大的业务,都需要登录的支撑,登录授权完全看作一个单独的一门技术,Web端需要登录,App端需要登录,Api需要授权访问等等,除此以外大型业务系统,子系统之间其实也需要这样一个登陆授权,所以,登录不再是单一的一个功能点了,简单的查询