[算法系列之二十六]字符串匹配之KMP算法

一 简介

KMP算法是一种改进的字符串匹配算法,由D.E.Knuth与V.R.Pratt和J.H.Morris同时发现,因此人们称它为克努特—莫里斯—普拉特操作(简称KMP算法)。KMP算法的关键是利用匹配失败后的信息,尽量减少模式串与主串的匹配次数以达到快速匹配的目的。

二 基于部分匹配表的KMP算法

举例来说,有一个字符串”BBC ABCDAB ABCDABCDABDE”,我想知道,里面是否包含搜索串”ABCDABD”?

步骤1:字符串”BBC ABCDAB ABCDABCDABDE”的第一个字符与搜索串”ABCDAB D”的第一个字符进行比较。因为字符B与A不匹配,所以搜索串后移一位。

步骤2:因为字符B与A不匹配,所以搜索串再往后移一位。

步骤3:就这样,直到字符串有一个字符与搜索串的第一个字符相同为止。

步骤4:接着比较字符串和搜索串的下一个字符,还是相同。

步骤5:直到字符串有一个字符与搜索串对应的字符不相同为止。

步骤6:这时,最自然的反应是,将搜索串整体后移一位,再从头逐个比较。这样做虽然可行,但是效率很差,因为你要把”搜索位置”移到已经比较过的位置,重比一遍。(这就是之前讲的[算法系列之十二]字符串匹配之蛮力匹配

步骤7:一个基本事实是,当空格与D不匹配时,你其实知道前面六个字符是”ABCDAB”。KMP算法的想法是,充分利用这个已知信息,不要把”搜索位置”移回已经比较过的位置,继续把它向后移。这样就提高了效率。

步骤8:怎么做到这一点呢?可以针对搜索串,算出一张《部分匹配表》(Partial Match Table)。这张表是如何产生的,后面再介绍,这里只要会用就可以了。

步骤9:已知空格与D不匹配时,前面六个字符”ABCDAB”是匹配的。

查表可知,最后一个匹配字符B对应的”部分匹配值”为2,因此按照下面的公式算出向后移动的位数:

移动位数 = 已匹配的字符数 - 失配字符的上一位字符对应的部分匹配值

因为 6 - 2 等于4,所以将搜索串向后移动4位,如下图。

步骤10:因为空格与C不匹配,搜索串还要继续往后移。这时,已匹配的字符数为2(”AB”),对应的”部分匹配值”为0。所以,移动位数 = 2 - 0,结果为 2,于是将搜索串向后移2位。

步骤11:因为空格与A不匹配,继续后移一位。逐位比较,直到发现C与D不匹配。

于是,移动位数 = 6 - 2,继续将搜索串向后移动4位。

步骤12:逐位比较,直到搜索串的最后一位,发现完全匹配,于是搜索完成。

如果还要继续搜索(即找出全部匹配),移动位数 = 7 - 0,再将搜索串向后移动7位,这里就不再重复了。

三 部分匹配表(Partial Match Table)

下面介绍《部分匹配表》是如何产生的。首先,要了解两个概念:前缀后缀

  • 前缀指除了最后一个字符以外,一个字符串的全部头部组合;
  • 后缀指除了第一个字符以外,一个字符串的全部尾部组合。

举例说明:

部分匹配值就是前缀和后缀的最长的共有元素的长度

以”ABCDABD”为例。

由此得到部分匹配表,如下:

“部分匹配”的实质是,有时候,字符串头部和尾部会有重复。比如,”ABCDAB”之中有两个AB,那么它的”部分匹配值”就是2(AB的长度)。搜索词移动的时候,第一个AB向后移动4位(字符串长度-部分匹配值),就可以来到第二个AB的位置。

四 基于next数组的KMP算法

通过以上的匹配过程可以看出,问题的关键就是寻找搜索串中最大长度的相同前缀和后缀。找到了搜索串中每个字符之前的前缀和后缀公共部分的最大长度后,便可基于此匹配。而这个最大长度便正是next 数组要表达的含义。

4.1:根据《部分匹配表》求next 数组

经过上面叙述我们已经知道搜索串“ABCDABD”各个前缀后缀的最大公共元素长度了,如下图所示:

部分匹配表也由此而出如下所示:

有了部分匹配表我们就可以利用下面公式计算移动位数:

移动位数 = 已匹配的字符数 - 失配字符的上一位字符对应的部分匹配值

上文利用部分匹配表和移动位数计算公式进行匹配时,我们发现,当一个字符失配时,其实没必要考虑这个失配的字符,我们每次都是看的是失配字符的上一位字符“部分匹配值”。如此,便引出了next 数组。

把next 数组跟“部分匹配表”对比后,不难发现,next 数组相当于“部分匹配表” 整体向右移动一位,然后第一个元素值赋为-1。意识到了这一点,你会惊呼原来next 数组的求解竟然如此简单:就是找最大对称长度的前缀后缀,然后整体右移一位,第一个元素值赋为-1(当然,你也可以直接计算某个字符对应的next值,就是看这个字符之前的字符串中有多大长度的相同前缀后缀)。

更新一下搜索串移动位数的计算公式

移动位数 = 失配字符的位置 - 失配字符next值

其实两公式实质上是一样的,失配字符的位置等于已匹配的字符数,失配字符next 值等于失配字符的上一位字符的部分匹配值,只是换一种说法而已。

4.2 递推求解next数组

对于给定的字符串p,其next数组的含义是:对于k=next[j],p的前缀p[0…k-1]和p的后缀p[j-k…j-1]匹配,k要尽可能的大,且k< j。我们可以根据上述含义写出next的蛮力计算方法。复杂度应该是O(^2)。

换个思路,现在next[0]=-1,next[1]=0。

假设k=next[j],则p[0…k-1]=p[j-k…j-1],那么求next[j+1]有两种情况:

  • 如果p[k] = p[j],则p[0…k]=p[j-k…j],所next[j+1]=k+1=next[j]+1
  • 如果p[k] != p[j],这是可以看做另外一个字符串匹配的问题,主串和模式串都是p,当匹配失败时,k应该如何移动呢?显然是k=next[k]
    void GetNext(string T,int next[]){
        int size = T.size();
        next[0] = -1;
        int k = -1;
        int j = 0;
        while(j < size - 1){
            // p[k]表示前缀,p[j]表示后缀
            if(k == -1 || T[k] == T[j]){
                ++k;
                ++j;
                next[j] = k;
            }//if
            else{
                // 回溯
                k = next[k];
            }
        }//while
    }

引用:

字符串匹配的KMP算法

从头到尾彻底理解KMP

KMP算法求next数组

KMP算法的next[]数组通俗解释

时间: 2024-10-03 22:14:29

[算法系列之二十六]字符串匹配之KMP算法的相关文章

[算法系列之二十四]后缀树(Suffix Tree)

之前有篇文章([算法系列之二十]字典树(Trie))我们详细的介绍了字典树.有了这些基础我们就能更好的理解后缀树了. 一 引言 模式匹配问题 给定一个文本text[0-n-1], 和一个模式串 pattern[0-m-1],写一个函数 search(char pattern[], char text[]), 打印出pattern在text中出现的所有位置(n > m). 这个问题已经有两个经典的算法:KMP算法 ,有限自动机,前者是对模式串pattern做预处理,后者是对待查证文本text做预处

Powershell管理系列(二十六)PowerShell操作之批量导出&导入邮箱

-----提供AD\Exchange\Lync\Sharepoint\CRM\SC\O365等微软产品实施及外包,QQ:185426445.电话18666943750 项目中有时候做跨林邮箱迁移的时候,条件不成熟,比如安全考虑或者其他考虑,不能做双林信任,这样就提出了一个问题,历史邮件需要使用的话怎么办,一个简单高效的解决办法就是从源森林批量导出邮件为.pst文件,在批量导入到目的域森林,具体操作如下: 1.赋予管理账号邮件导入导出权限,命令如下: cls whoami New-Manageme

字符串匹配(KMP 算法 含代码)

主要是针对字符串的匹配算法进行解说 有关字符串的基本知识 传统的串匹配法 模式匹配的一种改进算法KMP算法 网上一比較易懂的解说 小样例 1计算next 2计算nextval 代码 有关字符串的基本知识 串(string或字符串)是由零个或多个字符组成的有限序列,一般记为 当中s是串的名,用单引號括起来的字符序列是串的值:ai(1<=i<=n)能够是字母.数值或其它字符.串中字符的数组 n称为串的长度.零个字符的串称为空串,它的长度为0 串中随意个连续的字符组成的子序列称为该串的子串. 包括子

字符串匹配的KMP算法

html, body { font-size: 15px; } body { font-family: Helvetica, "Hiragino Sans GB", 微软雅黑, "Microsoft YaHei UI", SimSun, SimHei, arial, sans-serif; line-height: 1.6; color: ; background-color: ; margin: 0; padding: 16px 20px; } h1, h2, h

算法系列之二十四:离散傅立叶变换之音频播放与均衡器

导语 在算法系列的第二十二篇,我们介绍了离散傅立叶变换算法的实现,将时域的音频信号转换到频域进行分析,获取拨号音频的频率特征.这一篇我们将介绍一种频域均衡器的实现方法,所谓的频域均衡器,就是在频域信号的基础上对音频数据进行调整,然后再将频域信号转换成时域信号在回放设备上播放,从而达到音色调节的目的.将频域信号转换成时域信号的算法,就是离散傅立叶逆变换算法. 1 离散傅立叶逆变换 有从时域转换到频域的方法,就必然有从频域转换到时域的方法,相对于离散傅里叶变换,这个反向转换就是离散傅里叶逆变换(ID

字符串匹配暴力算法 与 字符串匹配的KMP算法

声明:先看一下阮一峰的网络日志关于字符串的KMP算法的讲解.本文图片均引用于这篇日志. 在先前的笔试中遇到了关于字符串匹配的问题,一时脑袋卡壳没写好算法.现在就来分析分析 暴力算法和KMP算法各自原理,以及代码实现,之间差异,并且总结一下好算法的一般思路. =========================================================================== 各自原理: 暴力算法: 1. 我们把长的字符串做为一个文本字符串,命名为strText,把

[算法系列之二十]字典树(Trie)

一 概述 又称单词查找树,Trie树,是一种树形结构,是一种哈希树的变种.典型应用是用于统计,排序和保存大量的字符串(但不仅限于字符串),所以经常被搜索引擎系统用于文本词频统计. 二 优点 利用字符串的公共前缀来减少查询时间,最大限度地减少无谓的字符串比较,查询效率比哈希表高. 三 性质 (1)根节点不包含字符,除根节点外每一个节点都只包含一个字符: (2)从根节点到某一节点,路径上经过的字符连接起来,为该节点对应的字符串: (3)每个节点的所有子节点包含的字符都不相同. 单词列表为"apps&

[算法系列之二十二]包含T全部元素的最小子窗口

题目描述 给定一个包含一系列字符的集合T和字符串S,请在字符串S中找到一个最小的窗口,这个窗口中必须包含T中的所有字符. 例如, S = "ADOBECODEBANC" T = "ABC" 最小窗口是"BANC" 分析 这是一个有趣的问题,这个有趣的问题有多种方法来解决,最好的方法是非常简单,美丽的. 在这篇文章中,我首先说明了一个方法,是我第一次遇见这个问题时想到的.我的第一个方法有点复杂,同时也不是最好的解决方案(时间复杂度为O(NlgM))

字符串匹配之KMP算法

1.前言: leetcode上的28. Implement strStr()就是一个字符串匹配问题.字符串匹配是计算机的基本任务之一.所以接下来的两篇日志,都对相关的算法进行总结. 2.暴力求解算法 如果用暴力匹配的思路,并假设现在文本串S匹配到 i 位置,模式串P匹配到 j 位置,则有: 如果当前字符匹配成功(即S[i] == P[j]),则i++,j++,继续匹配下一个字符: 如果失配(即S[i]! = P[j]),令i = i - (j - 1),j = 0.相当于每次匹配失败时,i 回溯