KMP算法主要用于高效解决单模式串的匹配问题,即:
给定主串s和模式串p,问p是否是s的子串(len(s)<=N, len(p)<=M)。
先考虑最朴素的算法,即枚举s中的起点i,检查s[i..i+M-1]是否等于p,这样的时间复杂度为O(NM)。
分析一下为什么这样的算法效率低:设指针i和j分别指向s和p中的字符,不妨假定s[0..k-1]和p[0..k-1]已经匹配上了,而s[k]!=p[k](k<M),这说明s[0..M-1]已经不能匹配上p了,根据朴素算法,指针i将移动到s[1],指针j将移动到p[0]重新开始匹配,之后每次失配时主串中的指针i都要回到前面,这就产生了不必要的麻烦。但是如果指针i不回溯而是停在s[k]处,就会漏掉s[l..l+M-1]和p[0..M-1](0<l<k)匹配上的情形。那么为了提高效率实现指针i不回溯,我们来重点考察如何弥补这些被漏掉的情形(见下图):
假定存在这样的l(0<l<k)使得s[l..l+M-1]和p[0..M-1]匹配上了,那么有s[l..k-1]=p[0..k-l-1],由于之前已经匹配上的部分说明了s[l..k-1]=p[l..k-1],于是推出p[0..k-l-1]=p[l..k-1],也就是说这样的l会使得p[0..k-1]的长度为k-l的前缀和后缀完全相同!如果令next[k]=k-l的话,那么一旦在p[k]处失配,指针i不需要回溯,而指针j只需要指向模式串的next[k]处继续与主串比较就可以了!这就是KMP算法思想的出发点。
那么接下来我们要解决的,就是如何计算next数组。设next[k]=r,根据上一段的分析我们知道r是使得p[0..k-1]的前缀和后缀完全相同的最大长度(之所以选择最大长度是因为,当再次失配的时候可以继续把指针j向前移,就会移到较小的使前后缀完全相同的长度上)。考虑利用递推的方式来求next数组,假定我们已知next[i]=j,现在求next[i+1]:
(图片改自http://blog.csdn.net/yutianzuijin/article/details/11954939)
如果p[i]=p[j],那么自然有next[i+1]=j+1;如果p[i]!=p[j],那么从定义出发,next[i+1]是最大长度r(r<=j)使得p[0..r-1]=p[i-r+1..i],由next[i]的性质可以推出p[i-r+1..i]=p[i-r+1..i-1]+p[i]=p[j-r+1..j-1]+p[i],所以如果p[i]=p[r-1],那么r就满足p[0..r-2]=p[j-r+1..j-1],这表明next[j]=r-1,即next[i+1]=next[j]+1,此时相当于p[i]=p[next[j]];如果仍然有p[i]!=p[next[j]],那么仿照上面的推导过程,只需要比较p[i]和p[next[next[j]]],形成这样一个递归过程:不断令j=next[j],直到最后p[i]等于p[j]或者j=-1为止(如果令next[0]=-1的话),然后令next[++i]=++j就可以了。下面是对模式串p计算next数组的代码:
void CountNext(char p[]){ int i = 0, j = -1; next[0] = -1; while (i < lenp) if (j == -1 || p[i] == p[j]) next[++i] = ++j; else j = next[j];}
有了next数组以后就可以实现第一段中陈述的匹配过程了,用指针i指向主串s,指针j指向模式串p,如果s[i]=p[j]或者j=-1(指针j回溯过头),那么两个指针各向后移动一位,如果s[i]!=p[j],那么就将j向前移动到next[j]处,即令j=next[j]。当j=len(p)的时候,匹配就成功了,而当i=len(s)的时候,匹配就失败了。下面是利用next数组进行单模式串匹配的代码:
void KMP(char s[], char p[]){ int i = 0, j = 0; while (i < lens) { if (j == -1 || s[i] == p[j]) ++i, ++j; else j = next[j]; if (j == lenp) printf("One matched!\n"), j = next[j]; }}
可以看出两段代码具有很高的相似度。上面这段代码中,将完成一次匹配看作是在p[len(p)]处失配,这样就可以继续查找主串后面的部分与模式串的匹配情况了。
整个KMP算法的时间复杂度为O(N+M),效率非常高。
KMP算法的执行过程比较容易掌握,但next数组性质的应用却非常灵活。
Problems
题意:求模式串p在主串s中出现的次数(len(p)<=10,000, len(s)<=1,000,000)。
KMP模板题,每次匹配成功计数器自增1即可。提醒:strlen()函数的复杂度是O(L)不是O(1)。
1 // Problem: poj3461 - Oulipo 2 // Category: KMP Algorithm 3 // Author: Niwatori 4 // Date: 2016/07/23 5 6 #include7 #include 8 9 int next[10010];10 int lens, lenp;11 12 void CountNext(char p[])13 {14 int i = 0, j = -1;15 next[0] = -1;16 while (i < lenp)17 if (j == -1 || p[i] == p[j])18 next[++i] = ++j;19 else j = next[j];20 }21 22 int KMP(char s[], char p[])23 {24 int i = 0, j = 0, cnt = 0;25 while (i < lens)26 {27 if (j == -1 || s[i] == p[j])28 ++i, ++j;29 else j = next[j];30 31 if (j == lenp)32 ++cnt, j = next[j];33 }34 return cnt;35 }36 37 int main()38 {39 int t; scanf("%d", &t);40 while (t--)41 {42 char p[10010], s[1000010];43 scanf("%s%s", p, s);44 lenp = strlen(p);45 lens = strlen(s);46 CountNext(p);47 printf("%d\n", KMP(s, p));48 }49 return 0;50 }
题意:给定字符串s(len(s)<=400,000),求使得s的前缀与后缀完全相同的所有长度。
如果理解了上面next数组的求法,那么很容易知道这题只需从len(s)处开始,不断调用next数组,最后把所有结果逆序输出即可。
1 // Problem: poj2752 - Seek the Name, Seek the Fame 2 // Category: KMP Algorithm 3 // Author: Niwatori 4 // Date: 2016/07/23 5 6 #include7 #include 8 #define MAXL 400010 9 10 int len, next[MAXL];11 12 void CountNext(char p[])13 {14 int i = 0, j = -1;15 next[0] = -1;16 while (i < len)17 if (j == -1 || p[i] == p[j])18 next[++i] = ++j;19 else j = next[j];20 }21 22 int main()23 {24 char s[MAXL];25 while (scanf("%s", s) == 1)26 {27 len = strlen(s);28 CountNext(s);29 30 int i = len, cnt = 0, ans[MAXL];31 while (i > 0)32 {33 ans[cnt++] = i;34 i = next[i];35 }36 for (int i = cnt - 1; i >= 0; --i)37 printf("%d ", ans[i]);38 printf("\n");39 }40 return 0;41 }
题意:给定字符串s(len(s)<=1,000,000),求其最小循环节的循环次数。
字符串s存在非平凡最小循环节的充要条件是len % (len - next[len]) == 0,且最小循环节的长度就等于len - next[len],否则最小循环节就是整个串s。理由见下图(摘自网络):
类似地可以解决另一个问题:给定字符串s,求其满足(多次复制后能包含原串)的子串的最小长度。例如对于abcabcab,答案为3,取abc即可。实际上这个问题就是求len-next[len],原理与上图类似。
1 // Problem: poj2406 - Power Strings 2 // Category: KMP Algorithm 3 // Author: Niwatori 4 // Date: 2016/07/23 5 6 #include7 #include 8 #define MAXL 1000010 9 10 int len, next[MAXL];11 12 void CountNext(char p[])13 {14 int i = 0, j = -1;15 next[0] = -1;16 while (i < len)17 if (j == -1 || p[i] == p[j])18 next[++i] = ++j;19 else j = next[j];20 }21 22 int main()23 {24 char s[MAXL];25 while (scanf("%s", s) == 1)26 {27 if (!strcmp(s, ".")) break;28 len = strlen(s);29 CountNext(s);30 31 if (len % (len - next[len]) == 0)32 printf("%d\n", len / (len - next[len]));33 else printf("1\n");34 }35 return 0;36 }
题意:给定一个字符矩阵,求其满足(多次复制后能包含原矩阵)的子矩阵的最小面积(矩阵高R<=10,000,宽C<=75)。
可以看出这道题就是上面那个问题的二维版本。为了叙述方便,以下称多次复制后能包含原串的子串为好串,多次复制后能包含原矩阵的子矩阵为好矩阵。
显然好矩阵可以取为原矩阵左上角的一块,我们只要求出其高度与宽度即可。这里有一个技巧,把矩阵的每一行都看成一个字符,那么整个矩阵就可以看成长度为R的模式串,好矩阵的高度就等于这个串的最小好串长度,问题化为了一维的情形。然后对列进行同样的处理,求出好矩阵的宽度,再把宽与高一乘就得到了答案。由于在计算next数组的过程中每次比较矩阵的两行或两列都会用到strcmp函数,所以上面做法的时间复杂度为O(RC)。
1 // Problem: poj2185 - Milking Grid 2 // Category: KMP Algorithm 3 // Author: Niwatori 4 // Date: 2016/07/23 5 6 #include7 #include 8 #define MAXR 10010 9 #define MAXC 8010 11 template 12 void CountNext(T s, int next[], int len)13 {14 int i = 0, j = -1;15 next[0] = -1;16 while (i < len)17 if (j == -1 || !strcmp(s[i], s[j]))18 next[++i] = ++j;19 else j = next[j];20 }21 22 int main()23 {24 char s1[MAXR][MAXC] = { 0}, s2[MAXC][MAXR] = { 0};25 int r, c, next1[MAXR], next2[MAXC];26 scanf("%d%d", &r, &c);27 for (int i = 0; i < r; ++i)28 scanf("%s", s1[i]);29 for (int i = 0; i < c; ++i) // Transpose30 for (int j = 0; j < r; ++j)31 s2[i][j] = s1[j][i];32 33 CountNext(s1, next1, r); // Compute for rows34 CountNext(s2, next2, c); // Compute for columns35 printf("%d", (r - next1[r]) * (c - next2[c]));36 return 0;37 }