教育行業(yè)A股IPO第一股(股票代碼 003032)

全國咨詢/投訴熱線:400-618-4000

快速模式匹配算法【KMP算法詳細介紹】

更新時間:2021年12月07日15時38分 來源:傳智教育 瀏覽次數:

1. 模式匹配

模式匹配的模型大概是這樣的:給定兩個字符串變量S和P,其中S成為目標串,其中包含n個字符,P稱為模式串,包含m個字符,其中m<=n。從S的給定位置(通常是S的第一個位置)開始搜索模式P。如果找到,則返回模式P在目標串中的位置(即:P的第一個字符在S中的下標)。如果在目標串S中沒有找到模式串P,則返回-1.這就是模式匹配的定義啦,下面來看看怎么實現模式匹配算法吧。


2. 樸素的模式匹配

樸素的模式匹配算法非常簡單,容易理解,大概思路是這樣的:從S的第一個字符S0開始,將P中的字符依次和S中字符比較,若S0=P0 && …… && Sm-1 = Pm-1,則證明匹配成功,剩下的匹配無需進行了,返回下標0。若在某一步Si != Pi 則P中剩下的字符也不用比較了,不可能匹配成功了,然后從S中第二個字符開始與P中第一個字符進行比較,同理,也是知道Sm = Pm-1或者找到某個i使得Si != S-1為止。依次類推若知道以S中第n-m個開始字符為止,還沒有匹配成功則證明S中不存模式P。(想想為什么這里強調是n-m)這個代碼實現應該是非常簡單的,具體開始參考strstr函數的內部實現。可以看看百度百科,給個鏈接http://baike.baidu.com/view/745156.htm,這里不寫出來了,還得趕緊進入正題KMP呢。


3. 快速模式匹配算法(KMP)

樸素的模式匹配效率不高的主要原因是進行了重復的字符比較。下一次比較和上一次比較沒有任何的聯(lián)系,是樸素模式匹配的缺點,其實上一次比較的比較結果是可以利用的,這就產生了快速模式匹配。在樸素的模式匹配中,目標串S的下標移動是一步一步的,這其實并不好,移動步數沒有必要為1。

現在不妨假設,當前匹配情況是這樣的:S0 …… St St+1 …… St+j 與 P0 P1…… Pj ,現在正在嘗試匹配的字符是St+j+1和Pj+1,并且St+j+1 != Pj+1,言外之意就是說St St+1……St+j和P0 P1……Pj是完全匹配的。那么這個時候,S中下一次匹配開始位置應該是什么呢??按照樸素的模式匹配,下次比較應該從St+1開始,并且令St+1和P0比較,但是在快速模式匹配中并不是這樣,快速模式匹配選擇St+j+1和Pk+1比較,K是什么呢?K是這樣的一個值,使得P0 P1……Pk 和 Pj-k Pj-k+1……Pj完全匹配,不妨設k=next[j],因此P0 P1……Pk和St+j-k St+j-k+1 ……St+j完全匹配。那么下一次要進行匹配的兩個字符應為St+j+1和Pk+1。S和P都沒有回溯到下標0在進行比較,這就是KMP之所以快的原因啦。

現在關鍵問題來了,這個K怎么能得到呢?如果得到這個K值復雜度高,那這個思路就不好了,其實這個K呢,只和模式串P有關系,并且要求m個k,k = next[j],因此只要算一次存儲到next數組中就可以了,并且時間復雜度和m有關系(線性關系)??纯淳唧w怎么求next數組的值,即求k。

用歸納法求next[]:設next(0) = -1,若已知next(j) = k,欲求得next[j+1]。

(1)如果Pk+1 = Pj+1,顯然next[j+1] = k+1.如果Pk+1 != Pj+1,則next[j+1] < next[j],于是尋找h < k 使得P0 P1……Ph = Pj-h Pj-h+1……Pj = Pk-h Pk-h+1……Pk。也就是說h = next(k);看出來了吧,這是個迭代的過程。(也就是以前的結果對求以后的值有用)

(2)如果不存這樣的h,說明P0 P1……Pj+1中沒有前后相等的子串,因此next[j+1] =-1.

(3)如果存在這樣的h,繼續(xù)檢驗Ph和Pj是否相等。知道找到這中相等的情況,或者確定為-1求next[j+1]的過程結束。

KMP算法它的實現過程接近人為進行模式匹配的過程。例如,對主串 A("ABCABCE")和模式串 B("ABCE")進行模式匹配,如果人為去判斷,僅需匹配兩次。

快速模式匹配01

圖 1 第一次人為模式匹配

第一次如圖 1 所示,最終匹配失敗。但在本次匹配過程中,我們可以獲得一些信息,模式串中 "ABC" 都和主串對應的字符相同,但模式串中字符 'A' 與 'B' 和 'C' 不同。

因此進行下次模式匹配時,沒有必要讓串 B 中的 'A' 與主串中的字符 'B' 和 'C' 一一匹配(它們絕不可能相同),而是直接去匹配失敗位置處的字符 'A' ,如圖 2 所示:

快速模式匹配02

圖 2 第二次人為模式匹配

至此,匹配成功。若使用 BF 算法,則此模式匹配過程需要進行 4 次。

由此可以看出,每次匹配失敗后模式串移動的距離不一定是 1,某些情況下一次可移動多個位置,這就是 KMP 模式匹配算法。

那么,如何判斷匹配失敗后模式串向后移動的距離呢?

模式串移動距離的判斷

每次模式匹配失敗后,計算模式串向后移動的距離是 KMP 算法中的核心部分。

其實,匹配失敗后模式串移動的距離和主串沒有關系,只與模式串本身有關系。

例如,我們將前面的模式串 B 改為 "ABCAE",則在第一次模式匹配失敗,由于匹配失敗位置模式串中字符 'E' 前面有兩個字符 'A',因此,第二次模式匹配應改為如圖 3 所示的位置:

快速模式匹配03

圖 3 模式匹配過程示意圖

結合圖 1、圖 2 和圖 3 不難看出,模式串移動的距離只和自身有關系,和主串無關。換句話說,不論主串如何變換,只要給定模式串,則匹配失敗后移動的距離就已經確定了。

不僅如此,模式串中任何一個字符都可能導致匹配失敗,因此串中每個字符都應該對應一個數字,用來表示匹配失敗后模式串移動的距離。

注意,這里要轉換一下思想,模式串向后移動等價于指針 j 前移,如圖 4 中的 a) 和 b)。換句話說,模式串后移相當于對指針 j 重定位。

快速模式匹配04

圖 4 模式串后移等價于 j 前移

因此,我們可以給每個模式串配備一個數組(例如 next[]),用于存儲模式串中每個字符對應指針 j 重定向的位置(也就是存儲模式串的數組下標),比如 j=3,則該字符匹配失敗后指針 j 指向模式串中第 3 個字符。

模式串中各字符對應 next 值的計算方式是,取該字符前面的字符串(不包含自己),其前綴字符串和后綴字符串相同字符的最大個數再 +1 就是該字符對應的 next 值。

前綴字符串指的是位于模式串起始位置的字符串,例如模式串 "ABCD",則 "A"、"AB"、"ABC" 以及 "ABCD" 都屬于前綴字符串;后綴字符串指的是位于串結尾處的字符串,還拿模式串 "ABCD" 來說,"D"、"CD"、"BCD" 和 "ABCD" 為后綴字符串。

注意,模式串中第一個字符對應的值為 0,第二個字符對應 1 ,這是固定不變的。因此,圖 3 的模式串 "ABCAE" 中,各字符對應的 next 值如圖 5 所示:

快速模式匹配05

圖 5 模式串對應的 next 數組

從圖 5 中的數據可以看出,當字符 'E' 匹配失敗時,指針 j 指向模式串數組中第 2 個字符,即 'B',同之前講解的圖 3 不謀而合。

以上所講 next 數組的實現方式是為了讓大家對此數組的功能有一個初步的認識。接下來學習如何用編程的思想實現 next 數組。編程實現 next 數組要解決的主要問題依然是 "如何計算每個字符前面前綴字符串和后綴字符串相同的個數"。

仔細觀察圖 5,為什么字符 'C' 對應的 next 值為 1?因為字符串 "AB" 前綴字符串和后綴字符串相等個數為 0,0 + 1 = 1。那么,為什么字符 'E' 的 next 值為 2?因為緊挨著該字符之前的 'A' 與模式串開頭字符 'A' 相等,1 + 1 = 2。

如果圖 5 中模式串為 "ABCABE",則對應 next 數組應為 [0,1,1,1,2,3],為什么字符 'E' 的 next 值是 3 ?因為緊挨著該字符前面的 "AB" 與開頭的 "AB" 相等,2 + 1 =3。

因此,我們可以設計這樣一個算法,剛開始時令 j 指向模式串中第 1 個字符,i 指向第 2 個字符。接下來,對每個字符做如下操作:

如果 i 和 j 指向的字符相等,則 i 后面第一個字符的 next 值為 j+1,同時 i 和 j 做自加 1 操作,為求下一個字符的 next 值做準備,如圖 6 所示:

快速模式匹配06

圖 6  i 和 j 指向字符相等

上圖中可以看到,字符 'a' 的 next 值為 j +1 = 2,同時 i 和 j 都做了加 1 操作。當計算字符 'C' 的 next 值時,還是判斷 i 和 j 指向的字符是否相等,顯然相等,因此令該字符串的 next 值為 j + 1 = 3,同時 i 和 j 自加 1(此次 next 值的計算使用了上一次 j 的值)。如圖 7 所示:

快速模式匹配07

圖 7  i 和 j 指向字符仍相等

如上圖所示,計算字符 'd' 的 next 時,i 和 j 指向的字符不相等,這表明最長的前綴字符串 "aaa" 和后綴字符串 "aac" 不相等,接下來要判斷次長的前綴字符串 "aa" 和后綴字符串 "ac" 是否相等,這一步的實現可以用 j = next[j] 來實現,如圖 8 所示:

快速模式匹配08

圖 8  執(zhí)行 j=next[j] 操作

從上圖可以看到,i 和 j 指向的字符又不相同,因此繼續(xù)做 j = next[j] 的操作,如圖 9 所示:

快速模式匹配09

圖 9 繼續(xù)執(zhí)行 j=next[j] 的操作

可以看到,j = 0 表明字符 'd' 前的前綴字符串和后綴字符串相同個數為 0,因此如果字符 'd' 導致了模式匹配失敗,則模式串移動的距離只能是 1。

這里給出使用上述思想實現 next 數組的 C 語言代碼:

void Next(char*T,int *next){
    next[1]=0;
    next[2]=1;
    int i=2;
    int j=1;
    while (i<strlen(T)) {
        if (j==0||T[i-1]==T[j-1]) {
            i++;
            j++;
            next[i]=j;
        }else{
            j=next[j];
        }
    }
}

代碼中 j=next[j] 的運用可以這樣理解,每個字符對應的next值都可以表示該字符前 "同后綴字符串相同的前綴字符串最后一個字符所在的位置",因此在每次匹配失敗后,都可以輕松找到次長前綴字符串的最后一個字符與該字符進行比較。


Next函數的缺陷

快速模式匹配10

圖 10  Next 函數的缺陷

例如,在圖 10a) 中,當匹配失敗時,Next 函數會由圖 10b) 開始繼續(xù)進行模式匹配,但是從圖中可以看到,這樣做是沒有必要的,純屬浪費時間。

出現這種多余的操作,問題在當 T[i-1]==T[j-1] 成立時,沒有繼續(xù)對 i++ 和 j++ 后的 T[i-1] 和 T[j-1] 的值做判斷。改進后的 Next 函數如下所示:

void Next(char*T,int *next){ 
    next[1]=0;
    next[2]=1;
    int i=2;
    int j=1;
    while (i<strlen(T)) {
        if (j==0||T[i-1]==T[j-1]) {
            i++;
            j++;
            if (T[i-1]!=T[j-1]) {
               next[i]=j;
            }
            else{
                next[i]=next[j];
            }
        }else{
            j=next[j];
        }
    }
}

使用精簡過后的 next 數組在解決例如模式串為 "aaaaaaab" 這類的問題上,會大大提高效率,如圖 11 所示,精簡前為 next1,精簡后為 next2:

快速模式匹配11

圖 11  改進后的 Next 函數


KMP 算法的實現

假設主串 A 為 "ababcabcacbab",模式串 B 為 "abcac",則 KMP 算法執(zhí)行過程為:

第一次匹配如圖 12 所示,匹配結果失敗,指針 j 移動至 next[j] 的位置;

快速模式匹配12

圖 12   第一次匹配示意圖

第二次匹配如圖 13 所示,匹配結果失敗,依舊執(zhí)行 j=next[j] 操作:

快速模式匹配13

圖 13  第二次匹配示意圖

第三次匹配成功,如圖 14 所示:

快速模式匹配14

圖 14  第三次匹配示意圖

很明顯,使用 KMP 算法只需匹配 3 次,而同樣的問題使用 BF 算法則需匹配 6 次才能完成。

KMP 算法的完整 C 語言實現代碼為:

#include <stdio.h>
#include <string.h>
void Next(char*T,int *next){
    int i=1;
    next[1]=0;
    int j=0;
    while (i<strlen(T)) {
        if (j==0||T[i-1]==T[j-1]) {
            i++;
            j++;
            next[i]=j;
        }else{
            j=next[j];
        }
    }
}
int KMP(char * S,char * T){
    int next[10];
    Next(T,next);//根據模式串T,初始化next數組
    int i=1;
    int j=1;
    while (i<=strlen(S)&&j<=strlen(T)) {
        //j==0:代表模式串的第一個字符就和當前測試的字符不相等;S[i-1]==T[j-1],如果對應位置字符相等,兩種情況下,指向當前測試的兩個指針下標i和j都向后移
        if (j==0 || S[i-1]==T[j-1]) {
            i++;
            j++;
        }
        else{
            j=next[j];//如果測試的兩個字符不相等,i不動,j變?yōu)楫斍皽y試字符串的next值
        }
    }
    if (j>strlen(T)) {//如果條件為真,說明匹配成功
        return i-(int)strlen(T);
    }
    return -1;
}
int main() {
    int i=KMP("ababcabcacbab","abcac");
    printf("%d",i);
    return 0;
}

運行結果為:

6
0 分享到:
和我們在線交談!