有关“字符串”的处理方法

一,KMP模式匹配

//模式匹配,kmp算法,复杂度O(m+n)
//返回匹配位置,-1表示匹配失败,传入匹配串和模式串和长度
#define MAXN 10000
int next[MAXN];
int pat_match(int ls,char* str,int lp,char* pat){
    next[0] = -1;
    int i=0, j;
    for (j = 1; j < lp; j++){ //求pat串next数组
        for (i = next[j-1]; i >= 0 && !(pat[i+1] == pat[j]); i = next[i]);
        next[j] = (pat[i+1] == pat[j] ? i+1:-1);
    }
    for (i = j = 0; i < ls && j < lp; i++)
        if (str[i] == pat[j])
            j++;
        else if (j) {
            j = next[j-1]+1;
            i--;
        }
    return j == lp ? (i-lp):-1;
}
View Code

http://blog.csdn.net/v_july_v/article/details/6545192 

 

二,BM算法

坏字符规则:

当出现一个坏字符时, BM算法向右移动模式串, 让模式串中最靠右的对应字符与坏字符相对,然后继续匹配

 

如果是未在匹配串出现过得字符,移动nPLen - i;

如果在匹配串出现过,最后的位置是nBadArray,就把匹配串中这个字符与主串对上(但要保证不会使匹配串向左移动需要判断,否则只右移一位),需要移动nPLen - i - 1 - nBadArray;

好后缀规则:

类似KMP算法中的最长前缀,所不同的是,BM算法从字符串的最后开始逐位向前匹配

对于好后缀suffix的一个匹配子串就是从i位置向前数Ni(P)个字符所组成的子串。

而且因为Ni(P)是从i开始向前能够匹配后缀的最长长度,所以可以保证这两个子串之前的一个字符是不相同的。

情况一:

目标串:abcdekxxxxxxx

模式串:cekgek

当从后往前匹配时失配,此时已经匹配上的好后缀为ek,所以我们在模式串的前面部分中查找是否有ek出现,如果有,我们将前面出现的ek挪过来,再继续和目标串进行匹配。本例中模式串1,2位置为ek,移动对上主串的ck。

情况二:

如果匹配上的好后缀部分在前面没有找到,此时我们可以寻找好后缀的后缀中是否有匹配模式串的前缀的情况,如下例:

目标串:abcdekxxxxxxx

模式串:kccgek

虽然ek在模式串的前面没有找到,但是好后缀的一个后缀(k)正好是模式串的一个前缀,所以我们可以将模式串右移。

 

 

对于情况一,我们可以先对好后缀数组全部赋值为-1,然后从N-BOX数值的前面往后面遍历一遍,填写对应的好后缀数组。然后我们在来看剩下的好后缀数组中=-1的那些,是否可以用情况二来处理。

对于情况二,找到的是模式串P的前缀,匹配好后缀的后缀,说简单点就是最前面的N个字符匹配最后面的N个字符,我们假设最长的相匹配的前缀、后缀串长度为N(可以在处理情况一的时候顺便得到,具体方法见下面代码),那么对于长度超过N的好后缀,如果它在情况一中没有被填写(也就是不存在完整的匹配),那么根据情况二,好后缀的长度为N的后缀,可以和长度为N的前缀匹配。可以根据这一点来移动模式串。

 

#include <cstdio>
#include <cstring>
#include <iostream>
using namespace std;

int nBadArray[256]; //坏字符移动量
int nGoodArray[256]; //好后缀移动量
int pNBox[101]; //从i处往前数有最长pNBox[i]个字符也是字符串的后缀

void BadChar(char *pPattern, int nLen) {
    for (int i = 0; i < 256; i++)
        nBadArray[i] = -1;
    for (int i = 0; i < nLen; i++)
        nBadArray[(unsigned char) pPattern[i]] = i;
}
void NBox(const char *pPattern, int nLen, int *pNBox) {
    pNBox[nLen - 1] = 0;
    int l = nLen - 1;
    int r = nLen - 1;
    for (int i = nLen - 2; i >= 0; i--) {
        if (i < l) {
            int n = 0;
            for (; i >= n && pPattern[i - n] == pPattern[nLen - 1 - n]; n++)
                ;
            if (n > 0) {
                r = i;
                l = i - n + 1;
            }
            pNBox[i] = n;
        } else {
            if (pNBox[i + nLen - 1 - r] < i - l + 1) {
                pNBox[i] = pNBox[i + nLen - 1 - r];
            } else {
                int n = 1;
                for (int s = l + nLen - 1 - i;
                        l >= n && pPattern[l - n] == pPattern[s - n]; n++)
                    ;
                pNBox[i] = -(l - n - i);
                l = l - n + 1;
                r = i;
            }
        }
    }
}
void GoodSuffix(char *pPattern, int nLen) {
    NBox(pPattern, nLen, pNBox);

    //根据N-BOX确定好后缀的值,首先全部初始化为-1
    for (int i = 0; i < nLen; i++) {
        nGoodArray[i] = -1; //没有好后缀的为-1
    }
    int nMax = 0;
    for (int i = 0; i < nLen; i++) {
        nGoodArray[nLen - 1 - pNBox[i]] = i; //好后缀匹配的位置,即通过后缀找到匹配的位置
        if (pNBox[i] == i + 1) { //记录下最长的即是前缀也是后缀的位置
            nMax = i + 1;
        }
    }
    //补充特殊情况的移动,同一个不完全匹配
    if (nMax != 0)
        for (int i = 0; i < nLen - 1 - nMax; i++) {
            if (nGoodArray[i] == -1)
                nGoodArray[i] = nMax - 1;
        }
}
int BMSearch(const char* pDest, int nDLen, const char* ppattern, int nPLen) {
    int nDstart = nPLen - 1;
    while (nDstart < nDLen) {
        int i = 0;
        for (; i <= nPLen - 1 && pDest[nDstart - i] == ppattern[nPLen - 1 - i];
                i++)
            ;
        if (i > nPLen - 1) {
            return nDstart - (nPLen - 1);
        }
        int nIdxGood = nGoodArray[nPLen - 1 - i];
        int nShiftGood = nPLen - 1 - nIdxGood;

        int nIdxBad = nBadArray[(int) pDest[nDstart - i]];
        int nShiftBad =
                (nIdxBad >= nPLen - 1 - i) ? 1 : nPLen - 1 - i - nIdxBad;

        nDstart += (nShiftGood > nShiftBad) ? nShiftGood : nShiftBad;
    }
    return -1;
}
int main() {
    char str[101] = "abcxxxbaaaabaaaxbbaaabcdaaxb";
    char pstr[101] = "daaxb";
    BadChar(pstr, strlen(pstr));
    GoodSuffix(pstr, strlen(pstr));
    printf("%d\n", BMSearch(str, strlen(str), pstr, strlen(pstr)));
}
View Code

http://blog.csdn.net/sunnianzhong/article/details/8815722 

http://blog.csdn.net/eric491179912/article/details/6210009

 

三,HASH

为解决冲突,使用链式结构存储,采用3关键字记录,key1用来找到链首,key2和len为特异值用于检验,这里我还加了一个pos来记录这个字符串在原长串中的位置。

 

typedef unsigned int uint;
const int mut1 = 127;
const int mut2 = 131;
const int MOD = 2000007;
struct hash_map {
    int head[MOD], nEle;
    struct node {
        uint key1, key2;
        int key3, pos, pre;
        node() {
        }
        node(uint key1, uint key2, int key3, int pos, int pre) :
                key1(key1), key2(key2), key3(key3), pos(pos), pre(pre) {
        }
    } ele[MOD * 2];
    void init() {
        nEle = 0;
        memset(head, -1, sizeof(head));
    }
    int find(uint key1, uint key2, int len) {
        int hashcode = key1 % MOD;
        for (int i = head[hashcode]; i != -1; i = ele[i].pre)
            if (ele[i].key1 == key1 && ele[i].key2 == key2
                    && ele[i].key3 == len)
                return i;
        return -1;
    }
    int getPos(uint key1, uint key2, int len) {
        int pos = find(key1, key2, len);
        if (pos == -1)
            return -1;
        return ele[pos].pos;
    }
    void updata(uint key1, uint key2, int len, int pos) {
        int tmp = key1 % MOD;
        ele[nEle] = node(key1, key2, len, pos, head[tmp]);
        head[tmp] = nEle++;
    }
    void addstring(string s, int pos) {
        int len = s.length();
        uint key1 = 0, key2 = 0;
        for (int i = 0; i < len; i++) {
            key1 = key1 * mut1 + s[i];
            key2 = key2 * mut2 + s[i];
        }
        updata(key1, key2, len, pos);
    }
} hash;
View Code

 

四,Trie字典树

//ZOJ 3228 给你一个主串和N个模式串,模式串可以覆盖(0)或者不可以覆盖(1) ,问模式串在主串出现次数
#define MAXN 100010
#define LETTERS 27
int nNodesCount;
struct CNode {
    int index; //指向数组下标位置,方便从next找到的节点找到数组位置
    CNode * pChilds[LETTERS];
    CNode * pfail;
    int id[2]; // id[0]为可重叠个数
    int pos, len;
    bool bBadNode; //是否是危险节点
    void init() {
        memset(pChilds, NULL, sizeof(pChilds));
        id[0] = id[1] = len = 0;
        bBadNode = 0;
        pos = -1; //记录上一次匹配模式串最后字母位置
        pfail = NULL;
    }
} Tree[MAXN * 6], *Endpoint[MAXN];
void init() {
    nNodesCount = 1;
    Tree->init();
}
void Insert(CNode *pRoot, char *s, int x) { //将模式串s插入
    for (int i = 0; s[i]; i++) {
        if (pRoot->pChilds[s[i] - 'a'] == NULL) {
            (Tree + nNodesCount)->init();
            pRoot->pChilds[s[i] - 'a'] = Tree + nNodesCount;
            pRoot->pChilds[s[i] - 'a']->index = nNodesCount++;
        }
        pRoot = pRoot->pChilds[s[i] - 'a'];
    }
    pRoot->bBadNode = 1;
    pRoot->len = strlen(s);
    Endpoint[x] = pRoot;   // 对应模式串最后一个字符节点储存的信息
}
void BuildDfa() { //在trie树上加前缀指针
    Tree[0].pfail = NULL;
    deque<CNode *> q;
    q.push_back(Tree);
    while (!q.empty()) {
        CNode * pRoot = q.front();
        q.pop_front();
        for (int i = 0; i < LETTERS; i++) {
            CNode * p = pRoot->pChilds[i];
            if (p) {
                if (pRoot == Tree)
                    p->pfail = Tree;
                else {
                    CNode * pfail = pRoot->pfail;
                    while (pfail) {
                        if (pfail->pChilds[i]) {
                            p->pfail = pfail->pChilds[i];
                            if (p->pfail->bBadNode)
                                p->bBadNode = 1;
                            //pfail指向的节点是危险节点,则自己后缀包含模式串
                            break;
                        } else
                            pfail = pfail->pfail;
                    }
                    if (pfail == NULL) //未能找到后缀指针则指向根
                        p->pfail = Tree;
                }
                q.push_back(p);
            }
        }
    }  //对应于while(!q.empty())
}
bool Search(char *s) {
    CNode * p = Tree;
    for (int i = 0; s[i]; i++) {
        while (p != NULL) {
            if (p->pChilds[s[i] - 'a']) {
                p = p->pChilds[s[i] - 'a'];
                if (p->bBadNode)
                    return 1;
                break;
            } else
                p = p->pfail;
        }
    }
    return 0;
}
void AC_find(char *s) {
    CNode *p = Tree;
    for (int i = 0; s[i]; i++) {
        int k = s[i] - 'a';
        while (p->pChilds[k] == NULL && p != Tree)
            p = p->pfail;
        p = p->pChilds[k] == NULL ? Tree : p->pChilds[k];

        CNode *tmp = p;
        while (tmp != Tree) { //沿fail指针找到所有包含的模式串
            if (tmp->len > 0) {
                tmp->id[0]++;
                if (tmp->pos == -1 || i - tmp->pos >= tmp->len) {
                    tmp->id[1]++;
                    tmp->pos = i;    // 记录当前单词最后一次出现位置
                }
            }
            tmp = tmp->pfail;
        }
    }
}
int main() {
    char str[10], text[MAXN];
    int que[MAXN];
    int n, d;
    int cas = 1;
    while (~scanf("%s", text)) {
        init();
        scanf("%d", &n);
        for (int i = 0; i < n; i++) {
            scanf("%d%s", &d, str);
            Insert(Tree, str, i);
            que[i] = d;
        }
        BuildDfa();
        AC_find(text);
        printf("Case %d\n", cas++);
        for (int i = 0; i < n; i++)
            printf("%d\n", Endpoint[i]->id[que[i]]);
        puts("");
    }
    return 0;
}
View Code

 

运用Trie字典树与fail指针可以解决很多问题。

1. fail树:fail指针全部反向形成一颗树,这样一个节点的子树的子串都包含节点表示的字符串。

 

BZOJ 2434 给出一个打字机的操作序列(总长不超过10^5)给出M(1 <= M <= 10^5)个询问(x, y),查询第x次打印的串在第y次打印的串中出现了几次

算法分析:想到使用Trie树来存储,并建立成AC自动机,把fail指针全部反向形成的一棵树称为fail树。

考虑询问(x, y),实质就是在fail树上,找以x的末结点为根的子树上,有多少个结点在AC自动机中root -> y的末结点的路径上。

那么我们再次处理操作序列,就可以很方便地模拟出每一个root -> y末结点路径上的结点都标记为1的情形,对x的询问只需查询一棵子树的和,

经典的苹果树问题,DFS序时间戳 + 树状数组维护。那么,我们把所有与y对应的x答案都处理出来即可。

HDU 4117

给你N个字符串, N(1 <= N <= 2 * 104), 所有串的长度加一起不超过 3 * 105.每个串有个值

从中取若干个字符串,使得前一个串是后一个串的子串,求满足前面调条件的字符串值得和最大,求这个值。

 

建立AC自动机。后面检查取了以每个字符串是最后取的串的最大值。那么检查第i个字符串的时候,就是这个字符串的未节点前面所有的fail指针一直到根节点和他的上面节点的最大值,加上第i个字符串的值。直接这样暴力的话,是N*M,一定会超时的。

由于每个节点一直fail都会指向根节点,所以把他转化为一棵fail树。我们发现当改变fail树里面的一个节点时,会影响到的是他的子孙,那么就可以用时间戳来把fail树变成线性的从而可以用线段树进行优化。

可是除了fail影响一个节点的还有trie树里面的父节点。所以我们顺着所有的字符扫一遍,存一下上一个走到的结点就是他的trie树中的父节点。和fail树的线段树中比较一下就可以了。

const int kind = 26;
const int NN = 333333;

int cnt;//ac状态数
char str[NN];//所有的字符接在一起
int pos[NN];

int fail[NN];//每个状态的fail指针
int child[NN][kind];//trie树
int ans;//最终答案

int val[NN];//每个单词输入的value

int tal;//时间戳状态数
vector<int>v[NN];//fail树
int in[NN];//时间戳
int out[NN];
int mx[NN<<2];//线段树

inline int newNode(){
    ++cnt;
    for(int i=0; i<kind; ++i) child[cnt][i] = -1;
    return cnt;
}

void insert(char *str, int root, int id){
    int p = root;
    int len = strlen(str);
    for(int i=0; i < len; ++i){
        int k = str[i] - 'a';
        if(child[p][k] == -1) child[p][k] = newNode();
        p = child[p][k];
    }
}

void build_fail(int root){
    queue<int>q;
    int p = root;
    q.push(p);
    while(!q.empty()){
        p = q.front();
        q.pop();
        if(p) v[fail[p]].push_back(p);
        for(int k = 0; k < kind; ++k){
            int tmp = child[p][k];
            if(tmp != -1){
                if(p!=root) fail[tmp] = child[fail[p]][k];
                else fail[tmp] = root;
                q.push(tmp);
            } else {
                if(p!=root) child[p][k] = child[fail[p]][k];
                else child[p][k] = root;
            }
        }
    }
}

void dfs(int s){
    in[s] = ++tal;
    int len = v[s].size();
    for(int i = 0; i < len; ++i){
        dfs(v[s][i]);
    }
    out[s] = tal;
    v[s].clear();
}

int query(int l, int r, int k, int L){
    if(l==L && r==L) return mx[k];
    int mid = (l+r)>>1;
    mx[k<<1] = max(mx[k<<1], mx[k]);
    mx[k<<1|1] = max(mx[k<<1|1], mx[k]);
    if(L<=mid) return query(l, mid, k<<1, L);
    else return query(mid+1, r, k<<1|1, L);
}

void update(int l, int r, int k, int L, int R, int x){
    if(mx[k] >= x) return;
    if(l==L && r==R){
        mx[k] = x;
        return;
    }
    int mid = (l+r)>>1;
    if(R<=mid) update(l, mid, k<<1, L, R, x);
    else if(L>mid) update(mid+1, r, k<<1|1, L, R, x);
    else{
        update(l, mid, k<<1, L, mid, x);
        update(mid+1, r, k<<1|1, mid+1, R, x);
    }
}

int main(){
    int n, m, tt=0;
    scanf("%d", &m);
    while(m--){
        scanf("%d", &n);
        cnt = -1;
        int root = newNode();
        pos[0] = 0;
        for(int i = 1; i <= n; ++i){
            scanf("%s%d", str + pos[i-1], &val[i]);
            insert(str + pos[i-1], root, i);
            pos[i] = pos[i-1] + strlen(str + pos[i-1]);
        }
        build_fail(root);
        tal = 0;
        dfs(0);
        memset(mx, 0, sizeof(mx));
        ans = 0;
        for(int i = 1; i <= n; ++i){
            int p = 0;
            int preTmp = 0;
            for(int j = pos[i-1]; j < pos[i]; ++j){//这里虽然是两层循环,其实一共只有pos[n]
                int v = val[i] * (j==pos[i]-1);
                p = child[p][str[j]-'a'];
                int tmp = query(1, tal, 1, in[p]);
                tmp = max(preTmp, tmp) + v;
                ans = max(ans, tmp);
                update(1, tal, 1, in[p], out[p], tmp);
                preTmp = tmp;
            }
        }
        printf("Case #%d: ", ++tt);
        cout<<ans<<endl;
    }
    return 0;
}
View Code

 

POJ 2778

检测所有可能的n位DNA串有多少个串中不含有指定的病毒片段。合法的DNA只能由ACTG四个字符构成。

题目将给出10个以内的病毒片段,每个片段长度不超过10。数据规模n<=2 000 000 000。

以ATC,AAA,GGC,CT这四个病毒片段为例。我们找出所有病毒片段的前缀,把n位DNA分为以下7类:以AT结尾、以AA结尾、以GG结尾、以?A结尾、以?G结尾、以?C结尾和以??结尾。其中问号表示“其它情况”,它可以是任一字母,只要这个字母不会让它所在的串成为某个病毒的前缀。显然,这些分类是全集的一个划分(交集为空,并集为全集)。现在,假如我们已经知道了长度为n-1的各类DNA中符合要求的DNA个数,我们需要求出长度为n时各类DNA的个数。我们可以根据各类型间的转移构造一个边上带权的有向图。例如,从AT不能转移到AA,从AT转移到??有4种方法(后面加任一字母),从?A转移到AA有1种方案(后面加个A),从?A转移到??有2种方案(后面加G或C),从GG到??有2种方案(后面加C将构成病毒片段,不合法,只能加A和T)等等。这个图的构造过程类似于用有限状态自动机做串匹配。然后,我们就把这个图转化成矩阵,让这个矩阵自乘n次即可。最后输出的是从??状态到所有其它状态的路径数总和。

 

五,后缀数组

 

1. sa[i]后缀的字典序为i的首字母在原串中位置

2. rank[i]从第i个字符开始的后缀在sa[]中下标位置,i=sa[rank[i]]

height[i]后缀字典序排列第i个与i-1个的最长前缀长度,最长重复子串

对height[]的最小RMQ即是后缀的最长公共前缀

1.求一个字符串的最长重复子串,可以重叠,直接求height数组中的最大值。

2.求一个字符串的最长重复子串,要求这两个子串不重叠。先对变化求height,然后二分答案,将问题转化为证明是否存在长度为k的不重合序列

根据后缀数组的性质可知height数组是呈波峰状的,找到所有height大于k的组,若有一组中最小的sa和最大的sa之差大于k,则存在。poj1743。

3.两个字符串的最长公共子串,将两个字符串拼起来,利用height数组找到sa[i]与sa[i-1]在不同字符串的最大值。poj2774。

4.一个字符串的最长回文,poj3794,方法是将字符串反转然后连在其后面,中间用一个未出现的符号隔开,形如str$reverse(str)#,写出模板后,利用height数组,判断是否是来自这两个字符串。

六,后缀自动机

 

七,回文问题

 

http://www.cnblogs.com/AbandonZHANG/archive/2012/07/17/2598256.html

posted @ 2013-11-03 22:39  匡时@下一站.info  阅读(429)  评论(0编辑  收藏  举报