美文网首页
PHP 敏感词过滤 轮子 |2019-01-18

PHP 敏感词过滤 轮子 |2019-01-18

作者: OSong | 来源:发表于2019-01-18 17:11 被阅读11次

https://laravel-china.org/articles/5855/write-a-filter-for-sensitive-words

    /***
     * 敏感词过滤
     * 有敏感词 则返回 具体敏感词汇
     * 无敏感词 返回 no
     ***/
    function sensitiveWordFilter($str)
    {
        // $words = getSensitiveWords();
        $words = ['敏感词1', '敏感词2','敏感词3'];//建议从数据库获取
        $flag = false;

        // 提取中文部分,防止其中夹杂英语等
        preg_match_all("/[\x{4e00}-\x{9fa5}]+/u", $str, $match);
        $chinsesArray = $match[0];
        $chineseStr = implode('', $match[0]);
        $englishStr = strtolower(preg_replace("/[^A-Za-z0-9\.\-]/", " ", $str));

        $flag_arr = array('?', '!', '¥', '(', ')', ':' , '‘' , '’', '“', '”', '《' , '》', ',',
            '…', '。', '、', 'nbsp', '】', '【' ,'~', '#', '$', '^', '%', '@', '!', '*', '-'. '_', '+', '=');
        $contentFilter = preg_replace('/\s/', '', preg_replace("/[[:punct:]]/", '',
            strip_tags(html_entity_decode(str_replace($flag_arr, '', $str), ENT_QUOTES, 'UTF-8'))));

        // 全匹配过滤,去除特殊字符后过滤中文及提取中文部分
        foreach ($words as $word)
        {
            // 判断是否包含敏感词,可以减少这里的判断来降低过滤级别,
            if (strpos($str, $word) !== false || strpos($contentFilter, $word) !== false || strpos($chineseStr, $word) !== false
                || strpos($englishStr, $word) !== false) {
                return '敏感词:' . $word;
            }
        }
        return $flag ? 'yes' : 'no';
    }

当你的敏感字词库多了之后就 gg 了.

推荐这个:
https://www.v2ex.com/t/120889

https://github.com/nowgoo/dict

给自己打个广告, 参考上面这个库的实现方式做的一个邮箱地址过滤器:

https://github.com/RunnerLee/email-address-filter

相关文章

  • PHP 敏感词过滤 轮子 |2019-01-18

    https://laravel-china.org/articles/5855/write-a-filter-fo...

  • 分享几个不错的博客文章

    站点安全之-php内容过滤,敏感词屏蔽,防注入,cookie加密http://www.cnblogs.com/ph...

  • 敏感词过滤

    一、原句处理 1.去除原句中的所有空格2.去除原句子中的所有标点符号,包含全角和半角的3.将所有的繁体中文替换成简...

  • go实现敏感词过滤

    敏感词过滤,提前将敏感词设置好,然后每次有新句子都要过滤一遍,若存在敏感词,则用*号代替,代码如下

  • 关于评论功能的总结

    作为前端,相对敏感词,我更应该注意对发布内容过滤,js脚本和html标签如何过滤 敏感词的过滤应当是过滤服务器➕人...

  • iOS 敏感词过滤 (OC与Swift版本都有)

    iOS 敏感词过滤:用*代替敏感词 实现效果举例: 敏感词为 : 123 “哈哈123456哈哈123呵呵” 被转...

  • python实现敏感词过滤的几种方法

    1.replace过滤 最简单也是最直接的就是直接循环敏感词,然后使用replace过滤关键词,文章和敏感词少的时...

  • java过滤敏感词!

    课程设计做了个博客系统,为了对评论进行敏感词过滤,所以去看了下DFA 在Java中实现敏感词过滤的关键就是DFA算...

  • 敏感词过滤问题

    互联网公司通常需要对手机或者社交软件发送的信息进行敏感词过滤,用户发送的信息一般是100多个字,但总量特别大,一周...

  • Java敏感词过滤

网友评论

      本文标题:PHP 敏感词过滤 轮子 |2019-01-18

      本文链接:https://www.haomeiwen.com/subject/ynondqtx.html