利用PHP扩展trie_filter做中文敏感词过滤

发表时间：2015-05-27来源：网络

1.安装libiconv，这个是libdatrie的依赖项

wget http://ftp.gnu.org/pub/gnu/libiconv/libiconv-1.14.tar.gz tar zxvf libiconv-1.14.tar.gz cd libiconv-1.14 ./configure make make install

2. 安装：libdatrie (http://linux.thai.net/~thep/datrie/datrie.html#Download)

tar zxf libdatrie-0.2.4.tar.gz   cd libdatrie-0.2.4   ./configure --prefix=/usr/local   make   make install

编译出现错误 trietool.c:125: undefined reference to `libiconv'

解决办法为：./configure LDFLAGS=-L/usr/local/lib LIBS=-liconv

3. 安装 trie_filter 扩展

由于官方trie_filter扩展对中文支持的不是很好，所以在git上找到了一个在官方扩展上面改写的扩展经过测试没有问题

安装方法如下：

https://github.com/wulijun/php-ext-trie-filter 在这里下载源码包

phpize./configure --with-php-config=/usr/local/bin/php-config makemake install

4. 修改 php.ini 文件，添加 trie_filter 扩展：extension=trie_filter.so，重启PHP。

查看phpinfo发现trie_filter 扩展可用，如下图所示：

5、生成用语检测的词典，由于上面下载的源码包中并没有带生成词典的命令所以还需要下载官方的源码包

(https://code.google.com/p/as3chat/downloads/detail?name=trie_filter-2011-03-21.tar.gz)

tar zxf trie_filter-2011.03.21.tar.gz   cd trie_filter-2011.03.21    gcc -o dpp dpp.c -ldatrie // 生成dpp命令用语编译词典./dpp words.txt words.dic  //将words.txt 编译成trie_filter使用的词典 words.txt中每个词占一行

生成词典的时候报错：./dpp: error while loading shared libraries: libdatrie.so.1: cannot open shared object file: No such file or directory

解决办法：执行

ldconfig

然后在执行

./dpp words.txt words.dic

就好了

6、测试：

";  var_dump($res2);trie_filter_free($file); //最后别忘记调用free

建议使用php 5.3.3以上的版本，我使用的是5.3.3

（免责声明：文章内容如涉及作品内容、版权和其它问题，请及时与我们联系，我们将在第一时间删除内容，文章内容仅供参考）

上一篇：IcePHP框架中的快速后台中的通用CRUD功能框架(五) SCrud 主控类

下一篇：php抓取网页图片

知识阅读

软件推荐

更多 >

游戏推荐

更多 >

精选栏目

手机游戏

手机软件

电脑软件

猜你喜欢

城市智能家居福利美女壁纸截图照片修图新闻八卦免费农业司机会议物流资源拍摄下载美图手机宠物计算机服务汽车二手程序员短视频播放器影视动漫停车江浙沪地铁公交抖音舞蹈征信母婴低息分期钱包区块链 360 投注彩票借贷网贷借钱抢票吃货购物 WIFI 导航运动健康

利用PHP扩展trie_filter做中文敏感词过滤

知识阅读

软件推荐

游戏推荐

精选栏目

ASP编程

PHP编程

C语言编程

批处理

CSS教程

HTML教程

热门推荐

手机游戏

手机软件

电脑软件

猜你喜欢