DEV Community

AXUM中文博客
AXUM中文博客

Posted on

使用 Zhparser 插件实现 PostgreSQL 中文全文检索

#postgres #fulltext #zhparser #postgressql

Docker 容器 

docker run \
        --name postgres \
        -e POSTGRES_PASSWORD=postgres \
        -e TZ=PRC \
        --restart=always \
        -e PGDATA=/var/lib/postgresql/data/pgdata \
        -v /var/docker/postgres:/var/lib/postgresql/data \
        -p 5432:5432 \
        -d postgres

docker exec -it postgres bash # 进入 pg 容器
Enter fullscreen mode Exit fullscreen mode

编译安装 Zhparser

以下步骤都是在 PG 容器中操作。

安装依赖：

postgresql-server-dev-17 改成对应版本，也可以在 docker run 中明确指定拉取的镜像版本，以便保持统一。

apt update -y && apt install wget gcc make git bzip2 postgresql-server-dev-17 -y
Enter fullscreen mode Exit fullscreen mode

编译 Zhparser：

cd /tmp
wget http://www.xunsearch.com/scws/down/scws-1.2.3.tar.bz2
tar -jxvf scws-1.2.3.tar.bz2 
cd scws-1.2.3
./configure && make && make install

cd ..
git clone https://github.com/amutu/zhparser.git
cd zhparser/
make && make install
Enter fullscreen mode Exit fullscreen mode

验证安装。首先连接到 PG 服务器：

psql -U postgres
Enter fullscreen mode Exit fullscreen mode

然后：

CREATE EXTENSION zhparser; -- 启用 Zhparser 扩展
CREATE TEXT SEARCH CONFIGURATION chinese (PARSER = zhparser); -- 中文全文检索
ALTER TEXT SEARCH CONFIGURATION chinese ADD MAPPING FOR n,v,a,i,e,l WITH simple; -- 修改词性
select ts_token_type('zhparser'); -- 词性列表
Enter fullscreen mode Exit fullscreen mode

测试：

to_tsvector 测试：

SELECT to_tsvector('chinese','人生得意须尽欢，莫使金樽空对月。天生我材必有用，千金散尽还复来。Hello world');
Enter fullscreen mode Exit fullscreen mode

结果：

                                                         to_tsvector
------------------------------------------------------------------------------------------------------------------------------
 'hello':12 'world':13 '人生':1 '使':4 '千金':8 '复来':11 '天生我材必有用':7 '对月':6 '尽':10 '尽欢':3 '得意':2 '散':9 '空':5
(1 row)
Enter fullscreen mode Exit fullscreen mode

to_tsquery 测试：

SELECT to_tsquery('chinese', '金风玉露一相逢，便胜却人间无数。It & works');
Enter fullscreen mode Exit fullscreen mode

结果：

                          to_tsquery
--------------------------------------------------------------
 '金风玉露' <-> '相逢' <-> '胜' <-> '人间' <-> 'it' & 'works'
(1 row)
Enter fullscreen mode Exit fullscreen mode

参考：https://www.fdevops.com/2023/02/05/postgres-zhparser-31246

Top comments (0)