zhparser
中文分词,全文搜索解析器
概览
| 扩展包名 | 版本 | 分类 | 许可证 | 语言 |
|---|---|---|---|---|
zhparser | 2.3 | FTS | PostgreSQL | C |
| ID | 扩展名 | Bin | Lib | Load | Create | Trust | Reloc | 模式 |
|---|---|---|---|---|---|---|---|---|
| 2130 | zhparser | 否 | 是 | 否 | 是 | 否 | 是 | - |
| 相关扩展 | pgroonga pg_cjk_parser pg_jieba pg_bigm pg_tokenizer pg_pinyin unaccent dict_xsyn icu_ext pg_xenophile |
|---|
版本
| 类型 | 仓库 | 版本 | PG 大版本 | 包名 | 依赖 |
|---|---|---|---|---|---|
| EXT | PIGSTY | 2.3 | 1817161514 | zhparser | - |
| RPM | PIGSTY | 2.3 | 1817161514 | zhparser_$v | - |
| DEB | PIGSTY | 2.3 | 1817161514 | postgresql-$v-zhparser | - |
构建
您可以使用 pig build 命令构建 zhparser 扩展的 RPM / DEB 包:
BASH
安装
您可以直接安装 zhparser 扩展包的预置二进制包,首先确保 PGDG 和 PIGSTY 仓库已经添加并启用:
BASH
使用 pig 或者是 apt/yum/dnf 安装扩展:
安装
BASH
pig
BASH
dnf
BASH
apt
BASH
创建扩展:
SQL
用法
zhparser 是基于 SCWS(Simple Chinese Word Segmentation)分词库的 PostgreSQL 中文全文搜索扩展。
功能特性
- 为 PostgreSQL 全文搜索提供中文分词
- 基于 SCWS(简易中文分词)库
- 支持自定义词典(TXT 和 XDB 格式)
- 数据库级自定义词表(v2.1 起)
- 多个可调参数控制分词行为
快速开始
SQL
配置参数
zhparser 提供多个 GUC 参数控制分词行为:
| 参数 | 默认值 | 说明 |
|---|---|---|
zhparser.punctuation_ignore | off | 忽略所有标点符号 |
zhparser.seg_with_duality | off | 对长词进行二元分词 |
zhparser.dict_in_memory | off | 将整个词典加载到内存 |
zhparser.multi_short | off | 短词复合分词 |
zhparser.multi_duality | off | 二元复合分词 |
zhparser.multi_zmain | off | 首次复合分词中的关键词 |
zhparser.multi_zall | off | 使用所有复合分词 |
词类
zhparser 支持 SCWS 的以下词类:
| 代码 | 说明 |
|---|---|
a | 形容词 |
b | 区别词 |
c | 连词 |
d | 副词 |
e | 叹词 |
f | 方位词 |
g | 词根 |
h | 前缀 |
i | 成语 |
j | 简称 |
k | 后缀 |
l | 临时习语 |
m | 数词 |
n | 名词 |
o | 拟声词 |
p | 介词 |
q | 量词 |
r | 代词 |
s | 处所词 |
t | 时间词 |
u | 助词 |
v | 动词 |
w | 标点符号 |
x | 未知 |
y | 语气词 |
z | 状态词 |
自定义词典
基于文件的词典
将自定义词典文件放在共享目录(通常为 $SHAREDIR/tsearch_data/):
- TXT 格式:每行一个词
- XDB 格式:编译后的 SCWS 词典格式
自定义词典优先于内置词典。
数据库级自定义词(v2.1+)
SQL
Docker 快速启动
BASH