re2
使用 RE2 的 ClickHouse 兼容正则函数
概览
| 扩展包名 | 版本 | 分类 | 许可证 | 语言 |
|---|---|---|---|---|
re2 | 0.4.1 | UTIL | PostgreSQL | C++ |
| ID | 扩展名 | Bin | Lib | Load | Create | Trust | Reloc | 模式 |
|---|---|---|---|---|---|---|---|---|
| 4235 | re2 | 否 | 是 | 否 | 是 | 是 | 是 | - |
Stable PGXN and PIGSTY package release 0.4.1 for PostgreSQL 16 through 18.
版本
| 类型 | 仓库 | 版本 | PG 大版本 | 包名 | 依赖 |
|---|---|---|---|---|---|
| EXT | PIGSTY | 0.4.1 | 1817161514 | re2 | - |
| RPM | PIGSTY | 0.4.1 | 1817161514 | re2_$v | - |
| DEB | PIGSTY | 0.4.1 | 1817161514 | postgresql-$v-re2 | - |
构建
您可以使用 pig build 命令构建 re2 扩展的 RPM / DEB 包:
pig build pkg re2 # 构建 RPM / DEB 包
安装
您可以直接安装 re2 扩展包的预置二进制包,首先确保 PGDG 和 PIGSTY 仓库已经添加并启用:
pig repo add pgsql -u # 添加仓库并更新缓存
使用 pig 或者是 apt/yum/dnf 安装扩展:
pig install re2; # 当前活跃 PG 版本安装
pig ext install -y re2 -v 18 # PG 18
pig ext install -y re2 -v 17 # PG 17
pig ext install -y re2 -v 16 # PG 16
dnf install -y re2_18 # PG 18
dnf install -y re2_17 # PG 17
dnf install -y re2_16 # PG 16
apt install -y postgresql-18-re2 # PG 18
apt install -y postgresql-17-re2 # PG 17
apt install -y postgresql-16-re2 # PG 16
创建扩展:
CREATE EXTENSION re2;
用法
来源:
re2 提供与 ClickHouse 兼容、由 Google RE2 引擎实现的正则表达式函数。它同时提供 text 与 bytea 重载,因此也能搜索包含 \\0 字节的二进制数据。版本 0.4.1 还增加了索引辅助匹配,并可报告所链接的 RE2 版本。
CREATE EXTENSION re2;
SELECT re2match('hello world', 'h.*o');
SELECT re2extract('Order #123', '(\\d+)');
SELECT re2countmatches('a1 b2 c3', '\\d');
SELECT re2_version();
核心函数
re2match(haystack, pattern) -> booleanre2extract(haystack, pattern) -> text|byteare2extractall(haystack, pattern) -> text[]|bytea[]re2regexpextract(haystack, pattern, index default 1) -> text|byteare2extractgroups(haystack, pattern) -> text[]|bytea[]re2extractallgroupsvertical(haystack, pattern) -> text[]|bytea[]re2extractallgroupshorizontal(haystack, pattern) -> text[]|bytea[]re2regexpquotemeta(haystack) -> text|byteare2splitbyregexp(pattern, haystack, max_substrings default 0) -> text[]|bytea[]re2replaceregexpone(haystack, pattern, replacement) -> text|byteare2replaceregexpall(haystack, pattern, replacement) -> text|byteare2countmatches(...)与re2countmatchescaseinsensitive(...)
SELECT re2extractallgroupsvertical('a=1 b=2', '(\\w)=(\\d)');
SELECT re2regexpquotemeta('a+b?');
SELECT re2splitbyregexp('\\s+', 'one two three', 2);
多模式匹配
re2multimatch* 函数族既可接受多个模式参数,也可接受 VARIADIC 数组:
SELECT re2multimatchany('error: timeout', 'timeout', 'denied');
SELECT re2multimatchanyindex('error: timeout', VARIADIC ARRAY['timeout', 'denied']);
SELECT re2multimatchallindices('error: timeout', 'error', 'timeout', 'panic');
索引支持
版本 0.4.0 增加两种互补的索引路径:
-- Anchored constant patterns can use a normal btree prefix scan.
CREATE INDEX docs_body_btree ON docs (body);
SELECT * FROM docs WHERE re2match(body, '^order_2025');
-- The @~ operator can use the extension's GIN operator class.
CREATE INDEX docs_body_re2_gin ON docs USING gin (body gin_re2_ops);
SELECT * FROM docs WHERE body @~ 'timeout|denied';
扩展还为 RE2 谓词提供选择率估算。在 btree、GIN 与顺序扫描之间做选择前,请用代表性数据检查 EXPLAIN。
匹配语义
- 为匹配 ClickHouse 行为,
.默认可以匹配换行符。 - 如果不希望
.跨越换行,请在模式前添加(?-s)。 - 替换字符串支持
\\0到\\9的反向引用。
注意事项
- 上游要求在构建/安装时存在系统
re2库。 v0.4.x二进制使用 SQL 扩展版本0.4;替换旧二进制后,如有待处理的升级,请运行ALTER EXTENSION re2 UPDATE TO '0.4'。v0.4.1修复了与缓存相关的释放后使用问题,并改善稳定模式与多模式匹配性能;应使用它而不是v0.4.0。re2splitbyregexp的参数顺序是pattern, haystack[, max_substrings];早于0.3.0的构建使用相反顺序。- RE2 有意不支持模式中的反向引用和环视断言等功能;它的有界时间行为与 PostgreSQL 原生正则表达式引擎不同。