SQL怎样从URL字符串中提取域名_利用REGEXP_SUBSTR函数

老晨君_4545

老晨君_4545

2026-05-01

934人浏览

原创

REGEXP_SUBSTR 提取域名需分两步:先用 'https?://(?:1+?\.(com|org|cn|jp|de|uk))$' 剥离子域获取注册域名,因不支持后向断言且需处理用户信息、端口及TLD变体。@/]+@)?([^/:]+)' 安全提取主机名,再用 '\.([^.\n ↩

sql怎样从url字符串中提取域名_利用regexp_substr函数

REGEXP_SUBSTR 提取域名的正确正则模式

直接用 REGEXP_SUBSTR 从 URL 中提取域名,关键不是函数本身,而是正则表达式是否能稳定匹配「协议+路径」干扰下的核心域名部分。常见错误是写成 'https?://([^/]+)',结果在 https://a.b.c.d/path?x=1 里拿到 a.b.c.d —— 这其实是完整主机名,不等于「域名」(domain),尤其当有子域或端口时更易出错。

真正要的是注册域名(Registered Domain),即去掉子域和端口后的主干部分。Oracle 并不原生支持 Public Suffix List,所以得靠业务规则妥协:

  • 若所有 URL 都是二级结构(如 www.example.com、shop.example.com),可用 REGEXP_SUBSTR(url, 'https?://(?:[^@/]+@)?([^/:]+)', 1, 1, NULL, 1) 先取主机名,再嵌套一次 REGEXP_SUBSTR(host, '\.([^.]+\.[^.]+)$|\.([^.]+)\.[^.]+\.[^.]+$') 取最后两段(兼顾 .co.uk 类例外需手动扩展)
  • 若只处理标准 TLD(.com、.org、.cn 等),最简方案是: REGEXP_SUBSTR(url, 'https?://(?:[^@/]+@)?([^/:]+)', 1, 1, NULL, 1) → 得主机名 再接:REGEXP_SUBSTR(host, '([^.]+\.(com|org|net|cn|jp|de|fr|uk))$', 1, 1, NULL, 1)
  • 端口(如 :8080)必须在第一次提取时排除,否则会混入结果;正则中 [^/:]+ 的 : 就是为截断端口

为什么不能只用一个 REGEXP_SUBSTR 完成

因为 REGEXP_SUBSTR 不支持后向断言(lookbehind),无法“确保前面是 :// 且后面不是 / 或 :”这种双向边界。强行塞进一个正则,容易漏掉带用户信息的 URL(https://user:pass@example.com/path)或 IPv4 地址(http://192.168.1.1:3000)。

分两步更可控:

  • 第一步用 REGEXP_SUBSTR(url, 'https?://(?:[^@/]+@)?([^/:]+)') 安全提取主机字段(含子域、不含协议/路径/端口/用户)
  • 第二步对主机字段单独处理:若需剥离子域,用 REGEXP_SUBSTR(host, '\.([^.\n]+?\.(com|org|cn|jp|de|uk|ca|au))$', 1, 1, 'i', 1);注意 'i' 标志让 TLD 匹配不区分大小写
  • 对纯 IP 或 localhost,该逻辑会返回 NULL —— 这是预期行为,不是 bug

实际 SQL 示例与典型错误

假设表 logs 有字段 referer 存 URL 字符串:

SELECT
  referer,
  REGEXP_SUBSTR(referer, 'https?://(?:[^@/]+@)?([^/:]+)', 1, 1, NULL, 1) AS host,
  REGEXP_SUBSTR(
    REGEXP_SUBSTR(referer, 'https?://(?:[^@/]+@)?([^/:]+)', 1, 1, NULL, 1),
    '\.([^.]+\.(com|org|net|cn|jp|de|uk))$',
    1, 1, 'i', 1
  ) AS domain
FROM logs
WHERE referer IS NOT NULL;

常见翻车点:

  • REGEXP_SUBSTR(url, '://(.+?)\/', ...) —— 错!URL 可能无路径(https://example.com),\/ 导致整行 NULL
  • 忽略 @ 用户信息,导致 https://user@example.com 被截成 user@example.com 而非 example.com
  • 没加 NULL, 1 参数,误用默认第 0 组(Oracle 默认返回整个匹配,不是子组)
  • TLD 列表没覆盖业务实际出现的后缀(比如漏了 .io、.dev),结果为空

性能与兼容性提醒

REGEXP_SUBSTR 在 Oracle 中属于 CPU 密集型操作,大数据量时比普通 SUBSTR+INSTR 慢 3–5 倍。如果域名格式高度统一(如全部以 https://www. 开头且固定长度),优先用非正则方案。

另外注意:REGEXP_SUBSTR 在 Oracle 10g+ 可用,但 10g 不支持第六个参数(子组索引),必须升级到 11gR2+ 才能用 REGEXP_SUBSTR(str, pattern, pos, occ, mod, group) 形式精准取子组 —— 这点很容易被开发环境版本掩盖,上线前务必验证。

真实场景里,域名边界永远比想象中模糊;正则只是近似解,别指望它完美处理所有 Public Suffix List 情况。

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

2023.10.12

4663

8

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.27

971

4

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

2024.02.23

1229

5

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

6661

10

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

3383

4

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

2024.04.07

6620

11

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

2024.04.29

9141

6

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

1230

5

sql中删除一列的命令是什么
sql中删除一列的命令是什么

在sql中,使用alter table语句可以删除一列,语法为:alter table table_name drop column column_name。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

1092

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.7万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 134.1万人学习