如何在Java中实现短链接生成系统_MurmurHash算法转换与Base62编码实战

夏芳姑娘_2953

夏芳姑娘_2953

2026-03-23

785人浏览

原创

不用uuid或自增id因前者过长(36位)、后者暴露总量且不安全;murmurhash64+标准化url+base62编码(剔除0o1l)可生成短码,但必须加db唯一索引或redis setnx防碰撞,高并发下需限重试、异步落库、降级兜底。

如何在java中实现短链接生成系统_murmurhash算法转换与base62编码实战

为什么不用UUID或自增ID做短链接

短链接本质是把长URL映射成极短字符串,但直接用 UUID(36位)或数据库自增ID(暴露总量、可预测)都不合适。前者太长,后者有安全和并发压力问题。MurmurHash 是个折中选择:固定长度、分布均匀、计算快,适合做哈希中间层。

注意:MurmurHash 本身不加密,也不防碰撞,只负责把任意长度的URL转成一个 long 值,后续靠Base62进一步压缩可读性。

  • 别对原始URL直接用 MurmurHash3.hash128() —— 它返回128位,Java里不好处理;用 MurmurHash3.hash64() 得到单个 long
  • 务必对URL做标准化预处理:统一协议头(https://)、去掉末尾斜杠、解码后再哈希,否则 https://a.com/ 和 https://a.com/%2F 会算出不同hash
  • 如果用Spring Boot,推荐用 net.openhft.hashing.LongHashFunction 替代手写MurmurHash实现,它更轻量且已优化边界情况

Base62编码怎么避开0OIl这些易混淆字符

Base62比Base64少两个字符(去掉 + 和 /),又比Base36多数字+大小写字母,但默认字符集常含 0(零)和 O(大写o)、1 和 l(小写L),用户手动输入时极易出错。

真正可用的Base62字符集得显式排除这四类: 0、O、1、l。剩下62个干净字符才叫“人眼友好”。

  • 别直接抄网上“标准Base62表”,先检查是否含 0O1l;常见错误是用了 "0123456789ABCDEFGHIJKLMNOPQRSTUVWXYZabcdefghijklmnopqrstuvwxyz" 这种原始顺序表
  • 推荐用确定性字符表:"23456789ABCDEFGHJKLMNPQRSTUVWXYZabcdefghijkmnopqrstuvwxyz"(注意跳过了 0O1lI 中的 0、O、1、l,I 也建议跳过)
  • 编码时用 long 做输入,逐次取模62,反向拼接;解码时从左到右,每轮 result = result * 62 + indexOf(char)

MurmurHash + Base62 组合后还要不要查重

要。MurmurHash 64位理论碰撞概率极低(约2^(-64)),但短链接系统面对的是海量URL,尤其存在大量爬虫试探、重复提交场景。一旦碰撞,两个不同URL生成相同短码,用户点击就错跳——这是线上事故。

js2java
js2java

JavaScript 到 Java 全栈翻译助手,专为前端开发者学习 Java 或快速实现后端业务逻辑而设计。当用户提到以下场景时必须使用此技能: - "帮我把这段 JS 代码转成 Java" - "用 Java 怎么写这个逻辑" - "我习惯用 JS 写,想翻译成 Java" - "教我 Java,我要写后端接...

下载

不能靠“概率低”赌运气,必须加一层数据库唯一约束或Redis SETNX 防重。

  • 生成Base62码后,先查DB或Redis看 short_code 是否已存在;存在则对原hash加盐(比如追加时间戳毫秒数或随机int),重新哈希再试
  • 别用纯随机生成短码(如 ThreadLocalRandom.current().nextInt(100000, 999999)),它无法保证全局唯一,且无法反向还原原始URL
  • 如果用MySQL,short_code 字段必须建唯一索引;用Redis,用 SET short:abc123 "https://..." NX EX 3600,失败就重试

高并发下如何避免短码生成变慢或雪崩

短链接生成看似简单,但压测时容易卡在三处:MurmurHash线程安全(其实它是无状态的,没问题)、Base62编码(纯CPU,很快)、最慢的是查重+写库。尤其当DB写入延迟升高,整个链路就会阻塞。

关键不是优化单次计算,而是控制重试频次和降级策略。

  • 查重失败(如Redis超时或DB唯一冲突)最多重试3次,第4次直接抛异常或走备用方案(比如返回带参数的中间页,异步补短码)
  • 不要在HTTP请求线程里同步写DB,可先写入Kafka或本地队列,由后台消费者落库;短码生成接口只负责快速返回
  • 缓存热点短码的反查结果(short_code → long_url),但注意:生成阶段的“查重缓存”不能只依赖本地ConcurrentHashMap,得用分布式锁或Redis原子操作

真实系统里,99%的性能瓶颈不在MurmurHash或Base62,而在你没想清楚“查重失败后要不要等、等多久、等不来怎么办”。这个逻辑漏掉,再快的算法也扛不住流量打穿。

Java免费学习笔记:立即使用
解锁 Java 大师之旅:从入门到精通的终极指南

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

java

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
java
java

Java是一个通用术语,用于表示Java软件及其组件,包括“Java运行时环境 (JRE)”、“Java虚拟机 (JVM)”以及“插件”。php中文网还为大家带了Java相关下载资源、相关课程以及相关文章等内容,供大家免费下载使用。

2023.06.15

10397

6

java正则表达式语法
java正则表达式语法

java正则表达式语法是一种模式匹配工具,它非常有用,可以在处理文本和字符串时快速地查找、替换、验证和提取特定的模式和数据。本专题提供java正则表达式语法的相关文章、下载和专题,供大家免费下载体验。

2023.07.05

7522

9

java自学难吗
java自学难吗

Java自学并不难。Java语言相对于其他一些编程语言而言,有着较为简洁和易读的语法,本专题为大家提供java自学难吗相关的文章,大家可以免费体验。

2023.07.31

6592

8

java配置jdk环境变量
java配置jdk环境变量

Java是一种广泛使用的高级编程语言,用于开发各种类型的应用程序。为了能够在计算机上正确运行和编译Java代码,需要正确配置Java Development Kit(JDK)环境变量。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.08.01

1124

3

java保留两位小数
java保留两位小数

Java是一种广泛应用于编程领域的高级编程语言。在Java中,保留两位小数是指在进行数值计算或输出时,限制小数部分只有两位有效数字,并将多余的位数进行四舍五入或截取。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.08.02

928

3

java基本数据类型
java基本数据类型

java基本数据类型有:1、byte;2、short;3、int;4、long;5、float;6、double;7、char;8、boolean。本专题为大家提供java基本数据类型的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.02

1376

5

java有什么用
java有什么用

java可以开发应用程序、移动应用、Web应用、企业级应用、嵌入式系统等方面。本专题为大家提供java有什么用的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.02

2729

5

java在线网站
java在线网站

Java在线网站是指提供Java编程学习、实践和交流平台的网络服务。近年来,随着Java语言在软件开发领域的广泛应用,越来越多的人对Java编程感兴趣,并希望能够通过在线网站来学习和提高自己的Java编程技能。php中文网给大家带来了相关的视频、教程以及文章,欢迎大家前来学习阅读和下载。

2023.08.03

20051

3

配置java环境变量
配置java环境变量

配置Java环境变量是为了让操作系统能够识别和使用Java的相关命令和功能。本专题为大家提供配置java环境变量相关文章,帮助大家解决问题。

2023.08.03

1215

8

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
dev.java 官方:Learn Java
dev.java 官方:Learn Java

共0课时 | 0人学习

Java JDBC数据库连接官方教程
Java JDBC数据库连接官方教程

共0课时 | 0人学习