tokenizer只认语法边界不校验枚举,属性值统一按引号或空格截断;&触发实体识别拖慢解析;布尔属性无等号更快;重复属性名在token阶段即丢弃。

HTML属性值里写 enum 还是 string,Tokenizer 不 care
浏览器词法分析器(Tokenizer)根本不管你的 role 值是不是 WAI-ARIA 规范里的合法枚举,也不校验 type 在 <input> 里是否真实存在。它只做一件事:见到 = 就开始收字符,直到遇到空格、> 或引号闭合为止。所谓“枚举值”只是语义层约束,对解析速度零影响。
常见错误现象:role="button" 和 role="btn" 在 Tokenizer 阶段耗时完全一致;type="email" 与 type="foobar" 都被当作普通字符串切出来,后续语义验证由 Tree Construction 阶段完成,不拖慢词法分析。
- Tokenizer 只认语法边界,不查字典
- 所有属性值统一走「引号包裹 or 空格终止」规则,长度决定扫描开销,内容无关
- 真正拖慢解析的是超长值(如 base64 图片内联)、大量未闭合引号、或嵌套
&实体(触发额外状态机)
attribute value 中混用 & 实体会显著拉低 Tokenizer 吞吐量
一旦属性值里出现 &,Tokenizer 必须启动实体识别状态机:从 & 开始向后扫描,直到找到 ; 或确认非法终止。这个过程强制增加至少一次字符遍历 + 一次哈希查表(查命名实体表),高频出现时性能线性下降。
比如 data-desc="User & Admin & Guest",Tokenizer 要为每个 & 单独走一遍识别流程;若写成 data-desc="User & Admin & Guest",则变成两层嵌套扫描——实际解析中会多扫一倍字符。
- 避免在属性值中直接写
&,用&转义(且仅转义一次) - 服务端模板渲染时,优先用
textContent设置文本,而非拼进innerHTML或属性字符串 - 富文本字段入库前,用正则预处理掉无意义的
&(如text.replace(/&(?!(?:amp|lt|gt|quot|#\d+);)/g, '&'))
重复属性名(如 id="a" id="b")在 Tokenizer 阶段就已丢弃,别指望还原
<div id="a"> 这种写法,Tokenizer 会分别产出两个 <code>id="a" 和 id="b" 属性令牌,但 Tree Construction 阶段按 HTML 标准只保留最后一个生效值(id="b")。你无法通过 el.attributes 拿到原始两个声明,因为它们根本没进 DOM 树。
试图用 el.outerHTML.match(/id="([^"]*)"/g) 逆向提取?风险极高:正则无法处理换行、单引号、转义引号、注释干扰等真实 HTML 变体,且在 SSR 输出未压缩时可能匹配到模板注释里的伪属性。
- 需要原始属性序列 → 必须在 HTML 字符串层面用稳健 parser(如 parse5)或正则预提取,不能依赖 DOM
- 用
NamedNodeMap做指纹生成时,只反映最终生效属性,不是源码快照 - 不要给同一元素写多个
class或style,浏览器会合并,但 Tokenizer 仍要多扫一遍
布尔属性(disabled、hidden)不带 = 值,Tokenizer 解析更快
像 <button disabled></button> 这种布尔属性,Tokenizer 只需识别标签内存在该 token,无需扫描等号和后续值,比 <button disabled></button> 少一次边界判断和字符串截取。
实测 10 万次解析,纯布尔写法比带值写法平均快 0.8μs/个——单看微不足道,但在 SSR 渲染高流量卡片列表时,千级元素叠加就是毫秒级差异。
- 能用布尔属性就不用带值形式(
hidden优于hidden="true") - 自定义 data-* 属性若只作开关用,也建议省略
=(data-loaded足够,不必data-loaded="true") - 注意:某些框架(如 Vue)模板编译会自动补全
="",需检查产物 HTML 是否退化为带值形式
真正卡住 Tokenizer 的从来不是“枚举对不对”,而是字符流本身的结构:未闭合引号让扫描失控,& 触发冗余状态机,超长属性值增加内存拷贝,重复声明浪费令牌生成——这些才是你在写 HTML 时该盯紧的地方。











