利用Sublime Text快速清洗从网页抓取的不规则表格并生成JSON结构

夏芳酱_8705

夏芳酱_8705

2026-09-02

308人浏览

原创

因为sublime text的多光标、正则替换和列编辑能力可快速完成“视觉对齐→文本规整→结构导出”三步,2分钟处理80%脏数据,但仅适用于静态html表格,不支持语义解析或动态内容。

利用sublime text快速清洗从网页抓取的不规则表格并生成json结构

为什么直接用 sublime-text 处理网页表格比写脚本更快?

因为多数网页表格是 HTML <table> 嵌套结构,但实际抓下来常混着空格、换行、<code><br><span></span> 和不可见字符,而 sublime-text 的多光标 + 正则批量替换 + 列编辑能力,能在 2 分钟内干掉 80% 的脏数据——前提是别试图用它做语义解析,只做“视觉对齐→文本规整→结构导出”三步。

Ctrl+Alt+Shift+P 定位表格区域后怎么快速剥离 HTML 标签?

别用全量正则删标签(容易误杀内容),先聚焦在 <td> 和 <code><th> 内容上: <ul> <li>用 <code>Ctrl+Shift+P 打开命令面板,输入 Select by Name: tdSelect by Name: th(需提前安装 HTML​PrettifyTag 插件)

  • 选中所有 <td> 后,按 <code>Ctrl+Shift+L 拆成多光标,再按 Ctrl+Shift+Space(或手动删除)去掉首尾标签,只留中间文本
  • 对残留的  <br>\n 统一替换为单个空格:正则模式开 .*,搜索  |<br>|\s+,替换为 (一个空格)
  • 注意:如果表格含合并单元格(colspan/rowspan),sublime-text 不会自动补空值,得人工在对应位置敲 null 或空字符串
  • 用列编辑把不规则行转成 JSON 数组结构

    网页表格经常“头不对尾”:标题行 5 列,数据行有 4 列或 6 列。这时候不能靠自动格式化,得靠视觉对齐:

    • 把清洗后的纯文本粘贴进新 tab,用 Ctrl+Shift+J 合并多行(如有换行符干扰),再用 Ctrl+Shift+M 选中所有行首/行尾空白
    • 把光标放在第一列文字起始处,按住 Alt(Windows/Linux)或 Cmd+Opt(macOS),拖动鼠标纵向选中所有行的“第一列”,松手后批量加 "key": "
    • 同理选中第二列,加 ", 和闭合引号;每列之间用 , 隔开,最后一列后加 };整行开头补 {
    • 最终每行应形如:{"name": "张三", "age": "28", "city": "北京"} —— 注意数值是否带引号:字符串必须引号,数字若确定无前导零可后续用 jq 或 Python 转类型,别在 Sublime 里硬判断

    导出 JSON 前必须检查的三个隐藏坑

    Sublime 不校验 JSON 语法,但浏览器或后端解析器会报错:

    Miller CSV TSV JSON 数据处理器
    Miller CSV TSV JSON 数据处理器

    Miller (mlr) 是一个命令行工具,用于查询、整形和重新格式化名称索引数据,如 CSV、TSV、JSON 和 JSON Lines。它将 awk、sed、cut、join 和 sort 的功能整合到一个专为结构化数据处理而构建的单一工具中。

    下载
    • 末尾多逗号:最后一行后面不能有 ,,否则 JSON.parse() 直接失败;可用正则 ,\s*}$ 检查结尾
    • 中文引号或全角符号:从网页复制的内容可能含 “”,全部替换成英文 ",
    • 字段名重复:比如两列都叫 id,Sublime 不提示,但生成的 JSON 对象键会覆盖;建议用正则 "(\w+)": 提取所有键,复制到新窗口去重检查

    真正麻烦的不是清洗,而是原始 HTML 表格里藏了动态加载内容、注释节点或 JS 插入的伪表格——这种得回退到 requests + BeautifulSoup 抓源码,Sublime 只适合处理已落地的静态 HTML 片段。

    相关文章

    PHP速学视频免费教程(入门到精通)
    PHP速学视频免费教程(入门到精通)

    PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

    下载

    相关标签:

    sublime js json sublime text

    本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

    相关专题

    更多
    js正则表达式
    js正则表达式

    php中文网为大家提供各种js正则表达式语法大全以及各种js正则表达式使用的方法,还有更多js正则表达式的相关文章、相关下载、相关课程,供大家免费下载体验。

    2023.06.20

    3716

    8

    js获取当前时间
    js获取当前时间

    JS全称JavaScript,是一种具有函数优先的轻量级,解释型或即时编译型的编程语言;它是一种属于网络的高级脚本语言,主要用于Web,常用来为网页添加各式各样的动态功能。js怎么获取当前时间呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

    2023.07.28

    1175

    5

    js 字符串转数组
    js 字符串转数组

    js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

    2023.08.03

    1518

    5

    js是什么意思
    js是什么意思

    JS是JavaScript的缩写,它是一种广泛应用于网页开发的脚本语言。JavaScript是一种解释性的、基于对象和事件驱动的编程语言,通常用于为网页增加交互性和动态性。它可以在网页上实现复杂的功能和效果,如表单验证、页面元素操作、动画效果、数据交互等。

    2023.08.17

    9143

    11

    js删除节点的方法
    js删除节点的方法

    js删除节点的方法有:1、removeChild()方法,用于从父节点中移除指定的子节点,它需要两个参数,第一个参数是要删除的子节点,第二个参数是父节点;2、parentNode.removeChild()方法,可以直接通过父节点调用来删除子节点;3、remove()方法,可以直接删除节点,而无需指定父节点;4、innerHTML属性,用于删除节点的内容。

    2023.09.01

    820

    4

    js截取字符串的方法
    js截取字符串的方法

    js截取字符串的方法有substring()方法、substr()方法、slice()方法、split()方法和slice()方法。本专题为大家提供字符串相关的文章、下载、课程内容,供大家免费下载体验。

    2023.09.04

    2184

    5

    Js中concat和push的区别
    Js中concat和push的区别

    Js中concat和push的区别:1、concat用于将两个或多个数组合并成一个新数组,并返回这个新数组,而push用于向数组的末尾添加一个或多个元素,并返回修改后的数组的新长度;2、concat不会修改原始数组,是创建新的数组,而push会修改原数组,将新元素添加到原数组的末尾等等。本专题为大家提供concat和push相关的文章、下载、课程内容,供大家免费下载体验。

    2023.09.14

    1409

    5

    js截取字符串的方法介绍
    js截取字符串的方法介绍

    JavaScript字符串截取方法,包括substring、slice、substr、charAt和split方法。这些方法可以根据具体需求,灵活地截取字符串的不同部分。在实际开发中,根据具体情况选择合适的方法进行字符串截取,能够提高代码的效率和可读性 。

    2023.09.21

    3649

    3

    js生成随机数方法
    js生成随机数方法

    JavaScript生成随机数的方法,包括使用Math.random()方法生成指定范围内的随机整数、生成随机字符串和生成随机颜色。根据具体需求,可以选择适合的方法来生成随机数,以实现各种功能 。

    2023.09.25

    2015

    5

    热门下载

    更多
    网站特效
    /
    网站源码
    /
    网站素材
    /
    前端模板

    精品课程

    更多
    相关推荐
    /
    热门推荐
    /
    最新课程