Laper地点名称写法不同造成重复记录怎么办

梦辰酱_7924

梦辰酱_7924

2026-10-05

443人浏览

原创

poi数据库中同一地理实体因命名不规范被误判为多条记录,需通过sql筛选、语义归一化(拼音清洗/关键词提取/人工映射)和批量合并(主记录优选、字段合并、坐标聚合、原子更新删除)完成治理。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 多模态理解力帮你轻松跨越从0到1的创作门槛☜☜☜

laper地点名称写法不同造成重复记录怎么办

同一地理实体因“万达广场”“万达广场(购物中心店)”“XX万达广场A座”等不同写法,在POI数据库中被识别为多条独立记录,导致搜索混乱、导航偏移——这不是数据错,而是命名不规范引发的语义近似同名问题。

先确认是不是真重复

打开GIS平台或数据库管理工具,执行以下SQL语句筛选疑似重复项:

SELECT name, COUNT(*) AS cnt, ST_X(ST_Centroid(geom)) AS x, ST_Y(ST_Centroid(geom)) AS y FROM poi_table WHERE address LIKE '%万达%' GROUP BY name HAVING cnt > 1;

注意:仅靠name字段分组会漏掉“国际商贸中心”和“国际商务中心”这类语义近似项,【必须同步运行模糊匹配脚本】,否则后续去重就是空中楼阁。

这一步操作起来很简单,直接把SQL粘贴进查询窗口回车就行。

统一名称前先做语义归一化

方法一:拼音+字符清洗标准化

对name字段执行:LOWER(TRIM(REGEXP_REPLACE(REPLACE(REPLACE(name, '(', '('), ')', ')'), '[^a-zA-Z0-9u4e00-u9fa5\(\)\-\s]', ''))) → 再用pypinyin转拼音 → 去掉空格和括号 → 得到纯小写无标点拼音串(如“wan da guang chang gou wu zhong xin dian”)。

方法二:关键词锚定提取主干

用正则提取核心词:REGEXP_SUBSTR(name, '(万达|龙湖|凯德|吾悦|银泰)[u4e00-u9fa5()-]*?广场|中心|商城|MALL', 1, 1, 'i')。若为空,则 fallback 到原name前6个汉字。

Laper
Laper

Laper是专为编剧、导演和制片人推出的 AI 原生剧本创作工具。

下载

方法三:人工规则兜底(必须做)

建一张mapping表,手动录入高频歧义对,例如:

“万达广场(购物中心店)” → “万达广场”;“XX万达广场A座” → “万达广场”;“创新大厦二期” → “创新大厦”。【mapping表必须设为只读,禁止在生产环境直接UPDATE name字段】

批量合并重复POI记录

第一步:按归一化后的name分组,取每组中geom精度最高、更新时间最新、source可信度最高的那条作为主记录;

第二步:将同组其余记录的业务字段(如电话、营业时间、图片URL)以JSON数组形式合并进主记录的extra_info字段;

第三步:用ST_Distance计算同组内各点与主记录坐标的欧氏距离,保留距离<50米的点作为附属坐标存入multi_location字段;

第四步:执行UPDATE + DELETE原子操作——先UPDATE主记录的merged_count = merged_count + (同组记录数−1),再DELETE掉所有非主记录。

这一步不可逆,操作前务必导出原始数据备份。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
WorkBuddy核心功能与实操模式
WorkBuddy核心功能与实操模式

深入探索WorkBuddy的强大功能。本专题包含智能问答、文档处理、会议纪要生成、日程管理、任务协作等核心模块的操作指南与最佳实践。通过图文并茂的教程,助您快速上手,最大化发挥WorkBuddy的办公效能。

2026.04.09

582

19

LLVM自定义Pass怎么写
LLVM自定义Pass怎么写

本专题聚焦LLVM自定义Pass开发,整理Pass类结构、run()方法、PreservedAnalyses、CMake构建、插件注册、-load-pass-plugin加载和测试用例编写流程。

2026.09.30

80

10

LLVM RISC-V参数配置教程
LLVM RISC-V参数配置教程

本专题介绍LLVM对RISC-V基础ISA和扩展的支持方式,涵盖RV32、RV64、标准扩展、实验性扩展、厂商扩展、-menable-experimental-extensions和版本差异。

2026.09.30

80

14

LLVM IR中间表示入门指南
LLVM IR中间表示入门指南

本专题整理LLVM IR的核心概念,包括中间表示作用、模块结构、函数、基本块、SSA形式、类型系统和常见语法,帮助新手理解LLVM编译流程中的关键层。

2026.09.30

40

12

PDF转图片方法
PDF转图片方法

需要把 PDF 页面用于上传、预览、分享或图片归档时,PDF 转图片方法专题整理 JPG/PNG 格式选择、逐页导出、清晰度设置、批量下载和结果检查等流程,帮助用户稳定完成 PDF 图片化处理。

2026.09.30

40

26

PixTV AI视频生成与无限画布创作
PixTV AI视频生成与无限画布创作

PixTV专题整理AI视频与视觉内容创作相关功能使用教程,涵盖AI生图、视频生成、无限画布、多模型创作、素材管理、声音音乐及视频剪辑等功能,帮助用户快速掌握PixTV从创意到成片的完整制作方法。

2026.09.29

60

15

Buffalo框架数据库开发全教程
Buffalo框架数据库开发全教程

本专题围绕Buffalo框架数据库开发,讲解database.yml多环境配置、soda与fizz迁移生成回滚、模型结构体标签、增删改查与条件查询、一对多与多对多关联、数据校验、回调钩子、事务处理及原生SQL执行能力。

2026.09.23

280

15

Buffalo框架路由与请求处理实操指南
Buffalo框架路由与请求处理实操指南

本专题讲解Buffalo框架路由与请求处理机制,涵盖路由注册与分组、资源路由、Handler编写规范、Context上下文方法、参数绑定、中间件编写挂载、Session与Cookie读写、Flash消息及错误页面定制方法。

2026.09.23

160

15

Buffalo框架零基础入门教程
Buffalo框架零基础入门教程

本专题整理Buffalo框架入门内容,涵盖Go环境准备、buffalo CLI安装、新项目生成、目录结构说明、dev热加载启动、数据库连接配置与常见报错排查,帮助新手按约定优于配置的思路跑通第一个Buffalo框架应用。

2026.09.23

120

15

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.6万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133.4万人学习