2018-11-19 Neo4j百万级数据导入只能用neo4j-import

浅涛姑娘_7964

浅涛姑娘_7964

2025-09-05

613人浏览

原创

在处理大规模数据导入到neo4j时,尤其是涉及到百万级的数据量,使用合适的导入工具和方法至关重要。以下是一些建议和步骤来解决您遇到的问题:

使用neo4j-import工具

对于大规模数据导入,Neo4j官方推荐使用

neo4j-import

工具。这是一个专为大数据导入设计的高效工具,可以一次性导入节点和关系,而不需要通过REST API或Cypher语句逐条插入数据。

步骤:

  1. 准备数据文件:

    • 将节点数据和关系数据分别保存为CSV文件。确保CSV文件的格式符合
      neo4j-import
      的要求。
    • 节点CSV文件应包含一个唯一的ID字段,用于后续建立关系。
    • 关系CSV文件应包含起始节点和结束节点的ID。
  2. 使用neo4j-import命令:

    • 确保Neo4j数据库为空,因为

      neo4j-import
      只能导入到空数据库。
    • 使用以下命令进行导入:

      neo4j-admin import --nodes=import/nodes1.csv,import/nodes2.csv --relationships=import/relationships.csv

      其中

      直播间话术巡检-windows
      直播间话术巡检-windows

      直播话术巡检系统(Windows版) — 实时语音转写、关键词检测、场景自动切换、告警推送、大屏可视化。支持 Windows VB-Cable 虚拟声卡音频采集,阿里云 ASR 实时识别。一键启动脚本,自动安装环境。

      下载
      import/nodes1.csv
      和
      import/nodes2.csv
      是您的节点文件,
      import/relationships.csv
      是关系文件。
  3. 启动Neo4j数据库:

    • 导入完成后,启动Neo4j数据库并检查数据是否正确导入。

注意事项:

  • 文件路径:在Windows下,确保使用正确的文件路径格式,如
    file:///d:/csv/company.csv
    。
  • 内存问题:如果遇到内存不足的问题,可以考虑增加Neo4j的内存配置,或者分批导入数据。
  • Cypher和LOAD CSV:虽然Cypher语句和LOAD CSV方法可以用于小规模数据导入,但对于百万级数据,效率较低且容易导致内存溢出。

示例CSV文件格式:

节点文件(nodes1.csv):

id:ID,name
1,Node1
2,Node2
...

节点文件(nodes2.csv):

id:ID,name
1,NodeA
2,NodeB
...

关系文件(relationships.csv):

:start_id,:end_id,:TYPE
1,1,REL_TYPE
2,2,REL_TYPE
...

通过以上方法,您应该能够高效地将90万和500万的节点以及150万的关系导入到Neo4j数据库中。

2018-11-19 Neo4j百万级数据导入只能用neo4j-import

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
windows查看端口占用情况
windows查看端口占用情况

Windows端口可以认为是计算机与外界通讯交流的出入口。逻辑意义上的端口一般是指TCP/IP协议中的端口,端口号的范围从0到65535,比如用于浏览网页服务的80端口,用于FTP服务的21端口等等。怎么查看windows端口占用情况呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.26

3339

3

查看端口占用情况windows
查看端口占用情况windows

端口占用是指与端口关联的软件占用端口而使得其他应用程序无法使用这些端口,端口占用问题是计算机系统编程领域的一个常见问题,端口占用的根本原因可能是操作系统的一些错误,服务器也可能会出现端口占用问题。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.27

2898

6

windows照片无法显示
windows照片无法显示

当我们尝试打开一张图片时,可能会出现一个错误提示,提示说"Windows照片查看器无法显示此图片,因为计算机上的可用内存不足",本专题为大家提供windows照片无法显示相关的文章,帮助大家解决该问题。

2023.08.01

1528

3

windows查看端口被占用的情况
windows查看端口被占用的情况

windows查看端口被占用的情况的方法:1、使用Windows自带的资源监视器;2、使用命令提示符查看端口信息;3、使用任务管理器查看占用端口的进程。本专题为大家提供windows查看端口被占用的情况的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.02

2639

5

windows无法访问共享电脑
windows无法访问共享电脑

在现代社会中,共享电脑是办公室和家庭的重要组成部分。然而,有时我们可能会遇到Windows无法访问共享电脑的问题。这个问题可能会导致数据无法共享,影响工作和生活的正常进行。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.08.08

3330

4

windows自动更新
windows自动更新

Windows操作系统的自动更新功能可以确保系统及时获取最新的补丁和安全更新,以提高系统的稳定性和安全性。然而,有时候我们可能希望暂时或永久地关闭Windows的自动更新功能。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.10

1677

3

windows boot manager
windows boot manager

windows boot manager无法开机的解决方法:1、系统文件损坏,使用Windows安装光盘或USB启动盘进入恢复环境,选择修复计算机,然后选择自动修复;2、引导顺序错误,进入恢复环境,选择命令提示符,输入命令"bootrec /fixboot"和"bootrec /fixmbr",然后重新启动计算机;3、硬件问题,使用硬盘检测工具进行扫描和修复;4、重装操作系统。本专题还提供其他解决

2023.08.28

2517

4

windows锁屏快捷键
windows锁屏快捷键

windows锁屏快捷键是Windows键+L、Ctrl+Alt+Del、Windows键+D、Windows键+P和Windows键+R。本专题为大家提供windows相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.30

5147

5

Window.setInterval()方法
Window.setInterval()方法

Window.setInterval() 方法的基本语法是“window.setInterval(function, delay)”,function是要重复执行的函数或代码块,delay是每次执行之间的时间间隔,以毫秒为单位。本专题为大家提供Window.setInterval()相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.31

775

3

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Revel 官方 app.conf 文档
Revel 官方 app.conf 文档

共0课时 | 0人学习

Buffalo框架新项目生成指南
Buffalo框架新项目生成指南

共0课时 | 0人学习

Buffalo框架官方文档
Buffalo框架官方文档

共0课时 | 0人学习