一、neo4j数据导入方法
neo4j数据导入有两种方法,第一种是使用cypher语法中的LOAD CSV,第二种是使用neo4j自带的工具neo4j-admin import。
LOAD CSV
导入的文件必须是csv文件,位置可以是本地的,或通过http、https、ftp等url指定位置。
neo4j中关于导入文件的设置是dbms.security.allow_csv_import_from_file_urls,默认为true;而导入本地文件的位置通过dbms.directories.import来指定导入的根目录,然后再使用file:///来表示绝对路径。
示例一:不带header,用下标来索引
给定artists.csv文件
1,ABBA,1992 2,Roxette,1986 3,Europe,1979 4,The Cardigans,1992
输入语句:
LOAD CSV FROM 'https://neo4j.com/docs/cypher-manual/3.5/csv/artists.csv' AS line CREATE (:Artist { name: line[1], year: toInteger(line[2])})
示例二:带header,用关键字来索引
给定artists-with-headers.csv文件
Id,Name,Year 1,ABBA,1992 2,Roxette,1986 3,Europe,1979 4,The Cardigans,1992
然后执行cypher语句:
LOAD CSV WITH HEADERS FROM 'https://neo4j.com/docs/cypher-manual/3.5/csv/artists-with-headers.csv' AS line CREATE (:Artist { name: line.Name, year: toInteger(line.Year)})
示例三:大csv文件分批导入
USING PERIODIC COMMIT LOAD CSV FROM 'https://neo4j.com/docs/cypher-manual/3.5/csv/artists.csv' AS line CREATE (:Artist { name: line[1], year: toInteger(line[2])})
这里默认1000行提交一次,也可以人为指定,比如using periodic commit 500.
额外提示:如果值中包含引号,可以用""来表示".
可以发现使用load csv只能导入结点,如果还想导入关系数据,就只能靠neo4j自带的import工具了。
neo4j-admin import
使用neo4j-admin import工具只能往空数据库中导入数据,且csv文件必须在import目录下。使用csv文件导入数据时,每个结点都必须有一个唯一的ID类属性,但是最好不要起名为ID,这会和数据库本身维护的ID字段冲突。
二、neo4j导入实例
1、本次的数据集为Movielens的数据集,下载地址:
http://grouplens.org/datasets/movielens/
2、在neo4j安装根路径下找到import之后在此文件夹下放入数据。
3、在neo4j中导入数据并创建节点,因数据量过大,使用USING PERIODIC COMMIT 1000,防止数据过大溢出,with headers可以处理含有头文件的数据。
USING PERIODIC COMMIT 1000 load csv with headers from "file:///ratings.csv" as link with link create(:Ratings{userId:link.userId,movieId:link.movieId,rating:link.rating, timestamp:link.timestamp })
速度还是蛮快的!!!
4、创建节点之间的关系
LOAD CSV WITH HEADERS FROM "file:///ratings.csv" AS row MATCH (m:Movies), (u:Users) WHERE u.userId = row.userId AND m.movieId = row.movieId CREATE (u)-[r:rating{value:row.rating}]->(m)
5、如何快速删除Neo4j中数量级较大的数据(该方法是清楚数据库中所有的数据):
1.关闭Neo4j服务器进程:
命令:neo4j stop
2.删除graph.db数据库文件:
找到<NEO4J_HOME>/data/databases/路径,可以看到graph.db文件夹。删除此文件夹即可。
3.重新启动Neo4j服务器:
通过bin目录下执行如下命令启动Neo4j:/neo4j console
导入csv数据时,如何将属性的String类型转换成int类型:
//导入节点 电影类型 == 注意类型转换 LOAD CSV WITH HEADERS FROM "file:///genre.csv" AS line MERGE (p:Genre{gid:toInteger(line.gid),name:line.gname})