精品欧美一区二区三区在线观看 _久久久久国色av免费观看性色_国产精品久久在线观看_亚洲第一综合网站_91精品又粗又猛又爽_小泽玛利亚一区二区免费_91亚洲精品国偷拍自产在线观看 _久久精品视频在线播放_美女精品久久久_欧美日韩国产成人在线

如何使用batch-import工具向neo4j中導入海量數據

運維 數據庫運維
在開發neo4j的過程中,經常會有同學問如何向neo4j中導入大量的歷史數據,而這些數據一般都會存在于關系型數據庫中,現在本人就根據自己的導入經歷,把導入的過程和一些挖過的坑分享給大家,以便后面的同學少走彎路。

【引自T_SevenS的博客】在開發neo4j的過程中,經常會有同學問如何向neo4j中導入大量的歷史數據,而這些數據一般都會存在于關系型數據庫中,現在本人就根據自己的導入經歷,把導入的過程和一些挖過的坑分享給大家,以便后面的同學少走彎路,廢話不多說,直接上干貨。

1、batch-import原始項目地址:https://github.com/jexp/batch-import

這個工具是neo4j的作者之一Michael Hunger所編寫,是在neo4j自帶批量導入工具基礎之上做的進一步優化,但是它在導入.gz壓縮文件時,會出現關系無法導入的情況,所以如果要使用.gz壓縮包進行導入,請使用我修改過的版本:https://github.com/mo9527/batch-import

2、環境準備

jdk:7以上

內存:8G以上,導入數據多的話會非常消耗內存,我自己導入的是將近1.5億節點,3億關系,用的是32G內存

3、導入步驟

a)從github上clone下代碼,并使用maven進行打包,打完包后的jar文件,與項目本身的依賴jar一起放到lib文件夾下,batch.properties文件和執行導入的腳本放在lib同級目錄下,***的目錄結構如下圖:

 

ps:file文件夾是我自己將要導入的csv文件和.gz壓縮包。

b)組裝csv文件

說起這一步,可能需要你們根據自己的實際業務需求,手動寫代碼導csv文件了,這里我只講一下csv文件格式一些要點:

1)、節點csv文件

節點csv文件的***列是固定的,列值為此節點的label名稱,第二列是index,它的列頭是id:string:indexName 這種格式,解釋一下,id是這一列的property名字,可以根據需要自己命名,string為字段的數據類型,indexName是neo4j數據庫中將要導入的索引名稱,我自己的文件格式如下:

 

然后,后面的列就是節點的property了,沒什么特別的要求

2)、關系csv文件

先看下我的關系csv文件:

 

關系的csv文件前兩列要特別注意,***列是關系的起始節點,第二列是關系的結束節點,第三列是關系類型,后面的列是關系的property,可以隨意了。他github上的說明沒有說出一些注意點,這里要特別標明:

***列的起始節點的列頭,也就是id:string:buyerId這個東西,這個玩意一定要和節點csv文件(上圖)中定義的一模一樣,第二列也是如此,要和結束節點的csv文件里的一樣,不然他會找不到對應的關系。

3)、修改batch.properties文件

主要修改兩個地方,

  • 如果是在現有的neo4j數據庫中進行導入,請設置:

batch_import.keep_db=true

  • 將節點csv文件中所有的索引名稱加入到文件中,例如上面這個節點csv文件中的索引名稱是buyerId,那就在文件中加入batch_import.node_index.buyerId=exact

以下是我本人的配置文件:

 

4、導入

linux和win環境的導入都差不多,只不過執行的腳本不一樣,這里以win環境為例。

文件都準備好了,現在開始導入了。

打開cmd,cd到導入腳本的目錄,也就是import.bat所在目錄,執行命令:

  1. import.bat test.db node.csv rel.csv 

解釋一下命令的幾個參數:***個參數是數據庫的目錄,可以絕對路徑指定到任意位置,第二個參數是節點csv文件,多個csv文件用逗號分隔,如果是壓縮包,一定要注意,這里有個坑,不能把所有類型的node都放到一個壓縮包中,一定要每個類型的node分開壓縮,不然它只會導入***個類型的node節點,同理,關系的壓縮包也要分開壓縮,然后導入時用逗號分隔.gz文件。

好了,如果你的csv文件沒有問題,內存足夠用的話,現在就開始等待吧。

如果想修改導入工具的Heap大小,可以修改腳本文件中的 set HEAP=4G 

 

溫馨提示:如果節點文件中有中文的話,導入會非常慢的,除非你內存有128G,我有一個節點文件,里面只有一列是中文,而且中文最長不超過4個漢字,2000多萬記錄導了2個小時,注意我是32G內存,其他4000多萬的節點,沒有漢字的,基本上不超過2分鐘。 

責任編輯:龐桂玉 來源: T_SevenS的博客
相關推薦

2025-07-18 08:15:55

2017-07-28 15:12:28

Neo4j圖數據庫

2022-11-18 17:53:03

Neo4j

2022-04-13 11:32:45

Neo4j圖數據庫

2018-05-16 08:26:39

知識圖譜Neo4j

2021-12-27 07:31:37

JavaNeo4J數據庫

2024-08-08 08:31:32

SpringNeo4j優化

2011-07-26 12:48:52

neo4j圖數據庫

2021-12-03 20:33:08

計算

2025-10-09 00:00:00

Neo4jLLMs結構化

2025-07-21 09:23:13

2024-06-03 10:53:18

LLMRAGGraphRAG

2022-01-17 14:34:59

數據平臺數據數字化

2022-01-17 17:10:18

Neo4j 圖數據庫

2011-09-22 16:46:02

Neo4j圖形數據庫數據庫

2015-09-28 08:57:06

Ruby APPNeo4j

2018-05-03 15:40:33

2022-02-15 08:22:28

Neo4jSpring數據庫

2021-10-27 17:20:23

圖數據數據庫

2022-03-23 09:37:54

Neo4j開源侵犯
點贊
收藏

51CTO技術棧公眾號

国内精品麻豆美女在线播放视频 | 国产精品免费福利| 成人片黄网站色大片免费毛片| 国产精品扒开腿做爽爽爽视频软件| 国产精品欧美一级免费| 成人免费视频97| 色婷婷av国产精品| 999精品视频| 亚洲成人av片在线观看| 青青青国产在线视频| 成人在线播放| 久久久久久9999| 亚洲字幕在线观看| 亚洲国产成人精品女人久久| 亚洲一区在线| 亚洲男人7777| 中文字幕久久久久久久| 欧美123区| 亚洲一区免费视频| 亚洲国产日韩欧美| 人妻丰满熟妇av无码区hd| 久久99久久精品| 国产91精品久久久久久久| 天天做夜夜爱爱爱| 奇米影视777在线欧美电影观看 | 日韩极品在线| 日韩午夜激情免费电影| 国产又黄又猛又粗又爽的视频| 女人黄色免费在线观看| 亚洲色图欧美偷拍| 神马影院一区二区| 嫩草在线播放| av网站免费线看精品| 亚洲一区中文字幕| 91国产免费视频| 日韩国产欧美视频| 青青草一区二区| 四虎成人精品永久免费av| 亚洲精品99| 日韩网站在线观看| 久久视频一区二区三区| 亚洲欧美日本伦理| 日韩精品极品在线观看| 无码人妻一区二区三区在线| 久久久久久久久久久久电影| 欧美女孩性生活视频| 日韩一级理论片| 欧美一级大黄| 色欲综合视频天天天| 久久视频这里有精品| 不卡的av影片| 亚洲成人黄色影院| 黄色一级片在线看| www.综合网.com| 一区二区久久久久久| 欧美少妇一区二区三区| 国产黄色在线免费观看| 综合欧美一区二区三区| 精品一区二区成人免费视频| 久久综合之合合综合久久| ...av二区三区久久精品| 亚洲精品一区二区三| 在线激情网站| 亚洲欧美一区二区久久| 精品嫩模一区二区三区| 日本一级理论片在线大全| 亚洲综合丝袜美腿| 131美女爱做视频| 最新中文字幕在线播放| 欧美性69xxxx肥| 妺妺窝人体色www在线观看| 巨胸喷奶水www久久久免费动漫| 欧美综合一区二区| 天天综合天天添夜夜添狠狠添| 色噜噜成人av在线| 日韩视频在线观看一区二区| 亚洲精品激情视频| 自拍视频一区| www.久久色.com| 麻豆疯狂做受xxxx高潮视频| 亚洲国产一区二区三区a毛片| 97福利一区二区| 自拍偷拍18p| 精品一区二区三区久久| 粉嫩av免费一区二区三区| 手机亚洲第一页| wwww国产精品欧美| 一区二区三区在线视频111| 午夜在线激情影院| 欧美性猛xxx| 色婷婷成人在线| 亚洲一区二区电影| 亚洲欧美综合图区| 国产天堂av在线| 99香蕉国产精品偷在线观看 | av在线播放成人| 欧美一区亚洲二区| huan性巨大欧美| 日韩欧美在线国产| 尤物网站在线看| 亚洲国产合集| 粗暴蹂躏中文一区二区三区| 国产乱国产乱老熟| 国产精品一区二区91| 美女视频久久| 亚洲资源一区| 在线免费观看视频一区| 欧美熟妇精品一区二区| 激情综合网五月| 久久久久久久香蕉网| 性高潮视频在线观看| 成人激情av网| 看一级黄色录像| 欧美在线va视频| 亚洲白虎美女被爆操| 特黄一区二区三区| 亚洲伊人观看| 国产精品对白一区二区三区| av黄色在线观看| 精品久久久久久亚洲精品| 一级片黄色免费| 欧美一区二区麻豆红桃视频| 91精品国产高清久久久久久91| 国产又爽又黄免费软件| 国产欧美精品日韩区二区麻豆天美| 国产一区二区三区小说| 中文成人激情娱乐网| 亚洲一级免费视频| 久久精品一二区| 国产999精品久久| 中文字幕黄色大片| 国产精品久久久久77777丨| 日韩久久精品电影| 日本系列第一页| 国产福利91精品| 欧美一级黄色录像片| 欧美日韩国产网站| 亚洲一区www| 免费一级a毛片| 国产午夜亚洲精品羞羞网站| 国产亚洲欧美在线视频| 欧美黑人做爰爽爽爽| 欧美黄色片免费观看| 国产成人精品一区二三区四区五区| 中文字幕精品三区| 538在线视频观看| 欧美一级精品| 国产精品一区二区三| 爱久久·www| 欧美日韩一区不卡| 欧美88888| 久久99久久99| 大桥未久一区二区三区| gogo大尺度成人免费视频| 久久韩国免费视频| 国产视频在线观看视频| 亚洲色图在线看| 91亚洲一区二区| 欧美一区激情| 国产二区不卡| 成人福利电影| 亚洲美女免费精品视频在线观看| 伦av综合一区| 中文天堂在线一区| 91pony九色| 国产在线欧美| 久久久久久久久一区| 欧美成a人片在线观看久| 国产亚洲一区二区精品| 一级淫片免费看| 尤物av一区二区| 国产精品无码电影| 久久精品官网| 在线免费观看成人| 在线日韩成人| 欧美一区在线直播| yourporn在线观看视频| 欧美一级在线视频| 精品91久久久| 国产精品丝袜91| 熟妇无码乱子成人精品| 99精品国产在热久久婷婷| 日本不卡二区| 永久免费精品视频| 人人澡人人澡人人看欧美| 暖暖日本在线观看| 欧美精品一区二区在线观看| www.色国产| 亚洲精品网站在线观看| chinese麻豆新拍video| 免费人成精品欧美精品| 日韩精品久久一区二区| 日韩av影院| 成人精品视频在线| 麻豆成全视频免费观看在线看| 中文字幕亚洲无线码a| 亚洲精品视频91| 欧美三级乱人伦电影| 国产午夜福利一区二区| 国产精品视频九色porn| 久久久久成人精品无码中文字幕| 蜜桃久久av一区| 老太脱裤让老头玩ⅹxxxx| 日韩精品中文字幕第1页| 国产一区不卡在线观看| 亚洲男人在线| 日韩av电影手机在线观看| 99视频免费在线观看| 亚洲一级免费视频| 人人妻人人澡人人爽久久av| 欧美精品丝袜中出| 黄色在线视频网址| 亚洲午夜一二三区视频| 国产三级aaa| 久久久三级国产网站| 日本黄色录像片| 国产suv精品一区二区883| 性chinese极品按摩| 亚洲综合日韩| 欧美精品久久久久久久自慰| 亚洲成人最新网站| 一本一本a久久| 夜夜春成人影院| 精品国产综合久久| 7777精品| 99re在线观看| 99精品国产九九国产精品| 国产成人亚洲综合91精品| 日本不卡网站| 91禁国产网站| h片在线观看视频免费| 欧美日韩福利视频| 国产理论在线观看| 久久精品国产免费观看| 日本天堂在线观看| 日韩视频免费在线| 色三级在线观看| 中文字幕视频在线免费欧美日韩综合在线看 | а√中文在线8| 日韩一级裸体免费视频| 在线视频三区| 日韩在线视频一区| 日本中文字幕在线2020| 色婷婷av一区二区三区久久| porn视频在线观看| 中文字幕视频一区二区在线有码| www.久久热.com| 最近2019年中文视频免费在线观看| 精品视频二区| 在线免费看av不卡| 日韩在线免费电影| 按摩亚洲人久久| 好吊日视频在线观看| 久久视频在线播放| 污污视频在线| 97国产一区二区精品久久呦| av中文资源在线资源免费观看| 欧美一级电影免费在线观看| 在线观看欧美日韩电影| 日本成人激情视频| 992tv国产精品成人影院| 国产精品综合不卡av| 国产成人免费av一区二区午夜 | 欧美巨乳美女视频| 手机在线免费观看av| 久久人人爽人人爽人人片av高请| sm捆绑调教国产免费网站在线观看| 97国产精品视频| 三上悠亚激情av一区二区三区| 国产精品激情av电影在线观看 | 羞羞污视频在线观看| 欧美激情高清视频| 中文av在线全新| 国产精品视频最多的网站| 精品一区二区三区中文字幕视频| 国产99视频精品免费视频36| 校花撩起jk露出白色内裤国产精品| 日本午夜一区二区三区| 99久久婷婷这里只有精品| 妺妺窝人体色www看人体| 亚洲伊人网站| 国内av一区二区| 97国产一区二区| 欧洲性xxxx| 亚洲午夜视频在线观看| 波多野结衣一区二区三区在线 | 亚洲精品久久久久久国产精华液| 精品少妇久久久| 色婷婷av一区二区三区之一色屋| 91成人在线免费| 日韩精品亚洲元码| 免费在线观看黄| 8x海外华人永久免费日韩内陆视频| 丰满少妇一区| 九九99玖玖| 99热在线成人| 无码精品a∨在线观看中文| 久久精品99久久久| 天堂久久久久久| 亚洲欧美电影院| 久久久久久久久黄色| 日韩欧美国产三级| 成人免费在线观看| 久久久久久久国产精品| 国产成人77亚洲精品www| 国产在线精品二区| 91精品一区二区三区综合| 欧美黄色一级片视频| 国产精品一区二区x88av| 美国黑人一级大黄| 精品久久中文字幕| 国产成人三级在线播放| 一本色道久久88综合亚洲精品ⅰ| 丁香花高清在线观看完整版| 成人免费高清完整版在线观看| 亚欧日韩另类中文欧美| 日韩欧美猛交xxxxx无码| 精品中文av资源站在线观看| 国产特黄级aaaaa片免| 亚洲国产成人tv| 国产不卡av在线播放| 在线观看欧美成人| 中文字幕色婷婷在线视频| 成人免费视频网站入口| 99久久婷婷国产综合精品电影√| 国产偷人视频免费| 91偷拍与自偷拍精品| 免费在线观看亚洲| 欧美一区二区国产| 精品美女在线观看视频在线观看| 国产精品第3页| 国模吧精品视频| 日本熟妇人妻xxxxx| 91性感美女视频| 日本中文字幕免费| 精品成人免费观看| 欧美videosex性极品hd| 91精品久久久久久蜜桃| 欧美一区网站| 制服下的诱惑暮生| 亚洲精品高清在线观看| japanese国产| 超碰97人人做人人爱少妇| 日本久久伊人| 成人小视频在线观看免费| 国产成人免费视频| 日本一区二区欧美| 亚洲精品美女免费| 色是在线视频| 欧美日韩在线精品| 日韩高清电影一区| 影音先锋男人看片资源| 在线观看91精品国产麻豆| 国产美女在线观看| 成人动漫视频在线观看免费| 国产精品a级| 超碰caoprom| 色综合久久中文字幕| 国产三级在线| 国产中文字幕亚洲| 欧美在线黄色| 亚洲av成人片色在线观看高潮 | 91国内精品白嫩初高生| 精品国产av无码一区二区三区| 成人精品亚洲人成在线| 日本一级淫片色费放| 亚洲色图偷窥自拍| 亚洲欧美专区| 国产精品69久久久| 91片在线免费观看| 在线观看视频二区| 精品中文字幕乱| 美女视频亚洲色图| 啊啊啊国产视频| 一区二区三区精品久久久| 手机av免费在线观看| 国产精品国产三级国产aⅴ9色| 91不卡在线观看| 水蜜桃av无码| 欧美日韩国产一级| heyzo在线| 亚洲欧洲另类精品久久综合| 国产精品一品二品| 黑人精品无码一区二区三区AV| 这里只有精品久久| gogo久久日韩裸体艺术| 动漫av免费观看| 一区二区三区中文字幕电影 | 最近2019好看的中文字幕免费 | 欧美视频小说| 精品夜夜嗨av一区二区三区| 日本少妇久久久| 中文字幕亚洲欧美在线 | 久久福利电影| 久久成人av少妇免费| 午夜影院在线看| 日韩一区二区三区在线播放| 欧美日韩一本| 伊人五月天婷婷| 在线观看日产精品|