目前由于项目的需要,用到了Neo4j的批量导入。
经过查看资料发现:
1、批量导入时,如果发现必要属性指定的节点存在时,就认为导入的数据不应该为新建节点,而是更新节点,jexp封装的rest包满足不了条件
2、rest接口导入为单线程导入,不满足使用hadoop m/r的入库条件。
3、基于官方资料发现实现多线程高IO数据导入只能在嵌入式的Neo4j中使用,而目前业务是必须作为独立服务器使用。
此时公布基于嵌入式数据库数据生成和导入源码。
测试数据生成代码在src/test/java中。
基于以上几点主要原因决定利用neo4j支持插件功能,开发基于NIO的插件,可能会解决问题。
本文讨论了在Neo4j中遇到的问题,包括批量导入时的节点更新需求、单线程导入限制以及嵌入式数据库的使用场景。提出通过开发基于NIO的插件来解决多线程高IO数据导入的问题。

1913

被折叠的 条评论
为什么被折叠?



