本系统中使用的数据包括科技文献数据。其中对应到MySQL数据库中的表有paper_degree（论文）、paper_journal（期刊）、paper_meeting（会议）、patent（专利）、Unit（企业或学校）。将关系型数据库中的数据导入到图数据库中有两种导入方式，一种是使用Cypher提供的LOAD命令直接从CSV文件导入，导入格式如load csv with headers from ＂file:///neoj4/paper.csv＂ as row create (n:Entiry) set n = row ，在导入时需要将要导入的CSV数据保存到import文件夹下；另一种是在程序代码里通过连接MySQL数据源获取要导入的数据，使用正则表达式，对不规则的数据进行规整化处理，使得要抽取的实体属性能够正确匹配，然后将要抽取的实体封装成对象，获取Neo4j数据源，把这些对象通过repository接口的save方法进行保存。在save对象之前可以使用@Relationship注解和对应的set方法为实体建立好需要保存的关系，最后调用repository的save方法保存对象，该接口会去查找要保存的对象是否存在要创建的边的关系，如果有则会将实体和关系一并保存到图数据库中。本系统最终选择了通过Java代码在程序中解析保存对象的方式，由于数据量比较大，每次导入使用了分页机制。使用这种方式导入数据可以保持数据与之后操作处理的一致性，每次在导入数据时，系统都会自动检查当前数据是否已导入，如果已导入则不会重复导入。并且可以缓存保存的对象，这样后面使用时就不需要再次从图数据库中查询，如果建立两个节点的关系时就直接使用已经在内存中缓存的对象，避免了耗时的数据库查询IO操作。
本系统中节点的类型主要有14种类型，分别包括Agency、Agent、Author、Copyright、Fund、Inventor、Journal、JournalName、KeyWords、Paper、Patent、StudyField、Tutor、Unit。关系类型主要有11种，分别为Application、Invention、agentedBy、directedBy、hasKeywords、haveJournal、studiedIn、studyField、supportted、workIn、writtedBy。其中Patent、Paper、Journal、Copyright还有其他属性信息。其中所有的边都是有向边，例如workIn就是一条由Author指向Unit的有向边，表示该作者在某个单位工作。(www.chuimin.cn)
有关2017年软件工程论文专集的文章
Neo4j最主要的特点是基于属性的图，可以支持Java、Python、Ruby、PHP、Scala等编程语言，提供了Cypher、Blueprints、Gremlin查询语言，不过常使用Cypher，支持传统关系型数据库的ACID。目前市面上的图数据库产品有很多，如Neo4j、OrientDB、IBM System G Native Store、Oracle Spatial and Graph等。表2展示了比较流行的图数据库Neo4j与关系型数据库执行时间对比。目前主流的是Neo4j，Neo4j[3]实体关系存储和查询等方面性能均优于其他图数据库，在工业上具有广泛的应用[4]。......
2023-10-21
随着大数据技术不断发展，知识图谱成为当前的研究热点。对网络上公开的论文、专利等数据进行分析，并基于图数据库Neo4j对面向科技文献领域的知识图谱进行设计与实现，为面向特定领域的知识图谱构建提供了思路和方法。关键词：知识图谱，Neo4j，图形数据库资助项目：上海市科委研发平台专项、上海产业研究院创新先锋计划项目。......
2023-10-21
图5分库表结构其次，需要对目标数据库，即中心库的表结构和关系进行设计，用以承接来自不同分库的数据，依据之前梳理的各表之间的业务关系和结构关系，形成中心库中各表之间新的关系。本系统中心库设计如图6所示，本系统设计的中心库表关系如下：center_customer：固定的内容，保留一些自定义字段用于扩展。......
2023-10-21
针对前节结构化数据中数据标准不一致的问题，本文采用构建数据映射归约函数表的方式予以解决，其中Map和Reduce提供的是所需对象数据抽取的计算框架。在图2中可以看到，任意多张源数据表的数据(属性)结构映射到Map表中，而任意多张源数据表的数据内容归集到Reduce表中。......
2023-10-21
在“系统首页”窗口中选择“对象资源管理器”区域，展开“英才大学信息管理”节点，右击打开快捷菜单，如图7－27所示。图7—32确定“查看数据类型映射”在“SQL Server导入和导出向导”窗口中选择“立即运行”选项，单击“下一步”按钮，如图7－33所示。图7—36“商品”表......
2023-11-24
为了解决绝大多数目前频繁使用的档案数据库的快速信息查找与抽取问题，需要对此类数据库进行分析，以便从中发现解决问题的方法。......
2023-10-21
每个数据库管理系统都具备某种形式的数据目录或数据字典。下面以Oracle数据库管理系统为例，说明数据目录是如何设计与实现的。表4.1User_Tables视图中的列显然，User_Tables视图把关系的创建者和存储空间信息记录了下来。简言之，一旦数据库对象创建或修改，系统目录就自动由DBMS修改。......
2023-10-28
相关推荐