基于微服务架构与知识图谱技术构建无人机知识库系统

发布时间：2024-03-25 21:26

　　近年来,随着无人机技术的飞速发展以及逐年上涨的市场需求,无人机在各领域得到广泛应用且发挥着重要作用。随着“互联网+”时代的到来以及大数据技术的迅速发展,互联网中信息数据呈现指数增长趋势,如何在信息爆炸的时代获取所需的有效信息成为亟待解决的问题。本文采用B/S服务器模式,以分布式微服务架构为基础,基于分布式及增量式爬虫技术获取互联网中与无人机等应用领域相关的海量数据,采用自然语言处理、知识图谱、机器学习等算法从海量的非结构化文本数据中提取挖掘隐含及潜在价值知识,并利用Echarts组件及知识图谱等算法进行可视化分析,最后形成定制化的无人机知识库。主要研究内容如下:(1)知识获取及存储技术。系统以Scrapy为爬虫框架,采用分布式结合增量式爬虫技术从互联网中高效地获取无人机行业相关的海量数据;采用Redis高速缓存数据库存储爬取的URL网址,结合My SQL关系型数据库稳定地存储最终得到的结构化数据。(2)系统构建流程及架构设计。利用云计算技术的大数据管理平台,基于分布式服务器与大数据技术搭建系统,采用自底向上为主、自顶向下为辅的方式构建知识库;由于系统爬取任务量的增加及分布式服务器的需求...

【文章页数】：148 页

【学位级别】：硕士

【部分图文】：

图1-12013-2019年全球无人机市场规模的变化情况

厦门理工学院硕士学位论文10图1-12013-2019年全球无人机市场规模的变化情况同时我国的无人机市场规模也在飞速发展。据IDC统计，2014年国内民用无人机产品销售规模仅约15亿元，2015年销售规模约为23.3亿元，同比增长55.33%。据数据显示，预计到2023年，国内民....

图1-22014-2023年国内民用无人机销售规模变化情况

厦门理工学院硕士学位论文10图1-12013-2019年全球无人机市场规模的变化情况同时我国的无人机市场规模也在飞速发展。据IDC统计，2014年国内民用无人机产品销售规模仅约15亿元，2015年销售规模约为23.3亿元，同比增长55.33%。据数据显示，预计到2023年，国内民....

图1-3本文的研究路线图

第一章绪论13与消岐、关系抽娶元事件抽取几个子过程，分别抽取出文本中的实体、实体间关系以及元事件信息，并对含有歧义的实体进行消岐的处理，从而得到一条条有价值的结构化的知识元信息，将知识元加入到知识库中从而完成知识库的构建过程；然后，利用Echarts可视化组件、知识图谱技术对有效....

图2-1知识发现的流程图

辏現ayyad等给出了一个被公认的知识发现的定义[64]：KDD是指从数据库中获取正确、新颖、有潜在应用价值和最终可理解的模式的非平凡的过程。从抽象的层面来讲，KDD是将一个低级别的数据映射成更紧凑、更有用、更易被理解的其他形式的过程[65]。KDD的处理过程主要包括问题定义、数....

本文编号：3938865