Sec Hotspot 首页  排行榜  收藏本站  技术博客  RSS
统计信息
已收录文章数量：17822 篇
已收录公众号数量：91 个
本站文章为爬虫采集，如有侵权请告知
已收录微信公众号
阿里云先知 网安寻路人 网信中国 区块链大本营 白说区块链 区块链投资家 区块链官微 区块链铅笔Blockchain HACK学习呀 二道情报贩子 合天智汇 小白帽学习之路 小米安全中心 弥天安全实验室 SAINTSEC SecPulse安全脉搏 TideSec安全团队 360安全卫士 游侠安全网 计算机与网络安全 安全祖师爷 安全学习那些事 腾讯安全联合实验室 黑客技术与网络安全 安全圈 腾讯御见威胁情报中心 Python开发者 Python之禅 编程派 Python那些事 Python程序员 安全威胁情报 吾爱破解论坛 行长叠报 安在 i春秋 嘶吼专业版 E安全 MottoIN 网信防务 网安杂谈 数说安全 互联网安全内参 漏洞战争 安全分析与研究 邑安全 ChaMd5安全团队 天融信阿尔法实验室 安全牛 SecWiki 安全学术圈 信安之路 漏洞感知 浅黑科技 Secquan圈子社区 奇安信集团 奇安信 CERT 国舜股份 雷神众测 盘古实验室 美团安全应急响应中心 瓜子安全应急响应中心 顺丰安全应急响应中心 蚂蚁金服安全响应中心 携程安全应急响应中心 滴滴安全应急响应中心 字节跳动安全中心 百度安全应急响应中心 腾讯安全应急响应中心 网易安全应急响应中心 OPPO安全应急响应中心 京东安全应急响应中心 Bypass CNNVD安全动态 安恒应急响应中心 天融信每日安全简报 奇安信威胁情报中心 看雪学院 黑白之道 水滴安全实验室 安全客 木星安全实验室 云鼎实验室 绿盟科技安全预警 白帽汇 深信服千里目安全实验室 腾讯玄武实验室 长亭安全课堂 FreeBuf 绿盟科技 nmask
知识图谱系列:Task 2 基于医疗知识图谱的问答系统操作介绍
本文来自公众号：网安杂谈   2021.01.12 23:28:14



感谢DataWhale分享，学习资源地址：


https://github.com/datawhalechina/team-learningnlp/tree/master/KnowledgeGraph_Basic



1.任务描述
今天的任务分两步，首先要搭建一个知识图谱（详见task03），然后启动问答测试（task04 task05详细讲），构建一个简单的基于 知识图谱 的对话系统。
今天主要是能跑通这两步，能让自己对整个任务有一个整体的认识。
任务的源码在这里：https://github.com/zhihao-chen/QASystemOnMedicalGraph
源码组成部分包括：
data:存放数据
img:存放readme里的图片
model：存放训练好的tfidf模型和意图识别模型
build_graph.py:构建图，详见task03
entity_extractor.py:抽取问句中的实体和识别意图，详见task04
search_answer.py:根据不同的实体和意图构造cypher查询语句,查询图数据库并返回答案，详见task05

2.搭建知识图谱环境

2.1.数据集
数据源：39健康网。包括15项信息，其中7类实体，约3.7万实体，21万实体关系。数据结构如图所示：

知识图谱实体类型

2.2.搭建过程
因为这次任务目标是先跑通，所以仅简略写下步骤。
要将数据导入Neo4j 图数据库，首先进入 build_graph.py 类中，在类MedicalGraph 中加入 本地Neo4j图数据库的账号和密码；
class MedicalGraph:
def __init__(self):
...
self.graph = Graph("http://localhost:7474", username="neo4j", password="自己的")

...
运行：
python build_graph.py

就开始进行数据导入了。由于数据量大，需要的时间很长，要1-2个小时。

终于好了，看下结果，我们有了3w多节点，20多万个关系。


3.启动问答测试

运行命令：
python kbqa_test.py

注意:其中一个库名称为ahocorasick,这个直接pip安装找不到，安装时要改为pyahocorasick. 但是程序里面用的时候，还是要改回a hocorasick.

还有遇到其他的包就碰到哪个装哪个啦。。。
最终的效果是这样
后续具体分析各个部分源码