便携式应急电源
镀铜焊丝的缺陷检测方法、装置、设...
电码的自动识别方法及存储介质
基于强化学习的楼栋摆放方法、装置...
用于观测水下生物的系统及其方法
一种电子设备的空中固件差分升级方...
一种印刷模切张力自动控制系统及其...
低功耗状态监控设备
一种利用RTP扩展头部解决视频帧...
一种高衍射效率相位型空间光调制器...
一种家装板材运输用包装机器人
航空发动机精密管路及其航空发动机...
宽光谱吸收的薄膜太阳能电池及光伏...
一种基于磁通压缩的脉冲磁体装置及...
一种总线访问仲裁装置及方法
一种处理网络抖动的方法及装置
基于光芯片的数据处理方法、装置、...
一种基于小基线条件下的大畸变广角...
一种自动识别设备间网络拓扑结构的...
基于光芯片的数据处理方法、装置、...
企业介绍页面,左右侧内容分别复制到相应容器即可,起始结束位置代码已作标注
专利名称基于golang中间件协程模式下的高并发分布式数据检索方法
申请日2019-11-15
申请号/专利号CN201911117727.7
专利权人珠海市新德汇信息技术有限公司
申请人珠海市新德汇信息技术有限公司
发明人/设计人苏学武;杨刚;赖冠;龚波
公告日2020-02-21
公告号CN110825792A
法律状态审中
专利类型发明
行业分类信息技术

摘要

本发明公开了一种基于golang中间件协程模式下的高并发分布式数据检索方法,包括以下具体步骤:根据所提供的用户交互页面,依照页面的操作向导,上传需要采集的数据信息;对上传的数据信息进行预处理,将Elasticsearch的索引、类型和类型结构进行自动添加;在配置定时器页面为采集数据配置添加一个定时采集任务;系统自动调度通过golang中间件执行数据采集任务,把数据存储到elasticsearch库中;通过elasticsearch的分词、语义分析技术从采集的数据中进行分词及语义分析;利用接口配置页面,把数据集开放给终端的用户使用。本发明引入了golang协程高并发技术,一定程度上加快了采集数据整理数据过程,提高采集效率,同时采用自动去除重复数据的技术,提高数据利用率。
  关于我们  | 帮助中心  |  服务清单  |  发展历程 |  网站地图  |  手机访问

Copyrights 2016-2020  

南京锐阳信息科技有限公司 版权所有

苏ICP备17027521号-1

地址: 南京市秦淮区永智路5号五号楼3层