基于大数据的网络日志分析技术 被引量：16

1

作者 应毅 任凯 刘亚军 《计算机科学》 CSCD 北大核心 2018年第B11期353-355,共3页

传统的日志分析技术在处理海量数据时存在计算瓶颈。针对该问题,研究了基于大数据技术的日志分析方案:由多台计算机完成日志文件的存储、分析、挖掘工作,建立了一个基于Hadoop开源框架的并行网络日志分析引擎,在MapReduce模型下重新实现... 传统的日志分析技术在处理海量数据时存在计算瓶颈。针对该问题,研究了基于大数据技术的日志分析方案:由多台计算机完成日志文件的存储、分析、挖掘工作,建立了一个基于Hadoop开源框架的并行网络日志分析引擎,在MapReduce模型下重新实现了IP统计算法和异常检测算法。实验证明,在数据密集型计算中使用大数据技术可以明显提高算法的执行效率和增加系统的可扩展性。 展开更多

关键词 大数据 HADOOP MAPREDUCE 日志分析 异常检测

下载PDF 职称材料

基于聚类和二分图匹配的物流派件调度方法 被引量：11

2

作者 应毅 唐立 +1 位作者 刘定一 刘亚军 《江苏大学学报（自然科学版）》 EI CAS 北大核心 2020年第3期274-280,共7页

针对物流末端配送服务中派件调度时区域划分不合理、工作分配差异大的问题,提出“先分区,后排班”2阶段派件调度算法.首先利用GIS技术、Web技术和移动开发技术,构建了针对“最后1 km”配送的智能物流信息系统;在此系统内,基于k-medoids... 针对物流末端配送服务中派件调度时区域划分不合理、工作分配差异大的问题,提出“先分区,后排班”2阶段派件调度算法.首先利用GIS技术、Web技术和移动开发技术,构建了针对“最后1 km”配送的智能物流信息系统;在此系统内,基于k-medoids聚类算法,引入工作量均衡指标,依据实际路径距离,实现了“点面聚合,区域聚类”配送区域划分方法;应用二分图最大权匹配KM算法,实现了派件调度分配算法.在顺丰速运某网点的配送活动中进行试验,结果表明:2阶段派件调度算法的区域划分更加聚集,快递人员间的工作分配更加均衡,有效地提升物流网点的服务效率. 展开更多

关键词 派件调度 智能物流信息系统 聚类算法 二分图匹配 工作量均衡

下载PDF 职称材料

利用Docker容器技术构建大数据实验室 被引量：26

3

作者 应毅 刘亚军 俞琰 《实验室研究与探索》 CAS 北大核心 2018年第2期264-268,共5页

目前大数据人才培养在国内外高校开始普及,但大数据实验室的几种常用建设方法都存在着诸多问题。针对大数据实验环境的特点,提出一种利用Docker容器技术在单台普通计算机上构建Hadoop集群的方法,并详述了Hadoop镜像制作、Docker环境部... 目前大数据人才培养在国内外高校开始普及,但大数据实验室的几种常用建设方法都存在着诸多问题。针对大数据实验环境的特点,提出一种利用Docker容器技术在单台普通计算机上构建Hadoop集群的方法,并详述了Hadoop镜像制作、Docker环境部署、容器运行、Hadoop集群测试、Eclipse开发环境配置、镜像迁移等实验室建设细节。实践表明,新方法无需额外购置设备,节省实验室资金,同时未增加机房维护工作量,提高机房可复用性,新方法实验教学效果良好,为高校的大数据实验室建设提供参考。 展开更多

关键词 大数据实验室 Docker容器技术 HADOOP集群 镜像

下载PDF 职称材料

基于GIS技术和加权kNN算法的实时揽件调度方法 被引量：7

4

作者 应毅 任凯 刘亚军 《计算机工程与应用》 CSCD 北大核心 2020年第21期248-252,共5页

在物流末端的配送服务中,实时揽件调度研究尚处于空白。基于GIS技术、Web技术和移动开发技术,构建了针对“最后一公里”配送的智能物流信息系统。在此系统框架内,改进加权kNN分类算法实现快递人员的实时揽件调度。通过在菜鸟驿站某网点... 在物流末端的配送服务中,实时揽件调度研究尚处于空白。基于GIS技术、Web技术和移动开发技术,构建了针对“最后一公里”配送的智能物流信息系统。在此系统框架内,改进加权kNN分类算法实现快递人员的实时揽件调度。通过在菜鸟驿站某网点配送活动中的应用,表明智能物流信息系统能有效提升物流网点的服务质量,实时揽件调度方法也对解决实际问题效果显著。 展开更多

关键词 智能物流信息系统 实时揽件调度 ARCGIS 加权kNN算法

下载PDF 职称材料

基于联盟区块链的进口农产品溯源系统研究 被引量：10

5

作者 应毅 王志瑞 +1 位作者 刘亚军 任凯 《江苏农业科学》 北大核心 2022年第14期207-213,共7页

自2020年年中以来,国内多次在进口农产品及其外包装检测出新冠病毒。进口农产品的安全问题成为常态化疫情防控背景下农产品流通领域所面临的挑战之一。农产品溯源系统是监督产品质量、管控涉疫风险的重要手段,但进口农产品产业链存在上... 自2020年年中以来,国内多次在进口农产品及其外包装检测出新冠病毒。进口农产品的安全问题成为常态化疫情防控背景下农产品流通领域所面临的挑战之一。农产品溯源系统是监督产品质量、管控涉疫风险的重要手段,但进口农产品产业链存在上下游之间的信任问题,传统依赖集中式存储的信息化追溯方案并不适合进口农产品的管理。分析已有溯源信息化技术的特征与不足,结合进口农产品供应链的实际需求,提出构建基于联盟区块链的进口农产品溯源系统的整体方案,包括系统架构模型和组网结构、溯源码、智能合约等实现细节,并在Hyperledger Fabric开源框架上实现了该系统,试验证明,系统具有良好的可用性和性能,能够承担实际的商业应用。 展开更多

关键词 进口农产品 溯源系统 联盟区块链 Hyperledger Fabric

下载PDF 职称材料

基于容器云的分布式深度学习实验平台构建 被引量：12

6

作者 应毅 刘亚军 任凯 《实验技术与管理》 CAS 北大核心 2022年第3期147-152,共6页

该文针对神经网络模型训练过慢、集群部署缺乏弹性问题,采用CPU+GPU混合架构,利用Docker和Kubernetes系统搭建底层容器云基础,以TensorFlow作为上层机器学习框架,构建了分布式深度学习实验平台,并详述了GPU镜像制作、计算节点GPU支持、K... 该文针对神经网络模型训练过慢、集群部署缺乏弹性问题,采用CPU+GPU混合架构,利用Docker和Kubernetes系统搭建底层容器云基础,以TensorFlow作为上层机器学习框架,构建了分布式深度学习实验平台,并详述了GPU镜像制作、计算节点GPU支持、Kubernetes集群搭建、Tensor Flow集群部署等实验平台建设细节。两个图片识别实验表明,该实验平台具有良好的性能优势和可扩展性,达到了应用部署自动化、硬件资源弹性伸缩、提升模型训练速度的目标,为人工智能实验平台建设提供了有益的思路,并起到推广作用。 展开更多

关键词 深度学习 分布式训练 TensorFlow Kubernetes DOCKER GPU计算

下载PDF 职称材料

基于易感-感染-恢复(SIR)模型的2019冠状病毒病早期传播分析及政府防控措施研究 被引量：3

7

作者 应毅 黄慧 +1 位作者 任凯 刘定一 《科技促进发展》 CSCD 2020年第10期1213-1220,共8页

2019新型冠状病毒肺炎(COVID-19)疫情的暴发给中国乃至全球公共卫生带来了重大挑战,研究传染病动力学模型有助于更好地优化疫情防控政策、评估干预措施效果。在已知病毒传播规律的基础上,考虑城市间的有效距离因素,引入干预项参数,建立... 2019新型冠状病毒肺炎(COVID-19)疫情的暴发给中国乃至全球公共卫生带来了重大挑战,研究传染病动力学模型有助于更好地优化疫情防控政策、评估干预措施效果。在已知病毒传播规律的基础上,考虑城市间的有效距离因素,引入干预项参数,建立了可用于COVID-19疫情评估的SIR传播动力学模型;根据疫情的早期数据,分析了感染人数、死亡人数等指标性数值的发展趋势,评估了政府干预手段对趋势变化产生的影响。通过计算和理论分析表明,防控隔离和集中收治等措施有效抑制了病毒的蔓延态势。修正的SIR模型在COVID-19传播趋势分析上是可靠的,可以为制订未来的疫情干预决策提供较好的理论支持。 展开更多

关键词 2019冠状病毒病 SIR传播模型 政府防控措施 疫情分析

原文传递

基于OAuth2.0的认证授权方案设计与优化 被引量：7

8

作者 吴德 应毅 毛道鹤 《软件》 2018年第10期10-13,共4页

OAuth 2.0是由互联网工程任务组于2012年10月发表在RFC-6749规范文档中定义的认证授权协议,是一种基于HTTP重定向实现的开放授权框架。它允许第三方应用访问该用户在某一网站上存储的特定资源,而无需将用户名和密码提供给第三方应用,大... OAuth 2.0是由互联网工程任务组于2012年10月发表在RFC-6749规范文档中定义的认证授权协议,是一种基于HTTP重定向实现的开放授权框架。它允许第三方应用访问该用户在某一网站上存储的特定资源,而无需将用户名和密码提供给第三方应用,大幅提升用户的WEB应用体验。为深入研究OAuth2.0协议的工作原理,使用Nginx服务器、MySQL和Redis数据库设计了一个开放授权应用框架,同时指出OAuth2.0协议应用在授权流程中的不足之处,并给出基于WebSocket监听机制的优化解决方案,为认证授权应用的开发提供参考。 展开更多

关键词 RFC-6479 OAUTH 2.0 认证 授权

下载PDF 职称材料

基于PageRank的热点发现混合算法研究 被引量：3

9

作者 应毅 黄慧 刘定一 《计算机技术与发展》 2019年第9期81-85,共5页

社交网络下的热点话题发现技术是当前舆情分析与预测的基础性研究问题。传统的基于聚类、分类的文本分析方法不适用于网络舆情挖掘,经典的PageRank算法仅考虑网页间的链接结构,为了更加准确和全面地多角度综合评价舆情热点,文中综合考... 社交网络下的热点话题发现技术是当前舆情分析与预测的基础性研究问题。传统的基于聚类、分类的文本分析方法不适用于网络舆情挖掘,经典的PageRank算法仅考虑网页间的链接结构,为了更加准确和全面地多角度综合评价舆情热点,文中综合考虑用户社会地位、博文相似度指数和热度指数三个热点发现的重要指标,提出了基于PageRank和相似度计算的热点发现混合算法(HDH-PRSC)。其中基于PageRank算法与微博用户粉丝间的链接结构图获取用户的社会地位值;结合TF-IDF算法与余弦相似性算法计算博文的相似度指数;利用转发数、评论数和点赞数获得博文的热度指数。博文的最终热度评分由用户社会地位值、博文相似度指数和热度指数三项分值相加获得。依托新浪微博数据的实验表明,HDH-PRSC算法能够更为合理地发现热点话题。 展开更多

关键词 PAGERANK 用户社会地位 相似度指数 热度指数

下载PDF 职称材料

社交网络的舆情热点发现模型研究 被引量：4

10

作者 应毅 刘定一 任凯 《图书情报导刊》 2018年第9期68-71,77,共5页

随着社交网络的大规模发展,传统的基于文本分析的热点话题发现技术面临严峻的挑战。构建了针对社交媒体的舆情热点发现分层架构模型,详细介绍了模型中的关键技术,并将时间因素和链接分析技术引入舆情热点发现算法,阐述了新算法的主要思... 随着社交网络的大规模发展,传统的基于文本分析的热点话题发现技术面临严峻的挑战。构建了针对社交媒体的舆情热点发现分层架构模型,详细介绍了模型中的关键技术,并将时间因素和链接分析技术引入舆情热点发现算法,阐述了新算法的主要思想和大致流程。在舆情热点发现中引入网络化方法,开拓了舆情分析的新思路。 展开更多

关键词 社交网络 舆情热点发现模型 链接分析 时间序列

下载PDF 职称材料

审核评估背景下的本科教育教学改革:目标、障碍与路径 被引量：5

11

作者 尹毅 李磊 《扬州大学学报（高教研究版）》 2019年第5期67-71,共5页

随着教育部从2014年开始启动的为期五年的本科教学工作审核评估收尾,围绕新一轮审核评估如何进一步落实教学工作中心地位、推动高等教育教学改革、全面提升人才培养质量,已经成为高校日常工作的首要共识与重要基础。同时,由于高校办学... 随着教育部从2014年开始启动的为期五年的本科教学工作审核评估收尾,围绕新一轮审核评估如何进一步落实教学工作中心地位、推动高等教育教学改革、全面提升人才培养质量,已经成为高校日常工作的首要共识与重要基础。同时,由于高校办学分类定位模糊、高校教育管理体制错位、高校质量保障体系失衡,高校本科教学工作及教学改革依然滞后于审核评估的思路与要求。基于审核评估的本科教学改革,应紧紧围绕审核要素和评估体系,在观念上坚持教学改革的主体性与目标性,在制度上坚持教学改革的多样性和发展性,在策略上坚持教学改革的科学性与开放性。 展开更多

关键词 本科教学评估 本科教学质量 本科教学改革

下载PDF 职称材料

基于Cygwin和虚拟机技术的大数据实验室建设研究 被引量：3

12

作者 应毅 任凯 刘亚军 《实验室科学》 2019年第4期174-178,181,共6页

目前大数据人才培养在国内外高校开始普及,但大数据实验室的几种常用建设方法都存在着诸多问题。新的解决方案提出如下:建立基于Cygwin的单节点Hadoop,建立基于虚拟机技术的Hadoop集群,两种互补的Hadoop环境用于完成安装、配置、管理等... 目前大数据人才培养在国内外高校开始普及,但大数据实验室的几种常用建设方法都存在着诸多问题。新的解决方案提出如下:建立基于Cygwin的单节点Hadoop,建立基于虚拟机技术的Hadoop集群,两种互补的Hadoop环境用于完成安装、配置、管理等入门型实验和程序开发、并行计算等进阶型实验。该方案无需额外购置设备,节省实验室资金,同时未增加机房维护工作量,提高机房可复用性,而且实验教学效果良好,为地方高校的大数据实验室建设提供了有益的思路并起到推广作用。 展开更多

关键词 大数据实验室 虚拟机技术 LINUX操作系统 HADOOP

下载PDF 职称材料

地名地址检索技术在智能物流系统中的应用研究 被引量：4

13

作者 应毅 黄慧 刘定一 《物流工程与管理》 2018年第10期55-57,68,共4页

以智能物流系统为研究背景,利用Lucene框架,设计并实现了地名地址全文检索机制,在解决关系数据库模糊查询效率低下问题的同时,为基于GIS的物流配送最短路径计算提供技术支撑,实现末端物流配送服务整体工作效率的提高。

关键词 智能物流 GIS pgRouting 地名地址检索 LUCENE

下载PDF 职称材料

应用型本科新工科专业人工智能模块课程建设 被引量：3

14

作者 应毅 任凯 李晓明 《智能计算机与应用》 2021年第10期131-133,138,共4页

针对应用型人才培养定位和新工科专业特点,分析人工智能教育教学现状及存在的问题,秉承"知识够用、技术实用、面向应用"的宗旨,提出在新工科专业设置人工智能模块课程的教学改革方法,给出4门模块课程的教学体系构建,并详述每... 针对应用型人才培养定位和新工科专业特点,分析人工智能教育教学现状及存在的问题,秉承"知识够用、技术实用、面向应用"的宗旨,提出在新工科专业设置人工智能模块课程的教学改革方法,给出4门模块课程的教学体系构建,并详述每门课程的教学组织、教学内容和课程思政的设计思路。 展开更多

关键词 人工智能模块课程 新工科 课程建设 课程思政

下载PDF 职称材料

时间敏感的微博热点爬取与发现模型研究

15

作者 应毅 李晓明 栾晶 《淮海工学院学报（自然科学版）》 CAS 2019年第2期25-28,共4页

社交媒体的发展使传统的舆情热点发现技术面临严峻挑战.结合时间因素,构建了基于微博页面的数据爬取与热点发现模型;通过时间因子修正热度指数,使针对舆情热点重要性的排序更具时效性.依托新浪微博数据的实验表明,时间敏感的微博热点发... 社交媒体的发展使传统的舆情热点发现技术面临严峻挑战.结合时间因素,构建了基于微博页面的数据爬取与热点发现模型;通过时间因子修正热度指数,使针对舆情热点重要性的排序更具时效性.依托新浪微博数据的实验表明,时间敏感的微博热点发现算法能更为合理地发现热点话题. 展开更多

关键词 社交媒体 微博 网络爬虫 热点发现 时间敏感

下载PDF 职称材料

基于大数据的物流“最后一公里”问题分析

16

作者 刘定一 应毅 李晓明 《现代信息科技》 2020年第4期168-169,共2页

随着国内外电子商务贸易额的逐年增长,快递业务为基础的物流业也得到了快速发展,然而电商物流“最后一公里”的配送成本、投递的成功率、顾客的满意度也成为当前亟待解决的问题。运用大数据技术对物流末端的配送模式和有限区域物流的对... 随着国内外电子商务贸易额的逐年增长,快递业务为基础的物流业也得到了快速发展,然而电商物流“最后一公里”的配送成本、投递的成功率、顾客的满意度也成为当前亟待解决的问题。运用大数据技术对物流末端的配送模式和有限区域物流的对象进行了深入分析,使得终端配送的成效得到提高。物流末端配送使用大数据技术有效提升了投递的效率。 展开更多

关键词 大数据 电子商务 物流业 快递 最后一公里

下载PDF 职称材料

基于区块链的医疗临床数据防篡改机制及篡改攻击分析 被引量：5

17

作者 李晓明 黄慧 +1 位作者 应毅 曾岳 《高技术通讯》 CAS 2021年第2期141-147,共7页

医疗临床数据的可靠共享机制对提升智慧医疗水平具有重要意义,防篡改机制可为医疗临床数据交互与共享提供保障。本文首先给出了基于区块链的医疗临床数据防篡改机制,然后设计了两种场景来分析医疗临床数据篡改攻击的实施途径,最后对篡... 医疗临床数据的可靠共享机制对提升智慧医疗水平具有重要意义,防篡改机制可为医疗临床数据交互与共享提供保障。本文首先给出了基于区块链的医疗临床数据防篡改机制,然后设计了两种场景来分析医疗临床数据篡改攻击的实施途径,最后对篡改攻击进行建模并基于马尔科夫链进行了分析。本文研究内容对提升医疗临床数据共享安全性以及智慧医疗水平均具有较高的应用价值。 展开更多

关键词 区块链 智慧医疗 防篡改机制 篡改攻击 马尔科夫链

下载PDF 职称材料

基于Java的微服务技术在构建企业智能大数据平台下的应用与开发研究 被引量：9

18

作者 李晓明 应毅 曾岳 《现代电子技术》 北大核心 2019年第15期165-169,共5页

为解决企业大数据平台适配灵活性较差、功能化参数分配不协调等问题,设计基于Java微服务技术的新型企业智能大数据平台。从服务接口凭证调取、账号管理、说明文档推送三个角度完成基于Java微服务技术的大数据平台需求分析调研。在此基础... 为解决企业大数据平台适配灵活性较差、功能化参数分配不协调等问题,设计基于Java微服务技术的新型企业智能大数据平台。从服务接口凭证调取、账号管理、说明文档推送三个角度完成基于Java微服务技术的大数据平台需求分析调研。在此基础上,利用完整的大数据框架协调智能平台接口与服务模块间的制约关系,完成新型企业智能大数据平台的搭建,实现基于Java的微服务技术在构建企业智能大数据平台下的应用与开发研究。对比实验结果表明,与传统企业大数据平台相比,应用基于Java微服务技术的新型企业智能大数据平台后,功能化参数分配协调性得到大幅提升,适配灵活性最大值可达到90%。 展开更多

关键词 Java微服务 企业大数据平台 智能平台搭建 接口凭证 说明文档 平台接口

下载PDF 职称材料

基于图像置信度修正的智能小车导航目标快速跟踪算法 被引量：5

19

作者 李晓明 黄慧 +1 位作者 应毅 肖芳雄 《国外电子测量技术》 北大核心 2022年第2期162-168,共7页

面向智能小车图像目标跟踪快速响应需求,提出一种基于先验置信度修正最小输出误差平方和(MOSSE)滤波器的目标快速跟踪算法。首先利用目标多特征算子构建先验描述向量,根据归一化相关响应、跟踪目标框的质心距离和直方图相似性构建置信... 面向智能小车图像目标跟踪快速响应需求,提出一种基于先验置信度修正最小输出误差平方和(MOSSE)滤波器的目标快速跟踪算法。首先利用目标多特征算子构建先验描述向量,根据归一化相关响应、跟踪目标框的质心距离和直方图相似性构建置信度模型。在MOSEE滤波器预测和更新过程中实时计算置信度,并根据前序相关响应值对跟踪包围框质心进行修正。对公共数据集和小车采集图像进行跟踪效果测试。实验表明,该算法提升了跟踪精度,同时单帧跟踪时间50~120 ms,满足智能小车导航需求。 展开更多

关键词 智能小车 目标跟踪 置信度 相关滤波器

原文传递

基于多尺度对抗学习的人体姿态估计 被引量：1

20

作者 李晓明 黄慧 +3 位作者 应毅 徐建华 曾岳 刘洋 《实验室研究与探索》 CAS 北大核心 2020年第11期35-39,共5页

为解决现有基于对抗学习的人体姿态估计算法对人体尺度变化敏感问题,提出了一种基于多尺度对抗学习的人体姿态估计模型。该模型通过堆栈沙漏网络分别构建对抗网络中的生成器和判别器,再分别在生成器和判别器中引入多尺度监督损失函数,... 为解决现有基于对抗学习的人体姿态估计算法对人体尺度变化敏感问题,提出了一种基于多尺度对抗学习的人体姿态估计模型。该模型通过堆栈沙漏网络分别构建对抗网络中的生成器和判别器,再分别在生成器和判别器中引入多尺度监督损失函数,从而提高整个网络检测不同尺度人体部件的性能。为证明方法的有效性,采用了LSP、LSPE、FLIC和MPII 4个数据集进行人体姿态估计模型的训练与测试。结果表明,引入多尺度信息的人体姿态估计模型可提高0.7%的检测正确率;与现有的部分人体姿态估计算法相比,多尺度对抗学习算法具有更高的估计正确率。 展开更多

关键词 人体姿态估计 对抗学习 多尺度监督 沙漏网络

下载PDF 职称材料