摘要:针对现有密集行人检测模型的参数量大及精度低的问题,提出了一种基于YOLOv7-Tiny的跨级优化YOLOv7(you only look once version 7-tiny partial minimum cross,YOLOv7-TPMC)模型。首先,提出了结合部分卷积(partial convolution,PConv)与逐点卷积(pointwise convolution,PWConv)的部分点卷积高效层聚合网络(efficient layer aggregation networks-partial and pointwise,ELAN-PP)模块。其次,设计了一种跨级融合特征金字塔结构,通过浅层特征复用提升密集场景下行人检测的准确性。最后,为解决完整交并比(complete intersection over union,CIOU)损失函数在某些条件下定位不准确的问题,引入了最小焦点距交并比(minimum point distance and focaler-intersection over union,MF-IOU)损失函数。在WiderPerson和CrowdHuman数据集上进行实验,YOLOv7-TPMC相比于基准模型,参数量减少了20.5%,帧率(frame per second,FPS)提升了12.2%,mAP@0.5的值在WiderPerson数据集上增加了1.2%,在CrowdHuman数据集上增加了2.0%,能够较好地应用于密集行人检测。
摘要:互联网存储着大量罗氏沼虾的相关信息,借助网络搜索、大语言模型(large language model,LLM)很难高效获取养殖问题的准确解答。基于实体粒度的属性拼接向量检索策略,设计并实现了一个面向罗氏沼虾养殖行业的智能问答系统。该系统主要通过融合知识图谱和大语言模型来实现罗氏沼虾养殖领域的友好问答。首先,借助LLM来完成知识抽取功能,将收集到的原始数据转化为结构化数据,构建一个罗氏沼虾养殖相关的知识图谱,将图谱中实体名称与其属性拼接形成语义丰富的描述文本,进行向量化表示并导入Neo4j。然后,通过LLM搭建一个问题过滤模块,对用户提出的问题先进行语义优化和分类后进行向量化处理,从而提升噪声环境下的问答鲁棒性。最后,通过语义向量检索方式,将检索到的知识传递给LLM进行专业回答,从而实现融合知识图谱和LLM的智能问答系统。实验测试展示了所提方法可以有效提高回答的准确性和鲁棒性。该系统有望助力于提供高效、准确、友好的罗氏沼虾专业信息检索,以期提升养殖决策效率和增加养殖生产效益。