范文健康探索娱乐情感热点
投稿投诉
热点动态
科技财经
情感日志
励志美文
娱乐时尚
游戏搞笑
探索旅游
历史星座
健康养生
美丽育儿
范文作文
教案论文

深度学习一张城管事件图片背后的算法原理

  1. 背景
  在基于深度神经网络的诸多算法中,目标检测算法是计算机视觉和数字图像处理领域的一个重要方向,其广泛应用于智能视频监控、自动驾驶、工业检测等领域,这些应用领域都将目标检测算法作为基础算法,通过该算法自动识别图像内容,将识别的内容信息作为后续算法的前提。
  在政通的城管视频智能分析项目中,也是采用目标检测算法对城管图片实现自动识别并上报功能,减少人力成本的消耗,同时依托公司独有的城管数据集和项目落地经验,不断提升事件的识别精度。
  图1.视频智能分析系统
  2、识别总体流程
  如图2,是视频智能分析平台上报的事件图片,该图片上报的是无照经营游商事件。
  图2.城管事件图片
  那么视频城管算法是如何工作,最后生成该事件图片呢?
  如图3所示,首先视频帧经过目标检测算法生成带有目标框的图片,该图片包含人、车、游商等目标的位置和类别信息;然后将这些目标信息经过逻辑判断,生成无照经营游商事件图片。
  图3.视频智能分析主要流程
  从图3中可以知道,目标检测算法是整个视频分析的关键算法,是生成事件图像的基础。
  接下来,我们就来揭开这个关键算法的神秘面纱。
  3、目标检测算法
  3.1、前言 目前基于深度神经网络的目标检测算法主要有三类方向:一类是两阶段的目标检测算法(Tow-stage detector),该类算法准确率相对较高,但是运行速度较慢,不符合我们城管识别的速度需求;  一类是基于transformer的目标检测算法,该类算法对小目标的识别精度不够,同时运行速度也较慢,因此也不符合我们的速度要求;  最后是单阶段的目标检测算法(One-stage detector),该类算法牺牲少量准确率,换来识别速度的大幅提升,符合我们的需求,因此我们采用的是该类算法,具体来说是采用yolov5目标检测算法。
  图4.目标检测算法发展历程
  3.2、yolov5目标检测算法
  下图5为yolov5目标检测算法,该算法主要分为输入、主干网络、衔接网络、预测输出四个部分,每个部分都有独特的作用,下面将分别进行分析。
  图5.yolov5目标检测算法
  3.2.1、输入
  yolov5算法输入的一张原始图片,然后采用mosaic方法进行数据增强,mosaic方法的主要思想是将四张图片进行随机裁剪,再拼接到一张图上作为训练数据。这样做的好处是丰富了图片的背景,增加算法的稳定性,并且四张图片拼接在一起变相地提高了batch_size。
  图6.mosaic方法效果图
  3.2.2、主干网络
  输入图片经过mosaic方法后就进入主干网络部分,该部分主要作用是对图像进行特征提取,同时主干网络尽量选用参数量较小的结构,以提高运行的速度并保证识别准确率。
  图7.主干网络提取特征效果图
  3.2.3、衔接网络
  特征在经过主干网络后,会继续在衔接网络中运行,衔接网络采用FPN+PAN的结构,其主要作用是增加特征的丰富性,增强特征的语义信息和定位信息,增加的这些信息有助于提高算法预测的准确率。
  图8.FPN+PAN结构
  3.2.4、预测输出
  特征经过衔接网络后,通过一个卷积,最后进行输出,输出有三个分支,大小维度分别是bs*3*80*80*(numclass+5)、 bs*3*40*40*(numclass+5) 、bs*3*20*20*(numclass+5) ,然后对这些输出的数值提取出目标框,主要是将输出的数值进行反编码计算,映射到原图的目标框,最后将计算到的目标框采用nms方法进行过滤,过滤后的最终结果就是城管的目标检测结果。
  图9.预测输出
  4、目标检测结果
  如图10所示,该图就是原视频帧经过目标检测算法后输出的结果,输出的结果中包含每个目标的位置和置信度,经过目标检测算法处理的图片最后通过逻辑判断即可自动识别出图片是否包含事件。下图经过目标检测算法后,识别出有一个目标是游商,后续经过逻辑判断,该目标就是无照经营游商事件,因此最终输出的是图2的事件图片。
  图10.目标检测结果效果图
  5、总结
  本文通过一张带有事件框的城管图片,引出我们视频智能分析项目背后的算法原理。该原理主要采用yolov5目标检测算法,既保证的事件识别的准确率,又保证算法的运行速度,该算法是工业部署中经常采用的算法。
  本文只是简单的介绍了yolov5目标检测算法的各个组成部分以及作用,更详细的实现细节需要进一步的学习,同时本文提到的目标检测四个部分是计算机视觉研究的重要领域,每个部分都有许多论文,因此本文只是对这些部分做一次概括,让初学者有个基本概念。
  作者:调参侠
  来源:微信公众号:政通技术团队
  出处:https://mp.weixin.qq.com/s/MAWqXzX5QFl7SBWgAm_Cwg

三星电视与中国市场八字不合编辑于斌出品潮起网于见专栏三星电视无疑是全球电视市场的宠儿,已经连续16年达成销量冠军。根据最新的数据显示,今年上半年全球电视销量排名中,其中三星电视在销量和销售额上,双双取得桂冠54岁的周慧敏是逆生长了吗?穿白裙清纯如少女,状态不输当红小花周慧敏作为大家众所周知的女明星,她的颜值,她的身材还有气质也都是非常独特的,而且身为女明星的她也十分擅长保养,如今虽然都已经到了中年阶段,但是却仍然活得如同少女一般,这一次穿着一条网约车的下半场国家队入局,疯狂补贴,价格够便宜就行滴滴渐渐消失的网约车市场中,T3出行一喂顺风车以及花小猪打车等各大平台,争相恐后证明自己是这个市场无可替代的存在,能够替代滴滴成为新的行业大佬。于是,他们不惜放出0元打车等疯狂补贴从饭圈到游戏圈,原来都是一个套路文毛丽娜很多圈都表示看不上娱乐圈种种,但很多圈都用上了饭圈那套,感觉真香。上线两年,开放世界手游原神开启3。0版本。版本更新当天,相关词条冲上微博热搜,米哈游与内鬼的战争也再度成为单车充电宝等相继调价,共享为啥不便宜了?共享单车共享汽车共享充电宝共享办公共享雨伞共享按摩椅共享经济的发展,便利了居民生活,也提高了社会资源的配置效率。不过,最近消费者发现,各大共享经济品牌相继调价,不少共享消费正在变贵牛头肉为啥比猪头肉还便宜?牛头肉差在哪了?丨欧界欧界报道相信很多人的童年美食之一就是猪头肉了,即使是生活水平较高的现在,猪头肉仍然是很多家庭常吃的美食。无论是香卤还是凉拌,猪头肉总能给人带来满足感,鲜香四溢劲道十足。与猪头肉相比最近流行的外套别瞎穿,不到160懂得3要3不要,矮个子才有救初秋来临,女孩们大部分都会给自己安排上一些时髦的外套,这个季节流行的外套还是蛮多的,比如风衣西装针织衫等外套都是潮人们衣橱之中的必备款,女孩们选择的时候肯定就会开始纠结了。但大家今那些神仙句子,建议收藏(午梦千山,窗阴一箭)1。敬我们碰巧搭上不知道会开往何处的火车。2。不求而得的,往往求而不得。3。你的声音是星星下面开阔的水,由丰富的雨水积聚而成,流向低地。4。太阳落山了,我知道它正赶着照亮另一个远方分享破茧成蝶,蜕变新生蝴蝶,人们只看到她美丽的一面,但却不知道她为了破茧成蝶所付出的艰辛和努力,就像那些以蝴蝶珠宝作为自己图腾的美丽女人,她们的优雅,总是停留在那只翩然而至的蝴蝶身旁。从古至今,无论东方iQOOZ6首发核心科技出炉,iQOOZ5优势全无含泪以白菜价离场iQOOZ6以光为灵感,在设计上就像光一样,带来了速度感和能量感。相机模组采用灵感光环设计,相机镜头创新采用玻璃精密蚀刻工艺,指尖即可感知。智能脊和加速曲线使机身具有舒适和易于握持精华液推荐让养分更好地渗透到肌底,去改善面部的暗沉等问题精华液推荐让养分更好地渗透到肌底,去改善面部的暗沉等问题!SKII红瓶抗老精华推荐理由抗衰老紧致收缩毛孔修复,质地和使用感乳白色的乳液,质地黏稠度中等,有一定保湿度,干皮和油皮皆可
朝称与俄站同一战壕,美高官访中东,中俄合作,朝鲜战争模式再现1月25日,美国和德国宣布向乌克兰提供主战坦克后,欧洲波兰西班牙挪威等国随之跟进,媒体称一个进攻性的坦克联盟出现了。这无疑对俄罗斯是十分不利的。但情况随之出现重大变化,1月27日,小市值股12只,净利润翻倍股11只,机构也密集关注,低估值滞涨股名单请收藏!A股这些行业估值显著降低兔年大吉一批低估值滞涨股来了,这类股票有望在后续行情中实现估值回归。2022年以来,A股经历了一波向下调整今年开年重拾涨势,与2021年相比主要股指仍处于相对低位。估值方面来看,与中工漫评丨该为人脸信息识别划红线了绘画刘琪文字李靖打开手机,上海市民陈宽发现,每天需要进行人脸识别的App太多。从手机银行App到购物软件,从化妆类App到游戏防沉迷一天下来,脸要被扫十几次。(据法治日报1月28日今天大年初七,新的一年祝工作顺利,前兔似锦!就业是头等民生大事稳经济大盘的重要支撑。稳就业事关广大家庭生计,为了稳定和扩大就业,过去这一年出台了哪些政策?中国政府网(IDzhengfu)国务院客户端带你看。新的一年,祝工作顺为什么明明白天很累,晚上我们还是睡不着?现代的生活几乎让人喘不过气来,对于80后90后来说,生活的节奏跟自己的童年时期真是天壤之别。以前我们可以跟小伙伴玩玩游戏,看看书,跟大人逛逛街。现在到了我们成家立业的时候,却发现承新春走基层百岁老人过生日,各路亲戚云祝福大年初三,又是林家院里给百岁老人林洪泉做寿的日子。与往年在饭店里的喧闹场景不同,这一次儿孙们在家里为老人办了小范围的温馨寿宴,各路亲戚则纷纷送上云祝福。林洪泉是济南市长清区崮云湖街差点不能回家过年!怀孕6个月阳了,她被抢救9天9夜1月18日下午,明媚的阳光斜照着小区,温暖着每一个回家过年的人儿。小丽坐在房间的落地窗前,掀开盖布,摆上琴谱,十指开始在钢琴上跳跃。图源网络悠扬的琴声中,一旁的父亲边拍边跟远在外省永兴材料研究报告特钢新能源双轮驱动,攻守兼备成长可期(报告出品方作者华福证券,王保庆)1锂电新能源特钢新材料双轮驱动1。1不锈钢线棒材龙头,切入新能源快车道永兴特种材料科技股份有限公司前身湖州久立特钢有限公司成立于2000年7月,2关注汽车海运价格暴涨,比亚迪下单2艘7000车双燃料汽车运输船文懂车帝原创刘艺伟懂车帝原创行业随着新能源汽车市场快速发展,中国车企正密集出海,运输需求旺盛叠加海上船舶运力有限,导致运价暴涨,由此比亚迪开始组建海上船队。近日,中国船舶集团旗下广又是曼德拉效应?满江红上映后,精忠报国还是尽忠报国引争论电影满江红上映之后掀起了一阵浪潮,激发了大家心中的记忆,诗词满江红也是被拿出来反复背诵,怒发冲冠,凭栏处肯定就要有人接下一句,也带火了岳飞相关的旅游景区。满江红的主人公是岳飞,讲述满江红张艺谋儿子出演引关注,但星二代里我只服王骁满江红的票房这波彻底杀疯了,截止目前影片狂揽30。6亿票房,预测票房也达到了46。5亿,照着这个势头发展,该片是有机会冲进影史榜前五的。而票房井喷的同时,影片也在豆瓣上斩获了7。5