当前位置:首页 > 科技  > 软件

yolov部署到iPhone或终端实践全过程

来源: 责编: 时间:2024-05-23 17:07:58 252观看
导读本文经计算机视觉研究院公众号授权转载,转载请联系出处。期待已久的检测经典又来来了一波强袭——yolov5。其实yolov5没有完整的文件,现在最重要的应该是把yolov4弄清楚,在目标检测领域中受益匪浅,可以在某些场景得到较高

本文经计算机视觉研究院公众号授权转载,转载请联系出处。TI628资讯网——每日最新资讯28at.com

期待已久的检测经典又来来了一波强袭——yolov5。其实yolov5没有完整的文件,现在最重要的应该是把yolov4弄清楚,在目标检测领域中受益匪浅,可以在某些场景得到较高的提升。今天我们还是给大家分享yolov4,下一期我们将实践得将yolov5部署到苹果手机或者在终端通过摄像头实时检测!TI628资讯网——每日最新资讯28at.com

一、技术回顾

有大量的特征被认为可以提高卷积神经网络(CNN)的精度。需要在大型数据集上对这些特征的组合进行实际测试,并对结果进行理论验证。某些功能只对某些模型进行操作,某些问题只对某些模型进行操作,或只对小规模数据集进行操作;而某些功能(如批处理规范化和剩余连接)则适用于大多数模型、任务和数据集。本文假设这些通用特征包括加权剩余连接(WRC)、跨阶段部分连接(CSP)、跨小批量规范化(CmBN)、自对抗训练(SAT)和Mish激活。本文使用了新功能:WRC、CSP、CmBN、SAT、误激活、马赛克数据增强、CmBN、DropBlock正则化和CIoU丢失,并将其中一些功能结合起来,以达到以下效果:43.5%的AP(65.7%的AP50)用于MS COCO数据集,在Tesla V100上以65 FPS的实时速度。TI628资讯网——每日最新资讯28at.com

图片TI628资讯网——每日最新资讯28at.com

二、创新点分析

Mosaic数据增强TI628资讯网——每日最新资讯28at.com

把四张图拼成一张图来训练,变相的等价于增大了mini-batch。这是从CutMix混合两张图的基础上改进;TI628资讯网——每日最新资讯28at.com

图片TI628资讯网——每日最新资讯28at.com

Self-Adversarial TrainingTI628资讯网——每日最新资讯28at.com

在一张图上,让神经网络反向更新图像,对图像做改变扰动,然后在这个图像上训练。这个方法,是图像风格化的主要方法,让网络反向更新图像来风格化图像。TI628资讯网——每日最新资讯28at.com

Self-Adversarial Training (SAT) also represents a new data augmentation technique that operates in 2 forward backward stages. In the 1st stage the neural network alters the original image instead of the network weights. In this way the neural network executes an adversarial attack on itself, altering the original image to create the deception that there is no desired object on the image. In the 2nd stage, the neural network is trained to detect an object on this modified image in the normal way.TI628资讯网——每日最新资讯28at.com

图片TI628资讯网——每日最新资讯28at.com

Cross mini-batch NormalTI628资讯网——每日最新资讯28at.com

CmBN表示CBN修改的版本,如下图所示,定义为 Cross mini-Batch Normalization(CMBN)。这只收集单个批次内最小批次之间的统计数据。TI628资讯网——每日最新资讯28at.com

图片TI628资讯网——每日最新资讯28at.com

modify SAMTI628资讯网——每日最新资讯28at.com

图片TI628资讯网——每日最新资讯28at.com

图片TI628资讯网——每日最新资讯28at.com

从SAM的逐空间的attention,到逐点的attention修改的PAN,把通道从相加(add)改变为concatTI628资讯网——每日最新资讯28at.com

 实验 

图片TI628资讯网——每日最新资讯28at.com

以数据增强方法为例,虽然增加了训练时间,但可以让模型泛化性能和鲁棒性更好。例如下面的常见增强方法:TI628资讯网——每日最新资讯28at.com

  • 图像扰动,
  • 改变亮度、对比对、饱和度、色调
  • 加噪声
  • 随机缩放
  • 随机裁剪(random crop)
  • 翻转
  • 旋转
  • 随机擦除(random erase)
  • Cutout
  • MixUp
  • CutMix

通过实验看得出,用了很多tricks,简直就是目标检测最强万花筒,下表是对分类网络的实验:TI628资讯网——每日最新资讯28at.com

CSPResNeXt-50 classifier accuracyTI628资讯网——每日最新资讯28at.com

图片TI628资讯网——每日最新资讯28at.com

CSPDarknet-53 classifier accuracyTI628资讯网——每日最新资讯28at.com

图片TI628资讯网——每日最新资讯28at.com

在YOLOv4检测网络上,对比了四个loss(GIoU、CIoU、DIoU、MSE),标签平滑,Cosine学习率,遗传算法选超参数,Mosaic数据增强等各种方法。下表是YOLOv4检测网络上的消融实验结果:TI628资讯网——每日最新资讯28at.com

CSPResNeXt50-PANet-SPP, 512x512TI628资讯网——每日最新资讯28at.com

图片TI628资讯网——每日最新资讯28at.com


TI628资讯网——每日最新资讯28at.com

图片TI628资讯网——每日最新资讯28at.com

使用不同与训练权重模型用于训练:TI628资讯网——每日最新资讯28at.com

图片TI628资讯网——每日最新资讯28at.com

不同的mini-batch size结果:TI628资讯网——每日最新资讯28at.com

图片TI628资讯网——每日最新资讯28at.com

最后,是在Maxwell、Pascal、Volta三个不同系列的GPU,在COCO 数据集上的结果对比:TI628资讯网——每日最新资讯28at.com

图片TI628资讯网——每日最新资讯28at.com

最劲爆的是,在COCO数据集,与其他框架比较(速度和精度):TI628资讯网——每日最新资讯28at.com

图片TI628资讯网——每日最新资讯28at.com

图片TI628资讯网——每日最新资讯28at.com

图片TI628资讯网——每日最新资讯28at.com

图片TI628资讯网——每日最新资讯28at.com


TI628资讯网——每日最新资讯28at.com

本文链接:http://www.28at.com/showinfo-26-90338-0.htmlyolov部署到iPhone或终端实践全过程

声明:本网页内容旨在传播知识,若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。邮件:2376512515@qq.com

上一篇: 一篇文章带你了解JavaScript的Storage接口

下一篇: 体验超现代的 Vue ?Vue Macros 使用探索

标签:
  • 热门焦点
  • 服务存储设计模式:Cache-Aside模式

    Cache-Aside模式一种常用的缓存方式,通常是把数据从主存储加载到KV缓存中,加速后续的访问。在存在重复度的场景,Cache-Aside可以提升服务性能,降低底层存储的压力,缺点是缓存和底
  • 这款新兴工具平台,让你的电脑效率翻倍

    随着信息技术的发展,我们获取信息的渠道越来越多,但是处理信息的效率却成为一个瓶颈。于是各种工具应运而生,都在争相解决我们的工作效率问题。今天我要给大家介绍一款效率
  • 共享单车的故事讲到哪了?

    来源丨海克财经与共享充电宝相差不多,共享单车已很久没有被国内热点新闻关照到了。除了一再涨价和用户直呼用不起了。近日多家媒体再发报道称,成都、天津、郑州等地多个共享单
  • 中国家电海外掘金正当时|出海专题

    作者|吴南南编辑|胡展嘉运营|陈佳慧出品|零态LT(ID:LingTai_LT)2023年,出海市场战况空前,中国创业者在海外纷纷摩拳擦掌,以期能够把中国的商业模式、创业理念、战略打法输出海外,他们依
  • 认真聊聊东方甄选:如何告别低垂的果实

    来源:山核桃作者:财经无忌爆火一年后,俞敏洪和他的东方甄选依旧是颇受外界关心的“网红”。7月5日至9日,为期5天的东方甄选“甘肃行”首次在自有App内直播,
  • 小米公益基金会捐赠2500万元驰援北京、河北暴雨救灾

    8月2日消息,今日小米科技创始人雷军在其微博上发布消息称,小米公益基金会宣布捐赠2500万元驰援北京、河北暴雨救灾。携手抗灾,京冀安康!以下为公告原文
  • 造车两年股价跌六成,小米的估值逻辑变了吗?

    如果从小米官宣造车后的首个交易日起持有小米集团的股票,那么截至2023年上半年最后一个交易日,投资者将浮亏59.16%,同区间的恒生科技指数跌幅为52.78%
  • 到手价3099元起!iQOO Neo8 Pro今日首销:安卓性能最强旗舰

    5月23日,iQOO如期举行了新品发布会,全新的iQOO Neo8系列也正式与大家见面,包含iQOO Neo8和iQOO Neo8 Pro两个版本,其中标准版搭载高通骁龙8+,而Pro版更
  • 世界人工智能大会国际日开幕式活动在世博展览馆开启

    30日上午,世界人工智能大会国际日开幕式活动在世博展览馆开启,聚集国际城市代表、重量级院士专家、国际创新企业代表,共同打造人工智能交流平台。上海市副市
Top