当前位置:首页 > 科技  > 软件

yolov部署到iPhone或终端实践全过程

来源: 责编: 时间:2024-05-23 17:07:58 276观看
导读本文经计算机视觉研究院公众号授权转载,转载请联系出处。期待已久的检测经典又来来了一波强袭——yolov5。其实yolov5没有完整的文件,现在最重要的应该是把yolov4弄清楚,在目标检测领域中受益匪浅,可以在某些场景得到较高

本文经计算机视觉研究院公众号授权转载,转载请联系出处。nCg28资讯网——每日最新资讯28at.com

期待已久的检测经典又来来了一波强袭——yolov5。其实yolov5没有完整的文件,现在最重要的应该是把yolov4弄清楚,在目标检测领域中受益匪浅,可以在某些场景得到较高的提升。今天我们还是给大家分享yolov4,下一期我们将实践得将yolov5部署到苹果手机或者在终端通过摄像头实时检测!nCg28资讯网——每日最新资讯28at.com

一、技术回顾

有大量的特征被认为可以提高卷积神经网络(CNN)的精度。需要在大型数据集上对这些特征的组合进行实际测试,并对结果进行理论验证。某些功能只对某些模型进行操作,某些问题只对某些模型进行操作,或只对小规模数据集进行操作;而某些功能(如批处理规范化和剩余连接)则适用于大多数模型、任务和数据集。本文假设这些通用特征包括加权剩余连接(WRC)、跨阶段部分连接(CSP)、跨小批量规范化(CmBN)、自对抗训练(SAT)和Mish激活。本文使用了新功能:WRC、CSP、CmBN、SAT、误激活、马赛克数据增强、CmBN、DropBlock正则化和CIoU丢失,并将其中一些功能结合起来,以达到以下效果:43.5%的AP(65.7%的AP50)用于MS COCO数据集,在Tesla V100上以65 FPS的实时速度。nCg28资讯网——每日最新资讯28at.com

图片nCg28资讯网——每日最新资讯28at.com

二、创新点分析

Mosaic数据增强nCg28资讯网——每日最新资讯28at.com

把四张图拼成一张图来训练,变相的等价于增大了mini-batch。这是从CutMix混合两张图的基础上改进;nCg28资讯网——每日最新资讯28at.com

图片nCg28资讯网——每日最新资讯28at.com

Self-Adversarial TrainingnCg28资讯网——每日最新资讯28at.com

在一张图上,让神经网络反向更新图像,对图像做改变扰动,然后在这个图像上训练。这个方法,是图像风格化的主要方法,让网络反向更新图像来风格化图像。nCg28资讯网——每日最新资讯28at.com

Self-Adversarial Training (SAT) also represents a new data augmentation technique that operates in 2 forward backward stages. In the 1st stage the neural network alters the original image instead of the network weights. In this way the neural network executes an adversarial attack on itself, altering the original image to create the deception that there is no desired object on the image. In the 2nd stage, the neural network is trained to detect an object on this modified image in the normal way.nCg28资讯网——每日最新资讯28at.com

图片nCg28资讯网——每日最新资讯28at.com

Cross mini-batch NormalnCg28资讯网——每日最新资讯28at.com

CmBN表示CBN修改的版本,如下图所示,定义为 Cross mini-Batch Normalization(CMBN)。这只收集单个批次内最小批次之间的统计数据。nCg28资讯网——每日最新资讯28at.com

图片nCg28资讯网——每日最新资讯28at.com

modify SAMnCg28资讯网——每日最新资讯28at.com

图片nCg28资讯网——每日最新资讯28at.com

图片nCg28资讯网——每日最新资讯28at.com

从SAM的逐空间的attention,到逐点的attention修改的PAN,把通道从相加(add)改变为concatnCg28资讯网——每日最新资讯28at.com

 实验 

图片nCg28资讯网——每日最新资讯28at.com

以数据增强方法为例,虽然增加了训练时间,但可以让模型泛化性能和鲁棒性更好。例如下面的常见增强方法:nCg28资讯网——每日最新资讯28at.com

  • 图像扰动,
  • 改变亮度、对比对、饱和度、色调
  • 加噪声
  • 随机缩放
  • 随机裁剪(random crop)
  • 翻转
  • 旋转
  • 随机擦除(random erase)
  • Cutout
  • MixUp
  • CutMix

通过实验看得出,用了很多tricks,简直就是目标检测最强万花筒,下表是对分类网络的实验:nCg28资讯网——每日最新资讯28at.com

CSPResNeXt-50 classifier accuracynCg28资讯网——每日最新资讯28at.com

图片nCg28资讯网——每日最新资讯28at.com

CSPDarknet-53 classifier accuracynCg28资讯网——每日最新资讯28at.com

图片nCg28资讯网——每日最新资讯28at.com

在YOLOv4检测网络上,对比了四个loss(GIoU、CIoU、DIoU、MSE),标签平滑,Cosine学习率,遗传算法选超参数,Mosaic数据增强等各种方法。下表是YOLOv4检测网络上的消融实验结果:nCg28资讯网——每日最新资讯28at.com

CSPResNeXt50-PANet-SPP, 512x512nCg28资讯网——每日最新资讯28at.com

图片nCg28资讯网——每日最新资讯28at.com


nCg28资讯网——每日最新资讯28at.com

图片nCg28资讯网——每日最新资讯28at.com

使用不同与训练权重模型用于训练:nCg28资讯网——每日最新资讯28at.com

图片nCg28资讯网——每日最新资讯28at.com

不同的mini-batch size结果:nCg28资讯网——每日最新资讯28at.com

图片nCg28资讯网——每日最新资讯28at.com

最后,是在Maxwell、Pascal、Volta三个不同系列的GPU,在COCO 数据集上的结果对比:nCg28资讯网——每日最新资讯28at.com

图片nCg28资讯网——每日最新资讯28at.com

最劲爆的是,在COCO数据集,与其他框架比较(速度和精度):nCg28资讯网——每日最新资讯28at.com

图片nCg28资讯网——每日最新资讯28at.com

图片nCg28资讯网——每日最新资讯28at.com

图片nCg28资讯网——每日最新资讯28at.com

图片nCg28资讯网——每日最新资讯28at.com


nCg28资讯网——每日最新资讯28at.com

本文链接:http://www.28at.com/showinfo-26-90338-0.htmlyolov部署到iPhone或终端实践全过程

声明:本网页内容旨在传播知识,若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。邮件:2376512515@qq.com

上一篇: 一篇文章带你了解JavaScript的Storage接口

下一篇: 体验超现代的 Vue ?Vue Macros 使用探索

标签:
  • 热门焦点
  • K60至尊版刚预热 一加Ace2 Pro正面硬刚

    Redmi这边刚如火如荼的宣传了K60 Ultra的各种技术和硬件配置,作为竞品的一加也坐不住了。一加中国区总裁李杰发布了两条微博,表示在自家的一加Ace2上早就已经采用了和PixelWo
  • 对标苹果的灵动岛 华为带来实况窗功能

    继苹果的灵动岛之后,华为也在今天正式推出了“实况窗”功能。据今天鸿蒙OS 4.0的现场演示显示,华为的实况窗可以更高效的展现出实时通知,比如锁屏上就能看到外卖、打车、银行
  • 石头智能洗地机A10 Plus体验:双向自清洁治好了我的懒癌

    一、前言和介绍专为家庭请假懒人而生的石头科技在近日又带来了自己的全新旗舰新品,石头智能洗地机A10 Plus。从这个产品名上就不难看出,这次石头推出的并不是常见的扫地机器
  • 6月安卓手机性价比榜:Note 12 Turbo断层式碾压

    6月份有一个618,虽然这是京东周年庆的日子,但别的电商也都不约而同的跟进了,反正促销没坏处,厂商和用户都能满意。618期间一些产品也出现了历史低价,那么各个价位段的产品性价比
  • 三言两语说透设计模式的艺术-单例模式

    写在前面单例模式是一种常用的软件设计模式,它所创建的对象只有一个实例,且该实例易于被外界访问。单例对象由于只有一个实例,所以它可以方便地被系统中的其他对象共享,从而减少
  • 阿里大调整

    来源:产品刘有媒体报道称,近期淘宝天猫集团启动了近年来最大的人力制度改革,涉及员工绩效、层级体系等多个核心事项,目前已形成一个初步的“征求意见版”:1、取消P序列
  • 华为将推出盘古数字人大模型 可帮助用户12小时完成数字人生成

    在今日举行的2023年华为云数字文娱AI创新峰会上,华为云全球Marketing与销售服务总裁石冀琳表示,华为云将在后续推出盘古数字人大模型,可帮助用户12小
  • 三翼鸟智能家居亮相电博会,让用户体验更真实

    2021电博会在青岛国际会展中心开幕中,三翼鸟直接把“家”搬到了现场,成为了展会的一大看点。这也是三翼鸟继9月9日发布了行业首个一站式定制智慧家平台后的
  • 北京:科技教育体验基地开始登记

      北京“科技馆之城”科技教育体验基地登记和认证工作日前启动。首批北京科技教育体验基地拟于2023年全国科普日期间挂牌,后续还将开展常态化登记。  北京科技教育体验基
Top