当前位置:首页 > 科技  > 软件

yolov部署到iPhone或终端实践全过程

来源: 责编: 时间:2024-05-23 17:07:58 238观看
导读本文经计算机视觉研究院公众号授权转载,转载请联系出处。期待已久的检测经典又来来了一波强袭——yolov5。其实yolov5没有完整的文件,现在最重要的应该是把yolov4弄清楚,在目标检测领域中受益匪浅,可以在某些场景得到较高

本文经计算机视觉研究院公众号授权转载,转载请联系出处。YDr28资讯网——每日最新资讯28at.com

期待已久的检测经典又来来了一波强袭——yolov5。其实yolov5没有完整的文件,现在最重要的应该是把yolov4弄清楚,在目标检测领域中受益匪浅,可以在某些场景得到较高的提升。今天我们还是给大家分享yolov4,下一期我们将实践得将yolov5部署到苹果手机或者在终端通过摄像头实时检测!YDr28资讯网——每日最新资讯28at.com

一、技术回顾

有大量的特征被认为可以提高卷积神经网络(CNN)的精度。需要在大型数据集上对这些特征的组合进行实际测试,并对结果进行理论验证。某些功能只对某些模型进行操作,某些问题只对某些模型进行操作,或只对小规模数据集进行操作;而某些功能(如批处理规范化和剩余连接)则适用于大多数模型、任务和数据集。本文假设这些通用特征包括加权剩余连接(WRC)、跨阶段部分连接(CSP)、跨小批量规范化(CmBN)、自对抗训练(SAT)和Mish激活。本文使用了新功能:WRC、CSP、CmBN、SAT、误激活、马赛克数据增强、CmBN、DropBlock正则化和CIoU丢失,并将其中一些功能结合起来,以达到以下效果:43.5%的AP(65.7%的AP50)用于MS COCO数据集,在Tesla V100上以65 FPS的实时速度。YDr28资讯网——每日最新资讯28at.com

图片YDr28资讯网——每日最新资讯28at.com

二、创新点分析

Mosaic数据增强YDr28资讯网——每日最新资讯28at.com

把四张图拼成一张图来训练,变相的等价于增大了mini-batch。这是从CutMix混合两张图的基础上改进;YDr28资讯网——每日最新资讯28at.com

图片YDr28资讯网——每日最新资讯28at.com

Self-Adversarial TrainingYDr28资讯网——每日最新资讯28at.com

在一张图上,让神经网络反向更新图像,对图像做改变扰动,然后在这个图像上训练。这个方法,是图像风格化的主要方法,让网络反向更新图像来风格化图像。YDr28资讯网——每日最新资讯28at.com

Self-Adversarial Training (SAT) also represents a new data augmentation technique that operates in 2 forward backward stages. In the 1st stage the neural network alters the original image instead of the network weights. In this way the neural network executes an adversarial attack on itself, altering the original image to create the deception that there is no desired object on the image. In the 2nd stage, the neural network is trained to detect an object on this modified image in the normal way.YDr28资讯网——每日最新资讯28at.com

图片YDr28资讯网——每日最新资讯28at.com

Cross mini-batch NormalYDr28资讯网——每日最新资讯28at.com

CmBN表示CBN修改的版本,如下图所示,定义为 Cross mini-Batch Normalization(CMBN)。这只收集单个批次内最小批次之间的统计数据。YDr28资讯网——每日最新资讯28at.com

图片YDr28资讯网——每日最新资讯28at.com

modify SAMYDr28资讯网——每日最新资讯28at.com

图片YDr28资讯网——每日最新资讯28at.com

图片YDr28资讯网——每日最新资讯28at.com

从SAM的逐空间的attention,到逐点的attention修改的PAN,把通道从相加(add)改变为concatYDr28资讯网——每日最新资讯28at.com

 实验 

图片YDr28资讯网——每日最新资讯28at.com

以数据增强方法为例,虽然增加了训练时间,但可以让模型泛化性能和鲁棒性更好。例如下面的常见增强方法:YDr28资讯网——每日最新资讯28at.com

  • 图像扰动,
  • 改变亮度、对比对、饱和度、色调
  • 加噪声
  • 随机缩放
  • 随机裁剪(random crop)
  • 翻转
  • 旋转
  • 随机擦除(random erase)
  • Cutout
  • MixUp
  • CutMix

通过实验看得出,用了很多tricks,简直就是目标检测最强万花筒,下表是对分类网络的实验:YDr28资讯网——每日最新资讯28at.com

CSPResNeXt-50 classifier accuracyYDr28资讯网——每日最新资讯28at.com

图片YDr28资讯网——每日最新资讯28at.com

CSPDarknet-53 classifier accuracyYDr28资讯网——每日最新资讯28at.com

图片YDr28资讯网——每日最新资讯28at.com

在YOLOv4检测网络上,对比了四个loss(GIoU、CIoU、DIoU、MSE),标签平滑,Cosine学习率,遗传算法选超参数,Mosaic数据增强等各种方法。下表是YOLOv4检测网络上的消融实验结果:YDr28资讯网——每日最新资讯28at.com

CSPResNeXt50-PANet-SPP, 512x512YDr28资讯网——每日最新资讯28at.com

图片YDr28资讯网——每日最新资讯28at.com


YDr28资讯网——每日最新资讯28at.com

图片YDr28资讯网——每日最新资讯28at.com

使用不同与训练权重模型用于训练:YDr28资讯网——每日最新资讯28at.com

图片YDr28资讯网——每日最新资讯28at.com

不同的mini-batch size结果:YDr28资讯网——每日最新资讯28at.com

图片YDr28资讯网——每日最新资讯28at.com

最后,是在Maxwell、Pascal、Volta三个不同系列的GPU,在COCO 数据集上的结果对比:YDr28资讯网——每日最新资讯28at.com

图片YDr28资讯网——每日最新资讯28at.com

最劲爆的是,在COCO数据集,与其他框架比较(速度和精度):YDr28资讯网——每日最新资讯28at.com

图片YDr28资讯网——每日最新资讯28at.com

图片YDr28资讯网——每日最新资讯28at.com

图片YDr28资讯网——每日最新资讯28at.com

图片YDr28资讯网——每日最新资讯28at.com


YDr28资讯网——每日最新资讯28at.com

本文链接:http://www.28at.com/showinfo-26-90338-0.htmlyolov部署到iPhone或终端实践全过程

声明:本网页内容旨在传播知识,若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。邮件:2376512515@qq.com

上一篇: 一篇文章带你了解JavaScript的Storage接口

下一篇: 体验超现代的 Vue ?Vue Macros 使用探索

标签:
  • 热门焦点
  • 7月安卓手机性能榜:红魔8S Pro再夺榜首

    7月份的手机市场风平浪静,除了红魔和努比亚带来了两款搭载骁龙8Gen2领先版处理器的新机之外,别的也想不到有什么新品了,这也正常,通常6月7月都是手机厂商修整的时间,进入8月份之
  • Flowable工作流引擎的科普与实践

    一.引言当我们在日常工作和业务中需要进行各种审批流程时,可能会面临一系列技术和业务上的挑战。手动处理这些审批流程可能会导致开发成本的增加以及业务复杂度的上升。在这
  • 多线程开发带来的问题与解决方法

    使用多线程主要会带来以下几个问题:(一)线程安全问题  线程安全问题指的是在某一线程从开始访问到结束访问某一数据期间,该数据被其他的线程所修改,那么对于当前线程而言,该线程
  • JavaScript学习 -AES加密算法

    引言在当今数字化时代,前端应用程序扮演着重要角色,用户的敏感数据经常在前端进行加密和解密操作。然而,这样的操作在网络传输和存储中可能会受到恶意攻击的威胁。为了确保数据
  • 零售大模型“干中学”,攀爬数字化珠峰

    文/侯煜编辑/cc来源/华尔街科技眼对于绝大多数登山爱好者而言,攀爬珠穆朗玛峰可谓终极目标。攀登珠峰的商业路线有两条,一是尼泊尔境内的南坡路线,一是中国境内的北坡路线。相
  • Temu起诉SHEIN,跨境电商战事升级

    来源 | 伯虎财经(bohuFN)作者 | 陈平安日前据外媒报道,拼多多旗下跨境电商平台Temu正对竞争对手SHEIN提起新诉讼,诉状称Shein“利用市场支配力量强迫服装厂商与之签订独家
  • 首发天玑9200+ iQOO Neo8系列发布首销售价2299元起

    2023年5月23日晚,iQOO Neo8系列正式发布。其中,Neo系列首款Pro之作——iQOO Neo8 Pro强悍登场,限时售价3099元起;价位段最强性能手机iQOO Neo8同期上市
  • 联想小新Pad Pro 12.6将要推出,搭载高通骁龙 870 处理器

    联想小新Pad Pro 12.6将于秋季新品会上推出,官方按照惯例直接在发布会前给出了机型的所有参数。联想小新 Pad Pro 12.6 将搭载高通骁龙 870 处理器,重量为 5
  • onebot M24巧系列一体机采用轻薄机身设计,现已在各平台开售

    onebot M24 巧系列一体机目前已在线上线下各平台同步开售。onebot M24 巧系列采用一体化轻薄机身设计,最薄处为 10.15mm,拥有宝石红、午夜蓝、石墨绿、雅致
Top