Deep SORT和YOLO v4

您所在的位置:网站首页 yolov4全称 Deep SORT和YOLO v4

Deep SORT和YOLO v4

2022-03-24 01:21| 来源: 网络整理| 查看: 265

导读

本文来自github,很实用的一个应用。

git仓库地址:https://github.com/LeonLok/Multi-Camera-Live-Object-Tracking

这个存储库包含了我的目标检测和跟踪项目。所有这些都可以托管在云服务器上。

由于有ImageZMQ,你还可以使用自己的异步处理IP相机。

Deep SORT 和 YOLO v4

Check out我的Deep SORT repository:https://github.com/LeonLok/Deep-SORT-YOLOv4,查看我使用的跟踪算法,其中包括Tensorflow 2.0、异步视频处理和低置信度跟踪过滤。

交通流量计数

这个项目是目标计数应用的一个扩展。

功能

使用DETRAC数据集生成的244,617幅图像进行训练。可以在这里找到我创建的转换代码。

我把这篇论文:https://ieeexplore.ieee.org/document/8909903作为数据准备和训练的指南。

每个跟踪id只计数一次。

通过查看被跟踪目标的路径与计数线的交叉点对目标进行计数。

因此,那些跟丢了但用相同的ID重新跟踪的仍然会被计数。

使用低置信度滤波进行跟踪,来自上面同样的论文。

提供更低的假阳性率。

跟踪目标显示平均检测置信度。

跟踪的类别由最常见的检测类别确定。

显示检测结果是可选的(但是隐藏了平均检测置信度)。

可以使用多个IP摄像头。

方向计数可以配置为基于角度。

每一小时的间隔记录计数。

总的计数

基于类别的计数

记录每个计数目标的交叉详细信息。

交叉时间

交叉点坐标

交叉角度

可以托管在云服务器上。

注意,由于DETRAC不包含任何摩托车,它们是唯一被忽略的车辆。此外,DETRAC数据集只包含中国的交通图像,因此由于缺乏训练数据,它很难正确地检测出其他国家的某些车辆。例如,它经常会将掀背车误归为suv,或者由于不同的颜色方案而无法识别出租车。

目标计数

这个项目最初打算成为一个应用程序,用于使用我自己的智能手机计算当前在多个房间的人数,服务器被远程托管。下面展示了对人和汽车的检测、跟踪和计数。

功能

对当前视场中的物体进行计数

跟踪可选

支持多个IP相机

每间隔一个小时记录一次当前的计数

当前的总数

当前每个类别的计数

可以托管在云服务器上

使用我自己的智能手机作为IP相机

训练你自己的机动车跟踪模型

我使用DETRAC训练带有v3标注的数据集训练了YOLOv4和Deep SORT模型。我提供了将DETRAC训练图像和v3标注转换为正确格式的脚本,用于训练YOLOv4模型和Deep SORT跟踪模型。

Deep SORT 转换参数

DETRAC图像转换为Market 1501训练格式。

遮挡阈值 - 忽略遮挡比率过高的车辆序列。

截断阈值 - 忽略截断率过高的车辆序列。

出现的次数 - 车辆序列太短(即没有足够的图像)被丢弃后,考虑遮挡和截断比率。

YOLO 转换参数

DETRAC图像被转换成Darknet YOLO训练格式。

遮挡阈值 - 忽略遮挡比率过高的车辆序列。

截断阈值 - 忽略截断率过高的车辆序列。

两种模型都在DETRAC训练集上进行了训练和评估,但由于缺少v3标注,测试集还没有评估,我也没有MATLAB用于Deep SORT的评估软件。到目前为止,对于我的用例来说,它已经足够好了。

使用的硬件

Nvidia GTX 1070 GPU

i7-8700K CPU

为了让大家了解我们的期望,我可以运行两个流量计数流,每个流大约10fps(正如你在流量计数gif中看到的)。当然,这在很大程度上取决于流分辨率以及用于检测和跟踪的帧数。

YOLO v3 vs. YOLO v4

当我第一次开始目标计数项目时,我使用YOLOv3,跟踪帧率大约是10FPS,很难一次运行多个流。使用YOLOv4可以更容易地运行具有更高分辨率的两个流,并提供更好的检测精度。

依赖

Tensorflow-GPU 1.14

Keras 2.3.1

opencv-python 4.2.0

ImageZMQ

numpy 1.18.2

Flask 1.1.1

pillow

这个项目是在Python 3.6上构建和测试的。

责任编辑:lq

原文标题:多摄像头实时目标跟踪和计数,使用YOLOv4,Deep SORT和Flask

文章出处:【微信号:vision263com,微信公众号:机器视觉智能检测】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

扫一扫,分享给好友

复制链接分享 评论

发布评论请先 登录

相关推荐

一种全新易用的基于Word-Word关系的NER统一模型 最近的研究都在考虑如何通过一个大一统模型一次性解决这三种问题。目前的最佳的方法基本都是基于span-.... 的头像 深度学习自然语言处理 发表于 03-23 13:37 • 66次 阅读 带你从头构建文本分类器 文本分类是 NLP 中最常见的任务之一, 它可用于广泛的应用或者开发成程序,例如将用户反馈文本标记为.... 的头像 深度学习自然语言处理 发表于 03-22 10:49 • 151次 阅读 施耐德携手伙伴联合发布研究报告 Airtel部署Oracle融合云应用程序 近日,全球能源管理和自动化领域的数字化转型专家施耐德电气携手CNBC Catalyst,联合发布了名.... 的头像 lhl545545 发表于 03-21 17:09 • 295次 阅读 三星Galaxy S22 Ultra成影像旗舰新标杆 现如今,智能手机无论在拍照还是视频方面,均达到了前所未有的高度,成为了普通消费者、摄影爱好者以及专业.... 发表于 03-21 12:23 • 547次 阅读 空中客车和THC签署合作协议 高通获得生态系统合作伙伴广泛支持 空中客车公司和直升机公司(THC)签署了一项协议,以继续扩大直升机活动并在沙特阿拉伯王国引入城市空中.... 发表于 03-18 16:40 • 1220次 阅读 广和通智能摄像助力防溺解决方案 Falcon4-CLHS相机专为工业成像设计   当有人员靠近偏远河域危险地区,河道摄像头实时采集人体影像,并及时发出喊话,播报警戒。这就是已应用.... 的头像 牵手一起梦 发表于 03-18 15:50 • 241次 阅读 广和通高智能模组赋能车载摄像头 霍尼韦尔JetWave卫星通信系统改装成功   广和通作为全球领先的无线通信模组供应商,聚焦车载模组及智能模组快车道,以高性能、高算力、定制化的.... 的头像 牵手一起梦 发表于 03-18 15:44 • 258次 阅读 CMOS图像传感器的元视觉:超越人眼 借助CIS技术,我们可以轻松地处理、复制和储存海量图像信息。因此,移动设备必须具备处理大量数据的能力.... 的头像 传感器技术 发表于 03-18 10:14 • 167次 阅读 Elasticsearch 8作为开源软件正式发布 Elasticsearch 是一个基于 Lucene 库的搜索引擎。它提供了一个分布式、支持多租户的.... 的头像 Linux爱好者 发表于 03-17 14:12 • 201次 阅读 监控摄像头的种类 监控摄像头的种类:监控摄像头一般有几种?有很多种,的效果,主要看他的芯片和线数。一般买个二百多的索尼芯片的效果就可以了。监... 发表于 03-17 12:04 • 1665次 阅读 三星超视觉夜拍系统开启计算摄影新时代 随着三星Galaxy S22系列在国内的正式发售,国内用户在高端旗舰市场又有了新的选择,三星Gala.... 发表于 03-17 11:13 • 605次 阅读 日清纺微电子RN5T5611多通道电源IC_骁龙8移动平台支持三星旗舰产品组合 日清纺微电子有限公司正在研发的RN5T5611 系列是一款用于车载传感摄像头的多通道电源IC,它将是.... 的头像 电子魔法师 发表于 03-16 10:35 • 338次 阅读 关于3D点云针对失真的稳健性的系统性研究 3D 点云广泛应用于 3D 识别技术中。一些特别的应用领域往往对 3D 点云识别的安全性有更高的要求.... 的头像 机器视觉智能检测 发表于 03-15 11:34 • 173次 阅读 华为P50 Pocket可全方位保护个人隐私安全 移动通信、大数据,给我们的生活带来诸多便利,用手机看资讯、刷视频时,APP会推送我们感兴趣的内容,网.... 的头像 火花 发表于 03-14 10:08 • 247次 阅读 极目智能推全国化L2级智能驾驶方案 海康威视获国际权威隐私安全认证   2021 年 12月 24 日,领先的智能驾驶方案提供商武汉极目智能技术有限公司(以下简称「极目.... 的头像 牵手一起梦 发表于 03-11 11:21 • 324次 阅读 模拟环境光传感芯片概述及特性 监控摄像头成像的核心是其内部的感光元件。因此光线的变化会影响到摄像头的成像质量。在安装监控摄像头的时.... 的头像 御风传感 发表于 03-10 12:43 • 257次 阅读 RK3288 android是怎样通过 I2C 说明获取摄像头的 ID 号呢 RK3288android是怎样通过 I2C 说明获取摄像头的 ID 号呢?有哪些操作步骤? ... 发表于 03-10 08:06 • 620次 阅读 RK3288插入身份证模块时摄像头会卡住且无法识别怎么去解决 为什么RK3288插入身份证模块时摄像头会卡住且无法识别呢?如何去解决这个问题呢? ... 发表于 03-10 06:38 • 290次 阅读 双击Power键会弹出Camer应用该怎样去解决呢 为什么双击Power键会弹出Camer应用呢? 双击Power键会弹出Camer应用该怎样去解决呢? ... 发表于 03-09 06:54 • 232次 阅读 怎样去解决RK3328 Android10.0的应用强制横屏显示的问题呢 怎样去解决RK3328  Android10.0的应用强制横屏显示的问题呢? ... 发表于 03-09 06:46 • 92次 阅读 安富利为人工智能的演进带来更多可能 阳春三月,万物复苏,安富利AI活动强势来袭!这个春天,让“AI”陪伴你。 的头像 安富利 发表于 03-07 12:58 • 674次 阅读 易灵思16nm FPGA助力汽车市场发展 天玑智慧监管解决方案亮相推进会 针对新能源汽车中的自动驾驶、智能座舱和电气化应用,易灵思推出40nm Trion系列中T13F169.... 发表于 03-07 11:05 • 837次 阅读 USB摄像头在RK3399上有哪些应用呢 mjpg-streamer是什么? USB摄像头在RK3399上有哪些应用呢?             ... 发表于 03-07 07:57 • 1408次 阅读 Firefly RK3399开源板的两个MIPI摄像头接口座是如何连接的 Firefly RK3399开源板的两个MIPI摄像头接口座是如何连接的?... 发表于 03-07 07:55 • 214次 阅读 如何去实现RK3399系统默认只支持两路摄像头的设计呢 如何去实现RK3399系统默认只支持两路摄像头的设计呢?其代码该怎样去实现呢?... 发表于 03-07 07:46 • 400次 阅读 请问一下RK3399在Android10下怎样去配置摄像头OV13850呢 请问一下RK3399在Android10下怎样去配置摄像头OV13850呢?... 发表于 03-07 06:52 • 206次 阅读 基于RK3399pro开发C++实现工业落地的步骤有哪些呢 基于RK3399pro开发C++实现工业落地的步骤有哪些呢? ... 发表于 03-07 06:05 • 158次 阅读 一清创新无人车出征助力科技抗疫 春节过后,深圳疫情进入新一轮攻坚战。深圳疫情管控措施不断加码,封闭封控区域逐渐增多,居民的生活如何保.... 的头像 一清创新UDI 发表于 03-03 13:41 • 453次 阅读 基于WT2000H0-24SS录音芯片的音频监控系统 目前,音频监控已广泛应用在公共设施当中,一套完整的音频监控系统包括声音采集部分、语音降噪处理部分、网.... 发表于 03-03 11:12 • 26次 阅读 基于WT2000H0-24SS录音芯片的音频监控系统 中兴通讯新一代云AI摄像头Pro满足用户多种需求 中电国睿集团领导一行莅临国睿科技调研 在巴塞罗那举办的2022年世界移动通信大会期间,中兴通讯新一代云AI家庭看护摄像头Pro荣获GLOM.... 发表于 03-03 10:34 • 1396次 阅读 UVLED点光源在摄像头AA制程中的运用 摄像头AA制程用胶,UVLED点光源助力固化 发表于 03-01 10:29 • 58次 阅读 从沃飞长空科研实力,看专业级无人机的未来前景 自莱特兄弟于上世纪初成功试飞首架载人飞机开始,人类就开始了对天空作业的探索。历经百年发展,人类的航天.... 发表于 02-25 09:24 • 250次 阅读 摄像头发展史,iphone6案例 该套教材分十余篇,介绍了摄像头的起源发展、基础知识、关键器件及专项技术等,以平实的语言系统介绍手机摄.... 发表于 02-22 14:47 • 27次 阅读 全志A40i核心板实现高清模拟摄像头720P方案 飞凌嵌入式搭载全志A40i处理器的FETA40i-C核心板,可支持4路模拟摄像头PAL(720x57.... 的头像 柠檬籽儿 发表于 02-18 16:19 • 285次 阅读 全志A40i核心板实现高清模拟摄像头720P方案 电瓶车阻车系统防止电瓶车上楼引发发生火灾 日前,一小区业主将电动车推进电梯,电梯内立即发出“禁止电动车入内”的语音警示,同时,电梯门也一直敞开.... 的头像 梯云物联 发表于 02-18 14:54 • 208次 阅读 图像分类法实现智能车找路功能   避撞功能是智能车的最基本保护能力,Jetbot 使用深度学习的图像分类技术来模拟人眼习惯实现这个.... 的头像 NVIDIA英伟达企业解决方案 发表于 02-17 12:00 • 382次 阅读 一文详细了解车载摄像头 当前车辆上摄像头的使用是很普遍的,例如普通的倒车影像、自动驾驶、DMS等,下面就来对其进行梳理一下。 的头像 硬件攻城狮 发表于 02-16 18:02 • 880次 阅读 一文详细了解车载摄像头 了解如何使用 Spring 执行表单验证 原标题:Spring认证中国教育管理中心- 了解如何使用 Spring 执行表单验证 (Spring.... 发表于 02-10 15:26 • 33次 阅读 小区安装人脸识别门禁系统安全性怎样 目前,很多小区因为安防意识还是比较薄弱的,特别是在大门或单元门口的安全管理上,很多的门禁还是采用磁卡.... 发表于 02-08 17:03 • 532次 阅读 威尔电器4G智能执法记录仪的详细介绍 这款执法记录仪(型号:DSJ-DCWV8A1)(以下简称V8)是威尔电器旗下品牌达城威创新研发的一款.... 发表于 02-08 16:34 • 106次 阅读 Ouster如何帮助塑造自动化农业的未来 当前,全世界都面临劳动力短缺的压力,粮食短缺和价格上涨越来越难以预料,最终将影响到每个人。Blue .... 的头像 OUSTER 发表于 02-08 15:45 • 633次 阅读 为什么要开发智能门锁应用程序 为什么要开发智能门锁应用程序? (球阀专用锁)客户,朋友,你知道吗? 下面由工厂员工为您解释,希望对.... 发表于 02-02 19:47 • 46次 阅读 森思泰克STS2-1安防监控雷达的特点及应用 近年来,随着航运经济的快速发展,航运干线上的大型运输船舶、危化品等船舶日趋增加,对传统水上安全监管能.... 的头像 森思泰克 发表于 01-27 19:49 • 2134次 阅读 飞凌FETA40i-C核心板支持720P高清模拟摄像头解决方案 飞凌嵌入式搭载全志A40i处理器的FETA40i-C核心板,可支持4路模拟摄像头PAL(720x57.... 发表于 01-27 16:23 • 90次 阅读 飞凌FETA40i-C核心板支持720P高清模拟摄像头解决方案 Tier IV与佳能合作开发L4级别自动驾驶技术 电子发烧友网报道(文/梁浩斌)日本两大相机巨头似乎都看上了汽车这块香饽饽,前脚索尼在CES上宣布造车.... 的头像 电子发烧友网 发表于 01-26 09:13 • 559次 阅读 OV5647高清手机摄像头原理图方案 OV5647高清手机摄像头原理图方案 发表于 01-24 16:51 • 201次 阅读 探维科技荣膺“2021新经济之王年度硬核企业” 2021年,世界的经济与科技形势风云变幻,造车新势力销量屡创新高,自动驾驶迎来商业化与前装量产两大挑.... 的头像 Tanway探维科技 发表于 01-24 16:00 • 659次 阅读 广和通5G/4G智能模组赋能车载摄像头 中国智能汽车发展迅猛,C-V2X技术正逐步走向成熟。随着ADAS设备逐渐成熟化,自动驾驶智能化,装载.... 的头像 广和通FIBOCOM 发表于 01-21 15:55 • 779次 阅读 广和通5G/4G智能模组在车载摄像头的应用 中国智能汽车发展迅猛,C-V2X技术正逐步走向成熟。随着ADAS设备逐渐成熟化,自动驾驶智能化,装载.... 发表于 01-19 10:27 • 193次 阅读 新产品包:配备Oryx摄像头+Myricom卡,可靠的10GigE性能,经济实惠 快速移动的检测线、运动分析和容积捕获这类高带宽 10GigE 应用会给主机 PC 带来巨大压力,导致.... 发表于 01-17 14:54 • 844次 阅读 新产品包:配备Oryx摄像头+Myricom卡,可靠的10GigE性能,经济实惠 谷歌母公司将分拆出新量子公司 名为“沙箱” 近日,有海外的媒体报道称,谷歌母公司Alphabet将把量子科技团队Sandbox分拆出来,但是随着.... 的头像 lhl545545 发表于 01-15 09:23 • 651次 阅读 智能监控摄像头智能阻车系统保障楼宇居民安全 我们的产品是电梯AI智能监控摄像头,此款摄像头分为两种,一种是基础版本,其功能是摄像机抓拍、电瓶车阻.... 发表于 01-14 13:54 • 52次 阅读 豪威集团推出业界首款用于汽车摄像头的低功耗、小尺寸300万像素SoC 2022年国际消费电子展上发布的全新OX03D SoC使汽车厂商能够从100万像素升级到300万像素.... 发表于 01-14 11:00 • 507次 阅读 豪威集团推出业界首款用于汽车摄像头的低功耗、小尺寸300万像素SoC iPhone 14 Pro将配备4800万像素镜头 近日,根据有海外媒体的报道称,今年即将发布的iPhone 14 Pro 机型将增加 4800 万像素.... 的头像 lhl545545 发表于 01-14 10:45 • 869次 阅读 苹果将在韩国推行App Store替代支付系统 近日,根据外媒的消息报道称,苹果将允许 App Store 的开发者在韩国提供替代性支付系统,计划对.... 的头像 lhl545545 发表于 01-12 10:50 • 552次 阅读 一文了解3D智能家居虚拟体验平台 3D智能家居虚拟体验平台继续前往下一站的导览-“家居安全(Home Security)”,针对三大热.... 的头像 SiliconLabs 发表于 01-11 16:22 • 582次 阅读 一加 10 Pro正式发布 售价4699元起 1月11日,一加举办新品发布会,随后正式发布了一加10 Pro。一加10 Pro这次的空间散热系统相.... 的头像 lhl545545 发表于 01-11 16:05 • 635次 阅读 MediaTek将携手Discovery开启探索跃至不凡影像合作计划 从万事万物都可拍摄,到赋予感情的动态录影,在记录之余,如何才能将影片变成一部非凡的作品? 的头像 联发科技 发表于 01-11 11:28 • 540次 阅读 终于卷到800万像素的车载摄像头 汽车不比手机,车载摄像头很多时候追求的不是成像分辨率,而是为了实现更好的辅助驾驶功能。现状就是不少手.... 的头像 E4Life 发表于 01-11 09:49 • 3195次 阅读 终于卷到800万像素的车载摄像头 三星Fold 4 Exynos版因新芯片频率未达预期或改用骁龙 近日,有媒体爆料消息称三星公司新一代折叠屏手机Fold 4系列旗舰或将搭载两种不同的芯片版本,理由是.... 的头像 lhl545545 发表于 01-10 14:40 • 773次 阅读


【本文地址】


今日新闻


推荐新闻


CopyRight 2018-2019 办公设备维修网 版权所有 豫ICP备15022753号-3