导读
本文来自github,很实用的一个应用。
git仓库地址:https://github.com/LeonLok/Multi-Camera-Live-Object-Tracking
这个存储库包含了我的目标检测和跟踪项目。所有这些都可以托管在云服务器上。
由于有ImageZMQ,你还可以使用自己的异步处理IP相机。
Deep SORT 和 YOLO v4
Check out我的Deep SORT repository:https://github.com/LeonLok/Deep-SORT-YOLOv4,查看我使用的跟踪算法,其中包括Tensorflow 2.0、异步视频处理和低置信度跟踪过滤。
交通流量计数
这个项目是目标计数应用的一个扩展。
功能
使用DETRAC数据集生成的244,617幅图像进行训练。可以在这里找到我创建的转换代码。
我把这篇论文:https://ieeexplore.ieee.org/document/8909903作为数据准备和训练的指南。
每个跟踪id只计数一次。
通过查看被跟踪目标的路径与计数线的交叉点对目标进行计数。
因此,那些跟丢了但用相同的ID重新跟踪的仍然会被计数。
使用低置信度滤波进行跟踪,来自上面同样的论文。
提供更低的假阳性率。
跟踪目标显示平均检测置信度。
跟踪的类别由最常见的检测类别确定。
显示检测结果是可选的(但是隐藏了平均检测置信度)。
可以使用多个IP摄像头。
方向计数可以配置为基于角度。
每一小时的间隔记录计数。
总的计数
基于类别的计数
记录每个计数目标的交叉详细信息。
交叉时间
交叉点坐标
交叉角度
可以托管在云服务器上。
注意,由于DETRAC不包含任何摩托车,它们是唯一被忽略的车辆。此外,DETRAC数据集只包含中国的交通图像,因此由于缺乏训练数据,它很难正确地检测出其他国家的某些车辆。例如,它经常会将掀背车误归为suv,或者由于不同的颜色方案而无法识别出租车。
目标计数
这个项目最初打算成为一个应用程序,用于使用我自己的智能手机计算当前在多个房间的人数,服务器被远程托管。下面展示了对人和汽车的检测、跟踪和计数。
功能
对当前视场中的物体进行计数
跟踪可选
支持多个IP相机
每间隔一个小时记录一次当前的计数
当前的总数
当前每个类别的计数
可以托管在云服务器上
使用我自己的智能手机作为IP相机
训练你自己的机动车跟踪模型
我使用DETRAC训练带有v3标注的数据集训练了YOLOv4和Deep SORT模型。我提供了将DETRAC训练图像和v3标注转换为正确格式的脚本,用于训练YOLOv4模型和Deep SORT跟踪模型。
Deep SORT 转换参数
DETRAC图像转换为Market 1501训练格式。
遮挡阈值 - 忽略遮挡比率过高的车辆序列。
截断阈值 - 忽略截断率过高的车辆序列。
出现的次数 - 车辆序列太短(即没有足够的图像)被丢弃后,考虑遮挡和截断比率。
YOLO 转换参数
DETRAC图像被转换成Darknet YOLO训练格式。
遮挡阈值 - 忽略遮挡比率过高的车辆序列。
截断阈值 - 忽略截断率过高的车辆序列。
两种模型都在DETRAC训练集上进行了训练和评估,但由于缺少v3标注,测试集还没有评估,我也没有MATLAB用于Deep SORT的评估软件。到目前为止,对于我的用例来说,它已经足够好了。
使用的硬件
Nvidia GTX 1070 GPU
i7-8700K CPU
为了让大家了解我们的期望,我可以运行两个流量计数流,每个流大约10fps(正如你在流量计数gif中看到的)。当然,这在很大程度上取决于流分辨率以及用于检测和跟踪的帧数。
YOLO v3 vs. YOLO v4
当我第一次开始目标计数项目时,我使用YOLOv3,跟踪帧率大约是10FPS,很难一次运行多个流。使用YOLOv4可以更容易地运行具有更高分辨率的两个流,并提供更好的检测精度。
依赖
Tensorflow-GPU 1.14
Keras 2.3.1
opencv-python 4.2.0
ImageZMQ
numpy 1.18.2
Flask 1.1.1
pillow
这个项目是在Python 3.6上构建和测试的。
责任编辑:lq
原文标题:多摄像头实时目标跟踪和计数,使用YOLOv4,Deep SORT和Flask
文章出处:【微信号:vision263com,微信公众号:机器视觉智能检测】欢迎添加关注!文章转载请注明出处。
收藏
人收藏
扫一扫,分享给好友
复制链接分享
评论
发布评论请先 登录
相关推荐
一种全新易用的基于Word-Word关系的NER统一模型
最近的研究都在考虑如何通过一个大一统模型一次性解决这三种问题。目前的最佳的方法基本都是基于span-....
深度学习自然语言处理 发表于 03-23 13:37 •
66次
阅读
带你从头构建文本分类器
文本分类是 NLP 中最常见的任务之一, 它可用于广泛的应用或者开发成程序,例如将用户反馈文本标记为....
深度学习自然语言处理 发表于 03-22 10:49 •
151次
阅读
施耐德携手伙伴联合发布研究报告 Airtel部署Oracle融合云应用程序
近日,全球能源管理和自动化领域的数字化转型专家施耐德电气携手CNBC Catalyst,联合发布了名....
lhl545545 发表于 03-21 17:09 •
295次
阅读
三星Galaxy S22 Ultra成影像旗舰新标杆
现如今,智能手机无论在拍照还是视频方面,均达到了前所未有的高度,成为了普通消费者、摄影爱好者以及专业....
发表于 03-21 12:23 •
547次
阅读
空中客车和THC签署合作协议 高通获得生态系统合作伙伴广泛支持
空中客车公司和直升机公司(THC)签署了一项协议,以继续扩大直升机活动并在沙特阿拉伯王国引入城市空中....
发表于 03-18 16:40 •
1220次
阅读
广和通智能摄像助力防溺解决方案 Falcon4-CLHS相机专为工业成像设计
当有人员靠近偏远河域危险地区,河道摄像头实时采集人体影像,并及时发出喊话,播报警戒。这就是已应用....
牵手一起梦 发表于 03-18 15:50 •
241次
阅读
广和通高智能模组赋能车载摄像头 霍尼韦尔JetWave卫星通信系统改装成功
广和通作为全球领先的无线通信模组供应商,聚焦车载模组及智能模组快车道,以高性能、高算力、定制化的....
牵手一起梦 发表于 03-18 15:44 •
258次
阅读
CMOS图像传感器的元视觉:超越人眼
借助CIS技术,我们可以轻松地处理、复制和储存海量图像信息。因此,移动设备必须具备处理大量数据的能力....
传感器技术 发表于 03-18 10:14 •
167次
阅读
Elasticsearch 8作为开源软件正式发布
Elasticsearch 是一个基于 Lucene 库的搜索引擎。它提供了一个分布式、支持多租户的....
Linux爱好者 发表于 03-17 14:12 •
201次
阅读
监控摄像头的种类
监控摄像头的种类:监控摄像头一般有几种?有很多种,的效果,主要看他的芯片和线数。一般买个二百多的索尼芯片的效果就可以了。监...
发表于 03-17 12:04 •
1665次
阅读
三星超视觉夜拍系统开启计算摄影新时代
随着三星Galaxy S22系列在国内的正式发售,国内用户在高端旗舰市场又有了新的选择,三星Gala....
发表于 03-17 11:13 •
605次
阅读
日清纺微电子RN5T5611多通道电源IC_骁龙8移动平台支持三星旗舰产品组合
日清纺微电子有限公司正在研发的RN5T5611 系列是一款用于车载传感摄像头的多通道电源IC,它将是....
电子魔法师 发表于 03-16 10:35 •
338次
阅读
关于3D点云针对失真的稳健性的系统性研究
3D 点云广泛应用于 3D 识别技术中。一些特别的应用领域往往对 3D 点云识别的安全性有更高的要求....
机器视觉智能检测 发表于 03-15 11:34 •
173次
阅读
华为P50 Pocket可全方位保护个人隐私安全
移动通信、大数据,给我们的生活带来诸多便利,用手机看资讯、刷视频时,APP会推送我们感兴趣的内容,网....
火花 发表于 03-14 10:08 •
247次
阅读
极目智能推全国化L2级智能驾驶方案 海康威视获国际权威隐私安全认证
2021 年 12月 24 日,领先的智能驾驶方案提供商武汉极目智能技术有限公司(以下简称「极目....
牵手一起梦 发表于 03-11 11:21 •
324次
阅读
模拟环境光传感芯片概述及特性
监控摄像头成像的核心是其内部的感光元件。因此光线的变化会影响到摄像头的成像质量。在安装监控摄像头的时....
御风传感 发表于 03-10 12:43 •
257次
阅读
RK3288 android是怎样通过 I2C 说明获取摄像头的 ID 号呢
RK3288android是怎样通过 I2C 说明获取摄像头的 ID 号呢?有哪些操作步骤?
...
发表于 03-10 08:06 •
620次
阅读
RK3288插入身份证模块时摄像头会卡住且无法识别怎么去解决
为什么RK3288插入身份证模块时摄像头会卡住且无法识别呢?如何去解决这个问题呢?
...
发表于 03-10 06:38 •
290次
阅读
双击Power键会弹出Camer应用该怎样去解决呢
为什么双击Power键会弹出Camer应用呢?
双击Power键会弹出Camer应用该怎样去解决呢?
...
发表于 03-09 06:54 •
232次
阅读
怎样去解决RK3328 Android10.0的应用强制横屏显示的问题呢
怎样去解决RK3328 Android10.0的应用强制横屏显示的问题呢?
...
发表于 03-09 06:46 •
92次
阅读
安富利为人工智能的演进带来更多可能
阳春三月,万物复苏,安富利AI活动强势来袭!这个春天,让“AI”陪伴你。
安富利 发表于 03-07 12:58 •
674次
阅读
易灵思16nm FPGA助力汽车市场发展 天玑智慧监管解决方案亮相推进会
针对新能源汽车中的自动驾驶、智能座舱和电气化应用,易灵思推出40nm Trion系列中T13F169....
发表于 03-07 11:05 •
837次
阅读
USB摄像头在RK3399上有哪些应用呢
mjpg-streamer是什么?
USB摄像头在RK3399上有哪些应用呢?
...
发表于 03-07 07:57 •
1408次
阅读
Firefly RK3399开源板的两个MIPI摄像头接口座是如何连接的
Firefly RK3399开源板的两个MIPI摄像头接口座是如何连接的?...
发表于 03-07 07:55 •
214次
阅读
如何去实现RK3399系统默认只支持两路摄像头的设计呢
如何去实现RK3399系统默认只支持两路摄像头的设计呢?其代码该怎样去实现呢?...
发表于 03-07 07:46 •
400次
阅读
请问一下RK3399在Android10下怎样去配置摄像头OV13850呢
请问一下RK3399在Android10下怎样去配置摄像头OV13850呢?...
发表于 03-07 06:52 •
206次
阅读
基于RK3399pro开发C++实现工业落地的步骤有哪些呢
基于RK3399pro开发C++实现工业落地的步骤有哪些呢?
...
发表于 03-07 06:05 •
158次
阅读
一清创新无人车出征助力科技抗疫
春节过后,深圳疫情进入新一轮攻坚战。深圳疫情管控措施不断加码,封闭封控区域逐渐增多,居民的生活如何保....
一清创新UDI 发表于 03-03 13:41 •
453次
阅读
基于WT2000H0-24SS录音芯片的音频监控系统
目前,音频监控已广泛应用在公共设施当中,一套完整的音频监控系统包括声音采集部分、语音降噪处理部分、网....
发表于 03-03 11:12 •
26次
阅读
中兴通讯新一代云AI摄像头Pro满足用户多种需求 中电国睿集团领导一行莅临国睿科技调研
在巴塞罗那举办的2022年世界移动通信大会期间,中兴通讯新一代云AI家庭看护摄像头Pro荣获GLOM....
发表于 03-03 10:34 •
1396次
阅读
UVLED点光源在摄像头AA制程中的运用
摄像头AA制程用胶,UVLED点光源助力固化
发表于 03-01 10:29 •
58次
阅读
从沃飞长空科研实力,看专业级无人机的未来前景
自莱特兄弟于上世纪初成功试飞首架载人飞机开始,人类就开始了对天空作业的探索。历经百年发展,人类的航天....
发表于 02-25 09:24 •
250次
阅读
摄像头发展史,iphone6案例
该套教材分十余篇,介绍了摄像头的起源发展、基础知识、关键器件及专项技术等,以平实的语言系统介绍手机摄....
发表于 02-22 14:47 •
27次
阅读
全志A40i核心板实现高清模拟摄像头720P方案
飞凌嵌入式搭载全志A40i处理器的FETA40i-C核心板,可支持4路模拟摄像头PAL(720x57....
柠檬籽儿 发表于 02-18 16:19 •
285次
阅读
电瓶车阻车系统防止电瓶车上楼引发发生火灾
日前,一小区业主将电动车推进电梯,电梯内立即发出“禁止电动车入内”的语音警示,同时,电梯门也一直敞开....
梯云物联 发表于 02-18 14:54 •
208次
阅读
图像分类法实现智能车找路功能
避撞功能是智能车的最基本保护能力,Jetbot 使用深度学习的图像分类技术来模拟人眼习惯实现这个....
NVIDIA英伟达企业解决方案 发表于 02-17 12:00 •
382次
阅读
一文详细了解车载摄像头
当前车辆上摄像头的使用是很普遍的,例如普通的倒车影像、自动驾驶、DMS等,下面就来对其进行梳理一下。
硬件攻城狮 发表于 02-16 18:02 •
880次
阅读
了解如何使用 Spring 执行表单验证
原标题:Spring认证中国教育管理中心- 了解如何使用 Spring 执行表单验证 (Spring....
发表于 02-10 15:26 •
33次
阅读
小区安装人脸识别门禁系统安全性怎样
目前,很多小区因为安防意识还是比较薄弱的,特别是在大门或单元门口的安全管理上,很多的门禁还是采用磁卡....
发表于 02-08 17:03 •
532次
阅读
威尔电器4G智能执法记录仪的详细介绍
这款执法记录仪(型号:DSJ-DCWV8A1)(以下简称V8)是威尔电器旗下品牌达城威创新研发的一款....
发表于 02-08 16:34 •
106次
阅读
Ouster如何帮助塑造自动化农业的未来
当前,全世界都面临劳动力短缺的压力,粮食短缺和价格上涨越来越难以预料,最终将影响到每个人。Blue ....
OUSTER 发表于 02-08 15:45 •
633次
阅读
为什么要开发智能门锁应用程序
为什么要开发智能门锁应用程序? (球阀专用锁)客户,朋友,你知道吗? 下面由工厂员工为您解释,希望对....
发表于 02-02 19:47 •
46次
阅读
森思泰克STS2-1安防监控雷达的特点及应用
近年来,随着航运经济的快速发展,航运干线上的大型运输船舶、危化品等船舶日趋增加,对传统水上安全监管能....
森思泰克 发表于 01-27 19:49 •
2134次
阅读
飞凌FETA40i-C核心板支持720P高清模拟摄像头解决方案
飞凌嵌入式搭载全志A40i处理器的FETA40i-C核心板,可支持4路模拟摄像头PAL(720x57....
发表于 01-27 16:23 •
90次
阅读
Tier IV与佳能合作开发L4级别自动驾驶技术
电子发烧友网报道(文/梁浩斌)日本两大相机巨头似乎都看上了汽车这块香饽饽,前脚索尼在CES上宣布造车....
电子发烧友网 发表于 01-26 09:13 •
559次
阅读
OV5647高清手机摄像头原理图方案
OV5647高清手机摄像头原理图方案
发表于 01-24 16:51 •
201次
阅读
探维科技荣膺“2021新经济之王年度硬核企业”
2021年,世界的经济与科技形势风云变幻,造车新势力销量屡创新高,自动驾驶迎来商业化与前装量产两大挑....
Tanway探维科技 发表于 01-24 16:00 •
659次
阅读
广和通5G/4G智能模组赋能车载摄像头
中国智能汽车发展迅猛,C-V2X技术正逐步走向成熟。随着ADAS设备逐渐成熟化,自动驾驶智能化,装载....
广和通FIBOCOM 发表于 01-21 15:55 •
779次
阅读
广和通5G/4G智能模组在车载摄像头的应用
中国智能汽车发展迅猛,C-V2X技术正逐步走向成熟。随着ADAS设备逐渐成熟化,自动驾驶智能化,装载....
发表于 01-19 10:27 •
193次
阅读
新产品包:配备Oryx摄像头+Myricom卡,可靠的10GigE性能,经济实惠
快速移动的检测线、运动分析和容积捕获这类高带宽 10GigE 应用会给主机 PC 带来巨大压力,导致....
发表于 01-17 14:54 •
844次
阅读
谷歌母公司将分拆出新量子公司 名为“沙箱”
近日,有海外的媒体报道称,谷歌母公司Alphabet将把量子科技团队Sandbox分拆出来,但是随着....
lhl545545 发表于 01-15 09:23 •
651次
阅读
智能监控摄像头智能阻车系统保障楼宇居民安全
我们的产品是电梯AI智能监控摄像头,此款摄像头分为两种,一种是基础版本,其功能是摄像机抓拍、电瓶车阻....
发表于 01-14 13:54 •
52次
阅读
豪威集团推出业界首款用于汽车摄像头的低功耗、小尺寸300万像素SoC
2022年国际消费电子展上发布的全新OX03D SoC使汽车厂商能够从100万像素升级到300万像素....
发表于 01-14 11:00 •
507次
阅读
iPhone 14 Pro将配备4800万像素镜头
近日,根据有海外媒体的报道称,今年即将发布的iPhone 14 Pro 机型将增加 4800 万像素....
lhl545545 发表于 01-14 10:45 •
869次
阅读
苹果将在韩国推行App Store替代支付系统
近日,根据外媒的消息报道称,苹果将允许 App Store 的开发者在韩国提供替代性支付系统,计划对....
lhl545545 发表于 01-12 10:50 •
552次
阅读
一文了解3D智能家居虚拟体验平台
3D智能家居虚拟体验平台继续前往下一站的导览-“家居安全(Home Security)”,针对三大热....
SiliconLabs 发表于 01-11 16:22 •
582次
阅读
一加 10 Pro正式发布 售价4699元起
1月11日,一加举办新品发布会,随后正式发布了一加10 Pro。一加10 Pro这次的空间散热系统相....
lhl545545 发表于 01-11 16:05 •
635次
阅读
MediaTek将携手Discovery开启探索跃至不凡影像合作计划
从万事万物都可拍摄,到赋予感情的动态录影,在记录之余,如何才能将影片变成一部非凡的作品?
联发科技 发表于 01-11 11:28 •
540次
阅读
终于卷到800万像素的车载摄像头
汽车不比手机,车载摄像头很多时候追求的不是成像分辨率,而是为了实现更好的辅助驾驶功能。现状就是不少手....
E4Life 发表于 01-11 09:49 •
3195次
阅读
三星Fold 4 Exynos版因新芯片频率未达预期或改用骁龙
近日,有媒体爆料消息称三星公司新一代折叠屏手机Fold 4系列旗舰或将搭载两种不同的芯片版本,理由是....
lhl545545 发表于 01-10 14:40 •
773次
阅读
|