基于UVC协议的4K智能摄像头

发布者:BlossomJoy最新更新时间:2024-07-11 来源: eepw关键字:智能摄像头 手机看文章 扫描二维码
随时随地手机看文章

摘要:本文设计了一款基于UVC协议的4K智能摄像头,主控采用瑞芯微RV1126,传感器采用思特威 SC8238。摄像头通过USB接口直连电视,实现4K高清呈现。支持UVC协议,具有行人追踪功能。


0 引言

随着 4K 电视的普及和家庭视频会议、家庭娱乐健身的需求,本文开发了一款基于 UVC(USB 视频类, USB Video Class)协议的 4K 智能摄像头,通过 USB 连 接线直连 4K 电视,即可实现摄像头到电视端到端的 4K 超清呈现,如图 1。

1658929154512382.png

图1 摄像头应用系统框图

本文开发的基于 UVC 协议的 4K 智能摄像头操作简单,携带方便,价格便宜,具有良好的应用与发展前景。本文重点介绍摄像头硬件主要电路开发和 UVC 协议的实现。

1 硬件设计

系统主控采用瑞芯微 RV1126,传感器采用思特威 SC8238。摄像头通过传感器采集图像信息,通过 MIPI 信号将采集的图像信息传送到主控,主控对图像进行编解码后通过 USB 接口将图像信息发送给电视,电视显示传感器采集的图像信息,从而实现摄像头到电视端 4K 超清呈现,摄像头视频信号流,如图 2。

image.png

1.1 RV1126介绍

RV1126 支持 4K(3 840×2 160)H.265 30 fps 视频编码,四核 Arm Cortex-A7 架构,内部集成了 2.0 Tops 的 NPU,NPU 支持 INT8/INT16 混合操作,可以很容易在 TensorFlow、MXNet、PyTorch、Caffe 之间转换。RV1126 每个核里面都包含一个 32 KB I-cache、32 KB D-cache 和共用二级缓存 512 KB。芯片内容集成了 HDR(高动态 范围成像,High Dynamic Range Imaging)、3A 功能(AE、 AF、AWB)、LSC、3DNR、2DNR、锐化,dehaze、鱼眼校正、gamma 校正、特征点检测等算法加速器。芯片集成了 MIPI(移动产业处理器接口,Mobile Industry Processor Interface)接口,通过 MIPI 信号和传感器直连。

1.2 SC8238介绍

思特威 SC8238 最高支持 4K(3 840×2 160)的传输速率,是一款业界领先的数字 CMOS(互补金属氧化物半导体,Complementary Metal Oxide Semiconductor)图像传感器,它输出的是 raw 格式图像,有效像素为 3 872×2 180,可以通过标准的 I2C(集成电路互连通信电路,Inter-Integrated Circuit)接口读写寄存器。它采用了 1.5 μm 背照式像素技能,在相同产品中灵敏度在 1 160 mV/Lux·s 时功耗最低。

1.3 硬件设计

硬件电路主要包括电源模块、时钟复位电路、主控、传感器、USB(通用串行总线,Universal Serial Bus)、DDR(双倍速率,Double Data Rate)和 Flash 等,硬件电路框图如图 3。

1658929333336777.png

其中,整个系统的电源是通过 USB 提供的,时钟和复位保证系统正常工作,Flash 是用来存储程序的,DDR 是随机存储器,系统通过思特威传感器芯片 SC8238 采集图像数据,用瑞芯微 RV1126 芯片对图像数据进行编解码,最后通过 USB2.0 发送图像数据到电视端。

RV1126 时钟电路由内部的反馈电路和外置的 24 MHz 晶体振荡电路构成;系统时钟使用有源晶体时,时钟的幅度是 1.8 V±10%。芯片复位引脚低电平大于 4 μs 时芯片复位,芯片复位引脚并联放一个 100 nF 电容,增强 RV1126 的抗干扰能力,防止误触发导致系统复位。DDR采用T型设计,DQ和DQS双向信号直接连接即可,差分时钟信号末端串联一个 49.9 Ω 的端接电阻;DDR4 组内的不同信号线之间的间距、组间两相邻信号线之间的间距均要使用“3W”原则;单线特征阻抗控制在 50 Ω±10%,差分对阻抗控制 100 Ω±10%。PLL 电源包括 PLL_AVDD_0V8 和 PLL_AVDD_1V8 两个,必须单独供电,并分别使用 1 个耦合电容放在相对应的管脚 靠近,这样在 DDR 工作在高频时,可以提高系统的稳定性。内核电源电压是 0.8 V,必须使用单独的 DC-DC 供电,且供电能力不能小于 1 A。NPU 电源电压是 0.8 V, 必须使用单独的 DC-DC 供电,且供电能力不能小于 2 A。芯片USB控制器使用200 Ω精度为1%的参考电阻,这个电阻影响 USB 眼图质量,因本设计是使用 USB 传 输视频流的,所以这个电阻非常关键;USB 的信号线上要分别放一个静电防护器件,该器件的寄生电容要不大于 1 pF,ESD PCB 布局时器件要尽可能靠近 USB。

思特威传感器芯片 SC8238 包括 DOVDD(1.8 V)、 AVDD(2.8 V)和 DVDD(1.2 V)三路电源,滤波电容必须靠近引脚放置;在 4K 帧率时,DVDD 必须设计 成 1.2 V 电压。芯片的 VREFN、VREFN2、VREFH 和 TXVDD 通过电容到地,可以滤除电源纹波的高频部分和低频部分。MIPI 信号差分线阻抗控控制在 100 Ω,误差小于 ±10%;MIPI信号不能直走线,会发生信号反射,影响视频高速传输性能,且 MIPI 信号下必须有完整的地参考层,不能分割。

2 UVC协议

UVC 即 USB 视频类是 USB Video Class 的简称,它是微软与其它厂商联合推出的为 USB 视频捕获设备定义的协议标准。UVC 设备包括一个视频控制接口(VC Interface)和一个视频流接口(VS Interface);视频控制接口主要用于配置操作,让 UVC 设备进入不同的功能状态,视频流接口负责 UVC 设备的视频数据流传输。 UVC 的拓扑结构包括视频流输入 / 输出、摄像头视频流传输控制、图像数据采集源的切换和选择控制,以及图像相关参数的处理等。

3 结语

本文设计的基于 UVC 协议的 4K 智能摄像头,通过 USB 接口直连电视,给用户 4K 超高清完美呈现。此摄像头简单易用,经济实惠,视频效果好,可广泛使用在家庭视频会议和家庭娱乐健身。

参考文献:

[1] N KHALID, GOCHOO M, JALAL A, et al. Modeling twoperson segmentation and locomotion for stereoscopic action identification: A sustainable video surveillance system[J]. Sustainability, 2021,13.

[2] SJURSEN A D, FRIIS M, RNNING L, et al. Monitoring of anadromous salmonids in the fjrevassdraget watercourse, Nordland[C]. Results from the video surveillance in 2020- 2021.

[3] MOSAIF A, RAKRAK S. A new system for real-time video surveillance in smart cities based on wireless visual sensor networks and fog computing[J]. Journal of Communications, 2021, 16(5):175-184.

[4] SHAHBAZ A, JO K H. Dual camera-based supervised foreground detection for low-end video surveillance systems[J]. IEEE Sensors Journal, 2021,PP(99):1-3.

[5] SEVCIK J. A special peripheral component interconnect express card for video surveillance systems in alarm applications[J]. Przeglad Elektrotechniczny, 2021, 1(5):30- 35.

[6] PANDAS K, SAHU S K. Design of IoT-based real-time video surveillance system using raspberry Pi and sensor Network[M].2021.

[7] HUANG H, SAVKIN A V, NI W. Online UAV trajectory planning for covert video surveillance of mobile targets[J]. IEEE Transactions on Automation Science and Engineering, 2021, PP(99):1-12.

[8] KUMAR P. Development of a thermal-visible video surveillance system based on fractional order tvmodel[J]. Journal of Physics Conference Series, 2021, 1950(1):012026.

[9] ISAEVA O, BORONENKO M, BORONENKO Y. Making decisions in intelligent video surveillance systems based on modeling the pupillary response of a person[C].2021 IEEE 6th International Conference on Computer and Communication Systems (ICCCS). IEEE, 2021.

[10] ZHANG J, JIA X, J Hu, et al. Moving vehicle detection for remote sensing video surveillance with nonstationary satellite platform[J]. IEEE Transactions on Pattern Analysis and Machine Intelligence[J].2021,PP(99):1-1.


关键字:智能摄像头 引用地址:基于UVC协议的4K智能摄像头

上一篇:基于紫光展锐 SC5842 的 TWS 耳机方案
下一篇:基于原睿Audiowise PAU1818的TWS蓝牙5.1耳机方案

推荐阅读最新更新时间:2024-11-11 19:38

4K电视逐渐普及 带动相关制播设备市场成长
由于日本电视市场上,4K电视以台数计算的普及率已超过30%,4K电视已确定成为主流,次世代的8K电视如无意外,也会逐渐普及,因此4K/8K影音制播设备市场,包括专业的4K录放影机与剪辑系统,或消费性电子市场的4K录放影机与相机,据日经产业(Nikkei Business)报导,市场已开始扩大。 而现在4K与8K数位影音制播设备产品体系最完整的厂商属Sony与Panasonic,两家公司视此为重要商机,现在正积极扩充产品线与进行促销。 据富士Kimera总研(Fuji Kimera)的调查显示,全球专业影音制播设备市场规模,2015年与2025年大致相当,都是1,500亿日圆(约13.8亿美元),而4K以上设备市场,则会从2015年
[家用电子]
视觉感知摄像头智能网联汽车上的应用有哪些
视觉感知摄像头,是车辆上用于获取音像效果的产品装置,某种程度而言已经成为汽车最为重要的传感器,无论是特斯拉信奉的纯视觉路线,还是行业普遍采用的多传感融合方案,视觉感知摄像头都是不可或缺的其中一员。 视觉感知摄像头 目前,视觉感知摄像头在智能网联汽车上的应用,主要包括以下6种: 1、智能辅助驾驶功能:为了达成车辆的智能辅助驾驶操作,智能网联汽车一般会在车前、车后、车身两侧区域,外置数量4-8个不等的视觉感知摄像头,为驾驶员提供周围环境信息,也帮助实现包括自适应巡航、车道线偏离预警、行人车辆碰撞预警等在内的辅助驾驶功能。 2、360°全景环视系统:360°全景环视系统一般由4-6个高动态范围、高分辨率摄像头组成,分布在车前、车后、
[嵌入式]
视觉感知<font color='red'>摄像头</font>在<font color='red'>智能</font>网联汽车上的应用有哪些
传苹果提高iOS芯片订单 或从LG采购4K屏幕
7月19日消息,据国外媒体报道,周三市场传出两条与苹果供应链有关的传闻,其中一条传闻称苹果最近增加了集成电路订单量,而另一条传闻则称苹果正在同LG就超高清4k电视机屏幕进行合作谈判。 据知情人士称,苹果的微芯片供应商从苹果接到的订单量正在不断增加,这或许暗示着苹果将要发布一款新产品。 据悉,苹果第三季度的芯片订单量几乎是第二季度的两倍。知情人士还说,下半年的集成电路出货量将会显著增长,下半年的出货量可能会占到全年订单总量的70%。 虽然芯片订单量增长并不一定等同于新产品即将上市,但在此之前,芯片订单量曾在去年第四季度至今年第一季度期间经历了一段衰减期。例如,知情人士称,iPhone组件订单量在上半年的6个月里减少到了
[手机便携]
高端4K HDR技术 意大利内测UHD意甲转播
对于喜欢观看足球赛事的用户来说,一定都希望电视画面的清晰度越高越好。近些年来,电视的分辨率在不断提高,720P到1080P,现在则是4K超高清正流行。最近,来自外媒的消息显示,在不久前,意大利广播电视公司内部测试了一场4K超高清分辨率的意甲联赛。这场比赛是2016年3月12日在圣西罗球场举办的一场比赛,对战双方是意大利国际米兰队对博洛尼亚队。 4K HDR技术备受关注  根据意大利广播电视公司一位不愿意透露姓名的工作人员表示,这次内部转播测试,是由罗马制作公司DBW协助制作,最为值得关注的是,测试过程中不仅采用了4K超高清分辨率,还加入了HDR高动态范围技术的支持,可以让比赛画面中暗处细节效果更为清晰,提升画面表现
[家用电子]
要做国民4K的风行电视 内里有什么乾坤?
    近两年大家都在谈论电视市场不好做,4K电视缺乏片源支持,价格战依然激烈,可谁都没想到互联网企业突然转战电视市场,给传统电视品牌来个落井下石。今天落井下石的互联网企业又多一个了,“超维生态”各成员——东方明珠、兆驰股份、风行在线、海尔和国美共同推出4K分辨率的风行电视,最便宜的43 英寸仅售1799元,再次刷新了4K电视最低价。   也许大家对“超维生态”一词不太熟悉,在此先介绍一下。在今年9月23日,东方明珠、兆驰、 风行、海尔和国美在北京举办了风行电视战略发布会,五家行业巨头以资本入股的方式深度合作,共同构建互联网电视行业的超维生态。而其中核心是东方明珠、兆 驰和风行,SMG集团和东方明珠通过定向增发持有了兆驰股份的
[家用电子]
松下推出全新4K电视AX800系列 支持面部识别
    早在今年年初的CES 2014消费电子展会上,松下就曾表示今年将会推出售价更为低廉的4K电视,以满足入门用户的需求。而在时隔半年之后,松下近日正式发布了AX800系列4K电视,包括58英寸和65英寸两个版本     除了3840×2160的超高分辨率之外,AX800系列4K电视还配备了搭载局部调光技术的LED背光面板,能通过降低某些区域的亮度来显示出更深的黑色。此外,AX800系列4K电视搭载的智能图像媒体处理器还能将非4K文件转化为4K分辨率来播放。     软件方面,AX800系列4K电视也具有很多人性化的智能功能,比如支持语音识别和面部识别,前者能使用户能够通过语音来进行搜索,而后者会在电视检测到用户面部后自
[家用电子]
TCL面向全球最大市场推出世界最领先的量子点电视
搭载Color IQ™光学技术的全新量子点电视,以高性价比带来OLED水准的色彩体验。 香港与美国马萨诸塞州列克星顿,2014年12月15日——TCL多媒体和QD Vision公司今日宣布向中国市场推出一款搭载Color IQ光学技术的55寸4K超高清量子点电视。这款全新的电视拥有绝佳的色彩、时尚的造型以及卓越的图像表现,将很快在中国2,000多家店面开售,并将把产业带入全新的量子点显示技术时代。作为高端旗舰产品,TV+量子点电视H9700的发布是TCL TV+家庭娱乐电视家族的又一次重磅硬件升级。新品发布会今天在北京的清华科技园举办。 全新的量子点电视经QD Vision公司与TCL联合开发,在色彩性能方面拥有行
[家用电子]
14nm/支持4K屏 骁龙820处理器细节曝光
     近日,联发科刚刚正式发布了全球首款10核处理器Helio X20,今日就有网友在微博上曝光了疑似Qualcomn(高通)下代处理器骁龙820的详细参数,实在太劲爆了,一起来看看吧! 疑似骁龙820处理器参数曝光   图中将联发科Helio X20和骁龙820做了一个对比,骁龙820的参数信息可谓是一览无余。骁龙820处理器将采用14nm工艺制造和双丛集(Dual-cluster)设计,内有4颗自主微架构“Kryo”核心(2颗2.2GHz+2颗1.7GHz),支持双通道2100MHz的LPDDR4内存,集成Adreno 530 GPU。   此外,骁龙820内置双ISP,支持28MP摄像头、4K视频的录制和播放、4K
[手机便携]
小广播
最新嵌入式文章
何立民专栏 单片机及嵌入式宝典

北京航空航天大学教授,20余年来致力于单片机与嵌入式系统推广工作。

 
EEWorld订阅号

 
EEWorld服务号

 
汽车开发圈

电子工程世界版权所有 京ICP证060456号 京ICP备10001474号-1 电信业务审批[2006]字第258号函 京公网安备 11010802033920号 Copyright © 2005-2024 EEWORLD.com.cn, Inc. All rights reserved