标题:Qt/C++摄像头采集/二维码解析/同时采集多路/图片传输/分辨率帧率可调/自动重连
作者:liudianwu
日期:2024-01-05 09:07
内容:
## 一、前言
本地摄像头的采集可以有多种方式，一般本地摄像头会通过USB的方式连接，在嵌入式上可能大部分是CMOS之类的软带的接口，这些都统称本地摄像头，和网络摄像头最大区别就是一个是通过网络来通信，一个是直接本地通信。本地摄像机的采集可以用qcamera来做，但是qcamera类在很多平台没有实现，比如嵌入式linux系统上几乎是没有用的，所以更加推荐用兼容性跨平台最好的ffmpeg来做，在linux上当然也可以通过v4l2来实现，这个其实是整个linux系统中通用的USB摄像头采集的框架，无论是ffmpeg还是qcamera，在linux系统上底层其他都是用v4l2来实现的，所以如果在嵌入式板子受限于内存或者存储空间大小，用不了ffmpeg一堆库，这个时候就可以用最底层的v4l2来采集。
很多人的应用场景要求不止采集1路本地摄像头，可能有多路都需要同时采集，其实这个和程序没有太大关系，能够采集一路肯定就能多路，毕竟就是封装的一个类，直接new出来就行，要能采集多路最大的性能瓶颈在USB带宽，数据带宽，还有就是USB口子的供电足不足，供电不足，也只能采集1-2路，比如有些人用的是USB集线器，上面一排USB口子，由于供电不足，就算你插4个USB摄像头，也只能最多采集2路，带宽又限制了分辨率和帧率，比如一个普通PC机器可以同时采集4路640x480分辨率，但是由于带宽不足，无法同时采集4路1080P，尽管4个摄像头都支持1080p分辨率，所以这是个综合因素的叠加影响，遇到问题慢慢查。
这个摄像头综合应用，陆陆续续完善了很多年，最开始是v4l2版本，只能用在嵌入式linux上，而后从Qt5开始集成了qcamera类，所以有用qcamera来做了一个版本，现在Qt6在多媒体框架有了巨大的性能提升，又用Qt6的qcamera做了个版本，为什么不通用了？因为Qt6的多媒体框架做了巨大更新调整，完全不兼容之前的类。在做视频组件的实现用ffmpeg采集本地摄像头也实现了，而且做的比较完善，所以后面单独提炼出来做了ffmpeg的版本，最后测试下来发现ffmpeg是最通用的，在哪里都能正常采集。
做二维码采集这个功能，用的是zxing类，最初的做法是将采集的图片发给zxing解析，实际过程发现大图片解析很慢，比如1080P图片大概1s只能解析3张，这个速度看起来就慢了点，如果是2K的分辨率呢。后面经过一些真实场景应用，包括菜鸟驿站里面带的扫描识别，发现都有个放大区域，用户可以设置一个关心的矩形区域，要放在这个矩形区域内，能够最大最快的识别，这是个不错的策略，在ffmpeg中通过设置crop裁剪 ..