[基于ESP32S3的语音及视觉模块] 软件开发进展-ESP32S3 JPEG 编码性能测试

IC爬虫

[基于ESP32S3的语音及视觉模块] 软件开发进展-ESP32S3 JPEG 编码性能测试 [复制链接]

 

<i class="pstatus"> 本帖最后由 IC爬虫 于 2022-9-28 23:15 编辑 </i> **ESP32S3 带着的是一个全速的USB，所以传输图像数据做好jpeg压缩一下降低数据量，但是使用ESP32S3做jpeg编码，还是非常的费力的。** ####分辨率VGA，jpeg压缩，采样2X2：单帧耗时600+ms，传输到OPenmv IDE 的速率只有不到2帧 <ignore_js_op> <img style="cursor:pointer;" id="aimg_645289" aid="645289" src="static/image/common/none.gif" onclick="zoom(this, this.getAttribute('zoomfile'), 0, 0, '0')" zoomfile="data/attachment/forum/202209/28/230325jz3khkz4ikui18li.png" file="data/attachment/forum/202209/28/230325jz3khkz4ikui18li.png.thumb.jpg" inpost="1" onmouseover="showMenu({'ctrlid':this.id,'pos':'12'})" /> <div class="tip tip_4 aimg_tip" id="aimg_645289_menu" style="position: absolute; display: none" disautofocus="true"> <div class="xs0"> <p><strong>2022-09-28 22-51-40屏幕截图.png</strong> <em class="xg1">(26.07 KB, 下载次数: 0)</em></p> <p> <a href="javascript:;" class="loginf" >下载附件</a> <a href="javascript:;" onclick="showWindow(this.id, this.getAttribute('url'), 'get', 0);" id="savephoto_645289" url="home.php?mod=spacecp&ac=album&op=saveforumphoto&aid=645289&handlekey=savephoto_645289">保存到相册</a> </p> <p class="xg1 y">2022-9-28 23:03 上传</p> </div> <div class="tip_horn"></div> </div> </ignore_js_op> ####分辨率QVGA，jpeg压缩，采样2X2：单帧耗时180+ms，传输到OPenmv IDE 的速率只有7～8帧 <ignore_js_op> <img style="cursor:pointer;" id="aimg_645290" aid="645290" src="static/image/common/none.gif" onclick="zoom(this, this.getAttribute('zoomfile'), 0, 0, '0')" zoomfile="data/attachment/forum/202209/28/230504l9rb2b98mksqk8bv.png" file="data/attachment/forum/202209/28/230504l9rb2b98mksqk8bv.png.thumb.jpg" inpost="1" onmouseover="showMenu({'ctrlid':this.id,'pos':'12'})" /> <div class="tip tip_4 aimg_tip" id="aimg_645290_menu" style="position: absolute; display: none" disautofocus="true"> <div class="xs0"> <p><strong>2022-09-28 23-04-35屏幕截图.png</strong> <em class="xg1">(22.84 KB, 下载次数: 0)</em></p> <p> <a href="javascript:;" class="loginf" >下载附件</a> <a href="javascript:;" onclick="showWindow(this.id, this.getAttribute('url'), 'get', 0);" id="savephoto_645290" url="home.php?mod=spacecp&ac=album&op=saveforumphoto&aid=645290&handlekey=savephoto_645290">保存到相册</a> </p> <p class="xg1 y">2022-9-28 23:05 上传</p> </div> <div class="tip_horn"></div> </div> </ignore_js_op> **如果将sensor的图像格式初始化配置为jpg模式，就不需要编码，即使分辨率为VGA也可以达到满帧率25帧** <ignore_js_op> <img style="cursor:pointer;" id="aimg_645292" aid="645292" src="static/image/common/none.gif" onclick="zoom(this, this.getAttribute('zoomfile'), 0, 0, '0')" zoomfile="data/attachment/forum/202209/28/231307l4o8omp9mzk428tw.png" file="data/attachment/forum/202209/28/231307l4o8omp9mzk428tw.png.thumb.jpg" inpost="1" onmouseover="showMenu({'ctrlid':this.id,'pos':'12'})" /> <div class="tip tip_4 aimg_tip" id="aimg_645292_menu" style="position: absolute; display: none" disautofocus="true"> <div class="xs0"> <p><strong>2022-09-28 23-12-47屏幕截图.png</strong> <em class="xg1">(268.98 KB, 下载次数: 0)</em></p> <p> <a href="javascript:;" class="loginf" >下载附件</a> <a href="javascript:;" onclick="showWindow(this.id, this.getAttribute('url'), 'get', 0);" id="savephoto_645292" url="home.php?mod=spacecp&ac=album&op=saveforumphoto&aid=645292&handlekey=savephoto_645292">保存到相册</a> </p> <p class="xg1 y">2022-9-28 23:13 上传</p> </div> <div class="tip_horn"></div> </div> </ignore_js_op> **鉴于ESP32S3 的jpeg的编码速度问题，后续考虑不压缩，直接传原图，估计速度还可能更快点。**

Jacktang

传统理解是不压缩，直接传原图慢

 

RCSN

按全速USB速度来看，cdc理想能达到1.0MB/S以上速度，对于传输YUV/RGB等还是速度足够的，也总比再软件编码来得快。况且，还得图像处理，最终你也是离不开YUV环节，jpeg还得解码。 

wangerxian

jpg的是不压缩的，解码速度快呗？

IC爬虫

wangerxian 发表于 2022-9-29 14:40 jpg的是不压缩的，解码速度快呗？

将sensor配置成jpg图像格式，不方便用来做图像处理，还需要解码。

 

IC爬虫

RCSN 发表于 2022-9-29 10:02 按全速USB速度来看，cdc理想能达到1.0MB/S以上速度，对于传输YUV/RGB等还是速度足够的，也总比再软件编码来 ...

对的，看了以下openmv 的3.9版本之前的代码都有jpeg 压缩这个环节

安子1977

8bit 灰度图 640*480直接传输速度如何？

安子1977

IC爬虫 发表于 2022-9-29 14:57 对的，看了以下openmv 的3.9版本之前的代码都有jpeg 压缩这个环节

openmv是硬件jpg编码还是软件编码？

安子1977

采样2X2是什么意思？

安子1977

IC爬虫 发表于 2022-9-29 14:57 对的，看了以下openmv 的3.9版本之前的代码都有jpeg 压缩这个环节

是不是3.9以后改为硬件编码器进行编码压缩？