854|2

3622

帖子

18

TA的资源

版主

 

【玄铁杯第三届RISC-V应用创新大赛】LicheePi 4A+便携移动内窥镜(完结档) [复制链接]

  本帖最后由 吾妻思萌 于 2023-12-6 22:36 编辑

【玄铁杯第三届RISC-V应用创新大赛】LicheePi 4A+便携移动内窥镜

作者:吾妻思萌

 

项目背景
医疗和工业都在往专精方向走,现在医疗电子愈发火热,内窥镜在医学诊断和工业大型设备排查时发挥了重要作用,但是医用和工业用往往都是大尺寸不能移动的大设备,如果能够做一个既带移动电源小巧便携,又有智能图像识别功能的内窥镜套件,那刚好填补了一个低价低成本的空白。

而且我还发现,如果要是能够搭配一些医疗等级的内窥镜,然后自己稳一点,那就可以直接在家做采耳了。

 

作品简介
本设计利用RISC-V开发板打造移动便携内窥镜,并利用开源代码训练一个可以识别图像物体的设备。通过训练数据能够基本识别图像。目前硬件搭建完成,可以顺利启动镜头捕捉。目标识别的算法框架也构建完成,图像识别的训练还在开发当中(后期补足)。这里不得不说,RISCV我是没找到趁手的python IDE,也少了一些软件,导致我开发过程中曲折啊,还是需要很多牛人和厂商开发移植啊。

 

系统框图
主要零部件:
    显示屏*1
    开发板*1
    内窥镜*1
    移动电源*1

    软件部分若干

各部分功能说明
 

开发板主要用来控制整个系统,显示屏可以实时显示内窥镜的画面;硬件构成比较简单。但是盒子开窗却成了最花功夫了的哈。官方如果能够提供出场自带各种开窗的盒子就赞了。我就会考虑买一个当我自己的NAS啦。

全家福

 

视频演示

视频里楼主简单介绍了硬件部分的构成,和小盒子的开窗,没什么难度哈。后面去进行了实测,感觉摄像头成像质量不咋地,但是也能看。要是部署个智能识别上去就好了。

http://bbsvideo.eeworld.com.cn/2023111622/c/f843eeff39ac.mp4

 

一个管道的内部空间,边边角角还是比较模糊的。

项目源码
 usb_test.py (296 Bytes, 下载次数: 1)

 onnx_inference.py (2.52 KB, 下载次数: 0)

发布的博文(附上标题和平头哥发布链接)
【玄铁杯第三届RISC-V应用创新大赛】LicheePi 4A+模型搭建
https://www.xrvm.cn/community/post/detail?id=4240671486265856000
【玄铁杯第三届RISC-V应用创新大赛】LicheePi 4A+便携移动内窥镜硬件搭建完成
https://www.xrvm.cn/community/post/detail?id=4244179381871775744

【玄铁杯第三届RISC-V应用创新大赛】LicheePi 4A+便携移动内窥镜

https://www.xrvm.cn/community/post/detail?spm=a2cl5.27438731.0.0.31d47a32hTtCEi&id=4245722809004789760

 

项目总结对作品完成度、技术探索、创新点等方面进行总结)

  • 趣味性和创新性

整体来看趣味性在于可移动,插电即用,适合各种场景,当然usb-内窥镜本身手机就能即插即用,用板子加显示屏比手机体积大出几倍。但是少有手机app有着识别功能,所以用内置GPU的算力板打造一个智能识别的内窥镜在医疗和工业特殊场景用处十分广泛的。

楼主本人尝试入耳查看内部(请勿私自尝试)

楼主亲身实践轻轻进入耳朵看到了耳朵里面的脏东西,感觉和外边净耳采耳也差不多,自己看看里面用挖耳勺和棉签轻轻擦一擦基本就差不多啦。

危险动作未成年人禁止尝试哈。

  • 技术探索

摄像头不搭载一些智能识别的算法,那就白玩了,于是乎我一知半解的去试了官方给的YOLOX起初想自己训练一个,于是折腾的下了模型,还去看了怎么做模型标注,怎么划分训练集,测试集,咱不是专业搞这个的,所以照猫画虎学人家的帖子,最后也跑不了。详情见这个帖子【玄铁杯第三届RISC-V应用创新大赛】Licheepi 4A + 在线训练神器,疯狂打call

不过后面发现了官方给的Maxihub在线训练,确实好用。

这不是我也搞了一个训练好的模型了吗

https://maixhub.com/model/zoo/293

image.png  

 

一共拍摄了两百多种图片,并且一一标注,然后验证集基本是acc是0.6,虽然没有达到很高的准确率,但是应该勘用了。

image.png  

模型在这里,

model-96865.tinymaix.zip (4.18 MB, 下载次数: 2)

最新回复

更想用来做个内网穿透,做个文件同步的NAS什么的,,,好期待   详情 回复 发表于 2023-12-7 07:32
 
 
 

回复
举报

5657

帖子

0

TA的资源

五彩晶圆(中级)

 

更想用来做个内网穿透,做个文件同步的NAS什么的,,,好期待

点评

我去看了npc咩有RISC-V的 我一直在等  详情 回复 发表于 2023-12-7 12:44
 
 
 

回复

3622

帖子

18

TA的资源

版主

 
Jacktang 发表于 2023-12-7 07:32 更想用来做个内网穿透,做个文件同步的NAS什么的,,,好期待

我去看了npc咩有RISC-V的 我一直在等

 
 
 

回复
您需要登录后才可以回帖 登录 | 注册

随便看看
查找数据手册?

EEWorld Datasheet 技术支持

相关文章 更多>>
关闭
站长推荐上一条 1/8 下一条
电子工程世界版权所有 京B2-20211791 京ICP备10001474号-1 电信业务审批[2006]字第258号函 京公网安备 11010802033920号 Copyright © 2005-2024 EEWORLD.com.cn, Inc. All rights reserved
快速回复 返回顶部 返回列表