跳到正文
OpenBMB· @OpenBMB · X·· 11 小时前AI 评分53

用 ESP32 摄像头加 MiniCPM-V 4.7 识别猫咪使用猫砂盆行为,项目已开源

AI 导读

创客用 ESP32 摄像头监控家中四个猫砂盆,配合 MiniCPM-V-4.7-35B-A3B 做视觉理解,实时画面约 15~16 帧,可查看四只猫各自去了哪个盆、各去了几次。两天记录发现球球和驴驴使用频率较高且不固定用盆,宝宝更常使用 2 号盆,啵啵会先查看 1、2 号盆再决定是否换到 3 或 4 号盆。项目已开源为 litterbox-vision 仓库:github.com/emwstudio/litterbo…,OpenBMB 转发并称赞这一创意用法。

正文 · 原文

Love seeing MiniCPM-V 4.7 put to work in such a creative way! 🐱💙 Turning everyday cat behavior into useful insights with ESP32 and vision AI is awesome. Great work! 🙌

引用电磁波Studio@emwstudio

架上一个 ESP32 摄像头,识别猫咪去了哪个猫砂盆

我给家里四个猫砂盆前架了一个 ESP32 摄像头,再用 MiniCPM-V-4.7-35B-A3B 做视觉理解。现在坐在书房,就能看实时画面,也能看到四只猫每天去了哪个盆、各去了几次。

方案明细:

画面采集:ESP32 摄像头固定在三脚架上,对准四个猫砂盆。
取景辅助:摄像头旁加一块 ESP32 小屏幕,方便调整位置和角度。
实时显示:办公桌屏幕上半部分显示实时画面,下半部分显示使用统计。
行为理解:MiniCPM-V-4.7-35B-A3B 判断画面里有几只猫、分别在哪个盆、正在做什么。
实测帧率:实时画面约 15~16 帧。

连续记录两天后,球球和驴驴的使用频率较高,而且不固定只用一个盆;宝宝出现次数相对少,目前记录到它更常使用 2 号盆;啵啵则会先查看 1、2 号盆,再考虑是否换到 3 或 4 号盆。

这个项目不只是用来看猫,更是把“谁来过、去了哪个盆、去了几次”变成可以回看、核对的数据。

最后我想问,你家的猫会有什么固定的使用习惯呢?

项目已开源为 litterbox-vision 仓库:github.com/emwstudio/litterbo…

#ESP32 #MiniCPM #猫咪 #AI硬件 #创客

在 X 查看被引用的帖子

来源:OpenBMB · x.com