注册并分享邀请链接,可获得视频播放与邀请奖励。

何笠同学 (@HeLi8866) “我的天,这太疯狂了!!😱 有人用 Opus 5.5,把自己的智能眼镜改成了能识别物体的 AI” — TopicDigg

何笠同学 的个人资料封面
何笠同学 的头像
何笠同学
@HeLi8866
加入 June 2021
0 正在关注    0 粉丝
我的天,这太疯狂了!!😱 有人用 Opus 5.5,把自己的智能眼镜改成了能识别物体的 AI 设备! 任何带摄像头的智能眼镜都能接上,戴上之后会当场报出看到的人、车和各种物体。 这套东西免费、开源,普通 Mac 就能跑。 下面是完整步骤: step 1 → 一条命令装上 YOLO:pip install ultralytics step 2 → 戴上眼镜,给自己的 Mac 打一通 WhatsApp 视频通话 眼镜看向街道,Mac 上就能看到同样的画面 step 3 → 在 OBS 里捕获通话窗口,并打开 Virtual Camera 这样眼镜传来的画面,会像摄像头一样出现在 Mac 上 step 4 → 对着这路画面跑追踪:yolo track model= source=1 show=True 每个物体都会带上框、标签,还有一个会跨帧跟着它走的 ID step 5 → 只留下你关心的类别:classes=0,2,16 对应人、车和狗,conf=0.5 用来去掉没把握的判断 step 6 → 写一小段 Python,用 macOS 的 say 把看到的内容念出来,再经 BlackHole 这类虚拟麦克风送进通话:car on your left。声音会直接进到你耳朵里 step 7 → 用自己的东西来训练:你的产品、工具、自己的狗。把 coco8.yaml 换成你标好的照片,再跑 yolo train step 8 → 导出到手机:format=coreml 给 iPhone,format=tflite 给 Android,这样以后可以不用再靠 Mac 底层大致是这样: → YOLO 对每一帧只看一遍,并在这一遍里找出所有物体,所以够快,能跟上实时视频 → 追踪(默认是 ByteTrack)会让同一只狗即使走到树后面,也还是原来那个 ID → 80 种物体开箱就能认,不必先训练 仓库地址: 有兴趣的话可以自己试一下
显示更多