今天要看一个 bug 录屏,
挺长的不想看
看到一个 skills 让 agent 去看视频流程感觉不错
用 yt-dlp 下载视频
获取 Transcript,平台自带字幕/ MLX-Whisper 或者whisper.cpp 兜底
如果需要视觉,用 ffmpeg 按场景抽帧,把帧 + 对应时间段的 transcript 一起发给 Agent,来生成汇总的 生成 moments.md 和 summary.md
最后可以按需要写入自己的知识库里面。
我这个场景它一下就很清楚的描述了 bug 的详细信息,我再给其他 agent 去修就好了。
我觉得用 agent 看视频,挺好的,尤其是适合这种沟通类或者学习类的场景
显示更多