使用场景：YOYO帮记【伴学模式】
目前伴学模式生成笔记主要依靠音频转写，遇到老师板书、PPT重点只写不念的情况，笔记会缺失这部分知识点。虽然当前支持手动截图补充笔记，但操作繁琐。很多重点图形在听课当下才能意识到，课后回看很难快速回忆并精准定位到对应画面，反复拖动进度条非常耗时间。
建议在伴学模式中增加半自动智能截图候选功能：
1. 伴学模式运行时，AI识别网课重点画面，生成候选截图，弹出候选框，由用户确认后再加入伴学笔记
2. 对确认后的截图做OCR识别，提取图中文字，合并进伴学笔记文本，弥补纯音频转写的短板
3. 增加音画匹配校验，过滤无效画面，减少识别错误、音画错位问题
4. 增加开关：可以自由开启/关闭这个智能候选截图功能，保留原有纯音频伴学模式作为备选
扩展需求：希望后续版本能够识别板书示意图、推导图形，自动总结图形对应的知识点写入笔记，解决理科网课大量图形推导的痛点
配图说明：物理电场轨迹题、数学立体几何体积题，这类题型依靠图形推导，手动捕捉重点画面截图很麻烦，希望AI自动识别重点画面推送候选截图
7 人已参与
支持
反对
