Mathpix

网课公式识别:视频截图的清晰度与帧选择

更新于

网课公式识别要准,关键在截哪一帧、截多清楚:把播放器清晰度切到最高、等画面清楚后在公式完整出现的那一帧暂停,关掉字幕和弹幕再全屏截图,只框一条公式送进本站「图片识别」。截得好,后面只需核对几处小字。图片识别要登录并开通本站会员,编辑器在电脑浏览器里使用。

截图前:清晰度、全屏、遮挡

网课视频的问题和拍照不一样:画面本身就是压缩过的视频流,截图能拿到的细节上限,由播放时的清晰度决定。

  • 清晰度切到最高档。 很多播放器开播时先给低清画面,网络好了再换高清。切换后多播几秒,看到字边变锐再暂停。
  • 先全屏再截。 窗口模式下视频被缩小显示,同一条公式占的像素少一大截。
  • 关掉字幕和弹幕。 字幕条经常压在幻灯片底部那一行公式上;弹幕划过的文字会被当成公式的一部分识别进去。
  • 避开水印和播放控件。 暂停后把鼠标移出画面,多数播放器会自动隐藏进度条和按钮;不隐藏的控件和角落里的平台水印一样,框选时留在框外。

选帧:暂停在哪一帧

课件讲解类网课,公式常带动画逐项出现,要等最后一项出现后再暂停。翻页时的淡入淡出帧里,两页内容叠在一起,识别结果会混进上一页的字。

板书类网课,老师边写边讲,要等这一行写完、手和粉笔离开后再暂停;手臂挡住的地方拖一下进度条,找一个没遮挡的帧。画面里有摄像机自动对焦的轻微模糊时,往后拖一两秒,常能找到更清楚的一帧。

网课暂停取帧:五类情况里该截与该跳过的帧对照

识别步骤

  1. 在本站编辑器点「识别」→「图片识别」,打开「图片公式识别」窗口。
  2. 回到视频,用系统截图只框住一条公式,框里留一点白边。
  3. 在识别窗口按 Ctrl+V(Mac 上 ⌘V)粘贴,识别直接开始。
  4. 在结果卡片点「插入」,公式进入编辑区后点「LaTeX」看源码,把视频停在同一帧,对着核对。

图片公式识别弹窗:可直接粘贴视频截图

核对:小字最先吃亏

识别窗口下方的「识别样例」是排版后截下的清晰图,标注「线上识别原样输出,未经修改」,分段函数、矩阵这类结构都完整保留。视频截图的差别在于压缩:大字母一般不受影响,指数里的小字、下标、分式里的分式最先糊。

拿概率论网课里常见的正态分布密度函数举例,它的指数部分是一个带平方的分式,在视频里只有正文字高的一半左右:

f(x)=\frac{1}{\sqrt{2\pi}\,\sigma}e^{-\frac{(x-\mu)^{2}}{2\sigma^{2}}}

正态分布密度函数,指数是负的 x 减 μ 平方除以 2σ 平方

核对按三层来:第一层看指数,(x−μ)² 的平方和 2σ² 的平方都在;第二层看希腊字母,μ 与 u、σ 与 6 在低清帧里最像;第三层看根号,根号下是 2π,σ 在根号外面。

板书类网课里,这条公式常和分布记号写在上下两行,截图时只框要识别的那一行,下图把这两条公式分左右两栏列出:

正态分布记号与密度函数分左右两栏列出

整节课要整理很多条,先在文档编辑里逐条「插入公式」,笔记文字写在公式之间,最后从「导出」选「Word 文档 (.docx)」一次导出。低清画面的补救思路可以参考低清扫描公式识别;上下标位置的判断见截图公式上下标识别。

下一节网课开讲前,先把清晰度切到最高、字幕弹幕关掉,遇到要记的公式就暂停截一张粘进识别窗口,课后笔记里的公式就不用再对着视频手抄。

延伸阅读

常见问题

视频截图模糊怎么办?
先查三件事:播放器清晰度是不是切到了最高档,切换后有没有等画面真正变清楚再暂停,截图前有没有全屏。三件都做了仍然模糊,说明视频源本身分辨率低,换一个更清楚的视频源,或者找老师要课件原文件。模糊的截图反复识别也补不回细节,小字的地方要对着视频逐个核对。