OmniParseBench开发者指南发布

发生了什么

MarkTechPost发布了一份开发者指南，介绍如何使用OmniParseBench进行文档解析器基准测试和OCR评测。该基准测试包含16,288个小型通过或失败测试，覆盖2,937页文档，包括扫描表单、手写文本、arXiv数学内容和密集表格。指南中提到，重建排行榜时，通过手动输入页面来测试评分器的准确性，并测量排名确定性，按文档类型划分，测试两个模型在测试模型修正后的表现差异，并自行运行Tesseract和Indra OCR。研究发现，前两个解析器在统计上没有差异，排行榜在不同切片中有所变化，且一个发布数据与发布文件不匹配。