Hugging Face Blog·· 2024-07-25AI 评分40
Hugging Face 用 LAVE 在 Docmatix 上做零样本 VQA 评测：还需要微调吗？
LAVE: Zero-shot VQA Evaluation on Docmatix with LLMs - Do We Still Need Fine-Tuning?
AI 导读
Hugging Face 在开发 Docmatix 时发现，在其上微调的 Florence-2 在 DocVQA 上表现出色，却因答案格式差异在传统指标上得分很低，额外针对 DocVQA 微调反而被人工评估认为更差。
来源：Hugging Face Blog · huggingface.co