Hugging Face Blog·· 2024-06-24精选AI 评分68
Hugging Face 博客:微调 Microsoft Florence-2 视觉语言模型
Fine-tuning Florence-2 - Microsoft's Cutting-edge Vision Language Models
AI 导读
Hugging Face 博客发布教程,展示如何在受限资源下微调 Microsoft Florence-2 视觉语言模型。文章通过 DocVQA 数据集实验,验证了冻结视觉编码器并使用小学习率(1e-6)微调的有效性,验证集 Levenshtein 相似度从 0 提升至 57.0,并提供了 Colab 笔记本与完整代码。
推荐理由
提供在受限资源下微调 Florence-2 的完整代码与实验数据,展示如何将其适配至文档问答等下游任务。
来源:Hugging Face Blog · huggingface.co