跳到正文
原文
Hugging Face Blog·· 2024-06-24精选AI 评分68

Hugging Face 博客:微调 Microsoft Florence-2 视觉语言模型

Fine-tuning Florence-2 - Microsoft's Cutting-edge Vision Language Models

AI 导读

Hugging Face 博客发布教程,展示如何在受限资源下微调 Microsoft Florence-2 视觉语言模型。文章通过 DocVQA 数据集实验,验证了冻结视觉编码器并使用小学习率(1e-6)微调的有效性,验证集 Levenshtein 相似度从 0 提升至 57.0,并提供了 Colab 笔记本与完整代码。

推荐理由

提供在受限资源下微调 Florence-2 的完整代码与实验数据,展示如何将其适配至文档问答等下游任务。

来源:Hugging Face Blog · huggingface.co