Hugging Face Blog·· 2023-08-02AI 评分27
Huggy Lingo:利用机器学习改进 Hugging Face Hub 数据集的语言元数据
Huggy Lingo: Using Machine Learning to Improve Language Metadata on the Hugging Face Hub
AI 导读
Hugging Face 推出 Huggy Lingo 项目,利用机器学习自动检测 Hub 上未标注语言元数据的公开数据集。该项目通过 dataset viewer API 获取文本样本,使用 Meta 的 fastText 模型识别 217 种语言,并借助 librarian-bots 提交 Pull Request 以补充元数据。
来源:Hugging Face Blog · huggingface.co