DiScoFormer:一个同时估计密度和分数的 Transformer 模型
DiScoFormer 是一个基于 Transformer 架构的模型,能在单次前向传播中同时估计数据分布的密度和分数,无需针对新分布重新训练。在 100 维数据测试中,其分数误差比最佳手动调优的核密度估计(KDE)降低约 6.5 倍,密度误差降低超过 37 倍。该模型通过共享骨干网络和一致性损失实现自适应,适用于生成建模、贝叶斯推断等需要高精度分数估计的场景。
DiScoFormer 是一个基于 Transformer 架构的模型,能在单次前向传播中同时估计数据分布的密度和分数,无需针对新分布重新训练。在 100 维数据测试中,其分数误差比最佳手动调优的核密度估计(KDE)降低约 6.5 倍,密度误差降低超过 37 倍。该模型通过共享骨干网络和一致性损失实现自适应,适用于生成建模、贝叶斯推断等需要高精度分数估计的场景。
Hugging Face 发布 FilBench,系统评估 LLM 在 Tagalog、Filipino 和 Cebuano 等菲律宾语言上的表现。评测涵盖文化、NLP、阅读理解和生成四大类,结果显示 GPT-4o 表现最佳,而 SEA-LION 等区域模型在参数效率上具有优势。开源模型在成本效益上优于商业模型,但翻译任务仍是主要难点。
Hugging Face 发布 3LM 基准测试,专门评估阿拉伯语大语言模型在 STEM 学科和代码生成领域的表现。该基准包含 865 道原生 STEM 选择题、1,744 道合成高难度题目及基于 HumanEval+ 和 MBPP+ 翻译的代码任务。测试显示 Qwen2.5-72B-Instruct 在 STEM 选择题中表现最佳,GPT-4o 在代码生成任务中得分最高。
BenCzechMark 是首个全面评估大语言模型捷克语能力的评测基准,涵盖 50 项任务和 9 个类别。该基准包含 90% 的原生非翻译内容,提供准确率、精确匹配、AUROC 和困惑度等指标。目前排行榜已收录 25 多个不同规模的开源模型。