跳到正文

#开源/仓库

今日 9 条
5月9日周四
  1. Hugging Face Blog37

    Hugging Face Enterprise Hub 通过 AWS 账户升级

    Hugging Face 推出通过 AWS 账户升级 Enterprise Hub 的服务,为企业提供高级安全功能、访问控制、协作工具和计算选项,支持在符合 GDPR 和 SOC2 Type 2 认证的平台内安全构建 AI。升级后,企业可享受单点登录、资源组管理、存储区域选择、审计日志、高级计算选项、私有数据集查看器、在 DGX Cloud 上训练 LLM 等功能。

5月5日周日
5月1日周三
  1. Hugging Face Blog42

    Hugging Face Inference Endpoints 实现Whisper语音识别模型的多功能部署

    Hugging Face Inference Endpoints 支持Whisper语音识别模型,通过自定义推理处理程序,实现自动语音识别(ASR)、说话人分割和推测解码等功能。该方案采用模块化设计,支持多种用例,并使用Pyannote模型进行说话人分割,通过推测解码提高推理速度。用户可通过API调用创建端点,并部署到Inference Endpoints上。

4月30日周二
  1. Hugging Face Blog45

    Hugging Face 探索提升提示词一致性的方法

    Hugging Face 的 Leaderboards and Evals 研究团队发现,LLM 的基准性能与提示词格式密切相关。他们通过实验发现,模型在相同输入信息下,输出结果对提示词格式的微小变化极为敏感。为了提高提示词的一致性,Hugging Face 与 Dottxt 合作,探索了通过结构化生成来约束模型输出,以减少提示词格式变化带来的影响。

4月22日周一
4月19日周五
4月17日周三
  1. Mistral AI85

    Mistral AI 发布 Mixtral 8x22B 开放模型

    Mistral AI 发布了 Mixtral 8x22B 开放模型,该模型具有多语言能力、强大的数学及编码能力,并采用 Apache 2.0 开源许可证,读者可以关注其性能和开源对 AI 社区的影响。

    推荐理由:Mixtral 8x22B 模型在性能和效率方面达到新标准,具有多语言能力和强大的数学及编码能力,开源发布,读者可以关注其性能和开源对 AI 社区的影响。

4月16日周二
  1. Hugging Face Blog70

    Hugging Face 推出 LiveCodeBench 评测基准,全面评估代码 LLMs

    Hugging Face 推出 LiveCodeBench 评测基准,基于 LiveCodeBench,由加州大学伯克利分校、麻省理工学院和康奈尔大学的研究人员开发,用于衡量 LLMs 的代码生成能力。

    推荐理由:LiveCodeBench 评测基准的发布为代码 LLMs 提供了更全面、无污染的评估,有助于了解不同模型的能力和泛化能力。

4月4日周四
3月22日周五
3月20日周三
  1. Hugging Face Blog70

    Hugging Face 发布 Cosmopedia:大规模合成数据集用于预训练大型语言模型

    Hugging Face 发布了 Cosmopedia,一个用于预训练大型语言模型的大规模合成数据集。该数据集包含超过 30 亿个 token,旨在解决传统数据集的局限性,并推动合成数据在 AI 领域的应用。

    推荐理由:Cosmopedia 的发布为 LLM 预训练提供了新的数据集,有助于推动合成数据在 AI 领域的应用。

  2. Hugging Face Blog82

    GaLore:推动消费级硬件上的大型模型训练

    GaLore是一种新的工具,它通过降低内存需求,使得在消费级硬件上训练大型语言模型成为可能,为研究人员和从业者提供了新的可能性。

    推荐理由:GaLore通过降低内存需求,使得在消费级硬件上训练大型语言模型成为可能,为研究人员和从业者提供了新的可能性。

3月18日周一
  1. Hugging Face Blog45

    Optimum 的 PyTorch 量化后端 Quanto 介绍

    Quanto 是一个针对 Optimum 的 PyTorch 量化后端,旨在降低深度学习模型的计算和内存成本,支持多种量化方案,包括线性量化、分组量化等,适用于各种模态。Quanto 可作为 pip 包安装,提供从浮点模型到动态量化模型再到静态量化模型的流畅工作流程,并支持 PyTorch weight_only 和 Safetensors 的序列化。

3月15日周五
3月4日周一
2月29日周四
2月27日周二
2月26日周一
  1. Hugging Face Blog47

    Hugging Face Hub 上的 AI 水印工具与技术

    Hugging Face Hub 提供多种 AI 水印工具,用于标记 AI 生成内容以验证其真实性。这些工具包括在生成过程中嵌入可见或不可见水印,以及使用数据中毒和签名技术来防止非授权图像操纵。水印技术适用于不同类型的数据,如图像、音频、文本等,并面临独特的挑战。Hugging Face Hub 提供开源工具,帮助用户进行不同类型的水印操作。

2月23日周五
2月19日周一
2月14日周三
2月1日周四
1月31日周三
1月19日周五
1月18日周四
1月14日周日
1月12日周五
  1. Hugging Face Blog35

    Hugging Face 推出 HHEM 欺幻觉榜:基于 HF 模板打造的开源评估工具

    Hugging Face 推出基于 Hugging Face Leaderboard 模板的 HHEM 欺幻觉榜,用于评估大型语言模型(LLM)生成文本的幻觉程度。该榜支持开源和商业模型,如 Llama 2、GPT-4 和 Claude,旨在推动 LLM 幻觉评估的民主化。HHEM 使用 Hugging Face Leaderboard 模板,支持动态更新,并鼓励社区提交新模型进行评估。

1月10日周三
  1. Hugging Face Blog70

    Hugging Face发布Unsloth库加速LLM微调

    Hugging Face发布Unsloth库,一个用于加速LLM微调的工具,支持多种NVIDIA GPU和架构,可显著提高微调速度和降低内存使用。

    推荐理由:原文介绍了Unsloth库,一个用于加速LLM微调的工具,读者可以了解其功能和性能提升。

1月4日周四
12月11日周一
  1. Hugging Face Blog82

    混合专家(MoE)模型详解

    本文深入探讨了混合专家(MoE)模型,包括其原理、训练方法、与Transformer的结合以及在实际应用中的挑战和解决方案,对了解MoE模型有重要价值。

    推荐理由:本文深入探讨了混合专家(MoE)模型,包括其原理、训练方法、与Transformer的结合以及在实际应用中的挑战和解决方案,对了解MoE模型有重要价值。

12月6日周三
  1. Hugging Face Blog50

    SetFitABSA:基于SetFit的少样本方面情感分析技术

    SetFitABSA是一种高效的少样本方面情感分析技术,由Intel Labs和Hugging Face共同推出。该技术通过三个步骤进行训练,包括提取方面候选词、方面/非方面分类以及情感极性分类。与基于LLM的方法相比,SetFitABSA无需提示词,训练速度快,且仅需少量标记样本。在少样本场景中,SetFitABSA甚至优于Llama2和T5等生成模型。

12月1日周五
  1. Hugging Face Blog45

    Open LLM Leaderboard: DROP 深度分析

    Open LLM Leaderboard 添加了 DROP 模型评测,但发现多数模型 f1 分数低于 10。分析发现,模型在处理浮点数答案时存在中断问题,且高质量模型生成长答案时 f1 分数反而更低。通过使用换行符作为生成结束标记,新分数与平均性能相关性更好。

11月7日周二