跳到正文
今日 2 条
8月1日周二
  1. Hugging Face Blog45

    Hugging Face开源SD-Small和SD-Tiny压缩模型知识蒸馏代码和权重

    Segmind开源了其压缩模型SD-Small和SD-Tiny的知识蒸馏代码和权重,这些模型在知识蒸馏技术训练下,参数量分别比基础模型减少了35%和55%,同时保持了与基础模型相当的图像保真度。开源代码和预训练检查点可在Hugging Face上获取,蒸馏模型在推理速度上比原始模型快100%。

7月18日周二
7月17日周一
  1. Hugging Face Blog77

    Hugging Face 发布开源文本生成和大型语言模型生态系统

    Hugging Face 发布了新的开源文本生成和大型语言模型生态系统,包括 Llama 2 模型和其他开源模型,以及用于模型部署和微调的工具。

    推荐理由:原文介绍了 Hugging Face 平台上开源文本生成和大型语言模型生态系统的最新发展,读者可以了解最新的模型和工具,以及它们如何改变现有工作流。

7月14日周五
6月29日周四
  1. Hugging Face Blog70

    Hugging Face Blog:加速视觉-语言模型:BridgeTower在Habana Gaudi2上的应用

    Hugging Face Blog发布了一篇关于加速视觉-语言模型BridgeTower在Habana Gaudi2上的应用的博客文章。文章介绍了BridgeTower模型在Habana Gaudi2硬件加速器上的性能提升,以及如何通过Optimum Habana软件库利用这些特性。

    推荐理由:原文给出了能力变化和开放入口,读者可以据此判断它会怎样改变现有工作流。

6月23日周五
6月19日周一
6月12日周一
  1. Hugging Face Blog65

    大型语言模型能否像人类一样标注数据?

    Hugging Face 博客发布了一篇论文,探讨了大型语言模型在数据标注方面的能力,并介绍了 Open LLM Leaderboard 评估套件的扩展。

    推荐理由:该研究探讨了大型语言模型在数据标注方面的能力,为读者提供了对模型性能的评估方法。

6月6日周二
6月5日周一
  1. Hugging Face Blog85

    Falcon 模型发布:Hugging Face 生态系统中新的大型语言模型

    Falcon 模型由阿布扎比的科技创新研究所创建,是 Hugging Face 生态系统中的新大型语言模型。Falcon-40B 是第一个具有与许多当前闭源模型相媲美能力的“真正开放”模型。

    推荐理由:原文介绍了 Falcon 模型的特点和功能,以及如何在 Hugging Face 生态系统中使用它们,读者可以了解 Falcon 模型的最新进展和应用潜力。

5月31日周三
5月25日周四
5月24日周三
  1. Hugging Face Blog85

    Hugging Face 发布 bitsandbytes 库,实现 4 位量化并推出 QLoRA 技术

    Hugging Face 发布了 bitsandbytes 库,支持 4 位量化,并推出了 QLoRA 技术,用于在 4 位量化模型上进行微调。这项技术使得在单个 48GB GPU 上微调 65B 参数模型成为可能,同时保持了 16 位微调任务的全性能。

    推荐理由:原文给出了能力变化和开放入口,读者可以据此判断它会怎样改变现有工作流。

5月23日周二
  1. Hugging Face Blog42

    InstructPix2Pix:通过指令微调 Stable Diffusion 进行图像处理

    Hugging Face 探索了使用 InstructPix2Pix 指令微调 Stable Diffusion,使其能够根据用户指令对输入图像进行编辑。通过创建指令提示数据集,研究人员成功地将 FLAN V2 的指令微调理念应用于图像翻译和图像处理任务,如卡通化、去雨和去噪。实验结果表明,这种方法能够有效地提高模型对特定图像编辑指令的执行能力。

5月16日周二
5月15日周一
  1. Hugging Face Blog60

    Hugging Face 推出 RWKV 模型:结合 RNN 和 Transformer 优势的新架构

    Hugging Face 推出 RWKV 模型,结合了 RNN 和 Transformer 的优势,具有长上下文处理能力和高效的训练速度。该模型已集成到 Hugging Face transformers 库中,并支持多种应用场景。

    推荐理由:原文介绍了 RWKV 模型的特点和优势,读者可以了解其在自然语言处理领域的应用潜力。

5月11日周四
5月8日周一
  1. Hugging Face Blog65

    文本到视频模型研究进展

    本文深入探讨了文本到视频模型的研究进展,包括挑战、方法和最新成果,如Phenaki、Make-A-Video、NUWA、VideoGPT、CogVideo、Video Diffusion Models (VDM)、MagicVideo、Tune-a-Video、Video LDM、Text2Video-Zero、Runway Gen1和Gen2、NUWA-XL等。

    推荐理由:本文深入探讨了文本到视频模型的研究进展,包括挑战、方法和最新成果,对了解该领域的发展具有重要意义。

5月4日周四
  1. Hugging Face Blog85

    StarCoder:一款领先的代码大语言模型发布

    StarCoder 是一款基于 GitHub 数据训练的代码大语言模型,具有超过 15B 参数和 1 万亿个 token 的上下文长度。它在多个编程基准测试中优于现有的开源代码 LLM,并与 OpenAI 的 Codex 模型相媲美。StarCoder 可以用于自动完成代码、根据指令修改代码以及用自然语言解释代码片段。

    推荐理由:原文给出了能力变化和开放入口,读者可以据此判断它会怎样改变现有工作流。

4月26日周三
4月14日周五
4月12日周三
  1. Hugging Face Blog65

    Substra:构建隐私保护AI的联邦学习框架

    Substra是一个开源的联邦学习框架,旨在解决数据隐私和安全问题,通过联邦学习技术允许使用多个数据提供者的数据进行模型训练,而不必共享原始数据,从而保护数据隐私并加速机器学习研究。

    推荐理由:原文介绍了Substra作为开源联邦学习框架的作用,以及其在医疗研究中的应用,读者可以了解联邦学习如何保护数据隐私并加速机器学习研究。

4月5日周三
3月24日周五
3月23日周四
  1. OpenAI News67

    ChatGPT 发布插件功能

    ChatGPT 实现了对插件的初始支持,插件是专为语言模型设计的工具,旨在帮助 ChatGPT 访问最新信息、运行计算或使用第三方服务。

    推荐理由:原文给出了插件功能和支持第三方服务,读者可以据此判断它会怎样改变现有工作流。

3月14日周二
  1. OpenAI News93

    OpenAI 发布 GPT-4 大语言模型

    OpenAI 正式发布 GPT-4,这是其最新一代大语言模型。GPT-4 支持文本和图像等多模态输入,并在各类学术和专业考试中展现出接近人类水平的性能。

    推荐理由:官方确认 GPT-4 具备多模态输入能力,并强调其在专业考试中的表现接近人类水平。

  2. OpenAI News70

    GPT-4发布

    GPT-4发布,能够生成、编辑和迭代与用户在创意和写作任务上的合作,例如创作歌曲、编写剧本或学习用户的写作风格。

    推荐理由:原文给出了能力变化和开放入口,读者可以据此判断它会怎样改变现有工作流。

3月9日周四
3月6日周一
  1. Hugging Face Blog85

    Kakao Brain 发布 ViT 和 ALIGN 模型

    Kakao Brain 和 Hugging Face 发布了新的开源图像-文本数据集 COYO 和基于该数据集训练的两个视觉语言模型 ViT 和 ALIGN。这是首个公开的免费和开源的 ALIGN 模型,也是首个与训练数据集一起发布的 ViT 和 ALIGN 模型。Kakao Brain 的 ViT 和 ALIGN 模型在性能上与 Google 的版本相当,并且演示了如何使用这些模型。

    推荐理由:原文给出了能力变化和开放入口,读者可以据此判断它会怎样改变现有工作流。

3月2日周四
2月24日周五
2月15日周三
  1. Hugging Face Blog67

    BLIP-2:零样本图像到文本生成

    Salesforce 研究推出的 BLIP-2 可用于图像字幕、提示图像字幕、视觉问答和基于聊天的提示,它是一种零样本视觉语言模型,可用于多种图像到文本任务,具有高效和有效的方法,适用于多种图像理解场景,特别是示例稀缺的情况下。

    推荐理由:BLIP-2 是一种零样本视觉语言模型,可用于多种图像到文本任务,具有高效和有效的方法,适用于多种图像理解场景,特别是示例稀缺的情况下。该模型通过在预训练模型之间添加一个 Transformer 来弥合视觉和自然语言模态之间的差距。新的预训练范式使该模型能够跟上各个模态的进步。

2月10日周五
  1. Hugging Face Blog70

    Hugging Face发布PEFT库,实现高效参数微调

    Hugging Face发布了PEFT库,提供参数高效的微调技术,用于在下游任务和数据集上微调大型语言模型,同时节省计算和存储资源。

    推荐理由:原文介绍了PEFT方法在微调大型语言模型时的效率和效果,读者可以了解其如何应用于不同任务和数据集,以及如何使用PEFT库进行模型微调。

2月8日周三
1月26日周四
  1. Hugging Face Blog70

    Hugging Face推出LoRA技术,用于高效Stable Diffusion模型微调

    Hugging Face推出LoRA技术,用于高效Stable Diffusion模型微调。LoRA技术通过冻结预训练模型权重并注入可训练层,大大减少了可训练参数数量和GPU内存需求,从而提高了模型微调的效率和效果。

    推荐理由:原文介绍了LoRA技术及其在Stable Diffusion模型微调中的应用,读者可以了解如何利用LoRA提高模型微调的效率和效果。

1月24日周二
  1. Hugging Face Blog65

    对话智能体有何用途?

    本文详细介绍了对话智能体的技术,包括RLHF、IFT、CoT等,并分析了这些技术在对话智能体中的应用和效果。

    推荐理由:文章详细介绍了对话智能体的技术,包括RLHF、IFT、CoT等,对了解对话智能体的发展具有重要意义。

12月21日周三
  1. Hugging Face Blog45

    CLIPSeg:零样本图像分割模型指南

    CLIPSeg,一款零样本图像分割模型,使用🤗 transformers,可创建粗略分割掩码,适用于机器人感知、图像修复等多种任务。该模型基于CLIP模型,通过Transformer解码器实现零样本分割,支持视觉提示功能,但输出分辨率较低。若需更精确的分割,可使用Segments.ai等工具进行微调。