跳到正文

多模态

文本之外的能力:视觉理解、图文混合、音视频输入输出的模型与产品进展。

最新精选

第 41–47 条 · 共 47 条
5月13日周一
4月17日周三
  1. Mistral AI85

    Mistral AI 发布 Mixtral 8x22B 开放模型

    Mistral AI 发布了 Mixtral 8x22B 开放模型,该模型具有多语言能力、强大的数学及编码能力,并采用 Apache 2.0 开源许可证,读者可以关注其性能和开源对 AI 社区的影响。

    推荐理由:Mixtral 8x22B 模型在性能和效率方面达到新标准,具有多语言能力和强大的数学及编码能力,开源发布,读者可以关注其性能和开源对 AI 社区的影响。

3月5日周二
  1. Hugging Face Blog65

    Hugging Face 发布 ConTextual 数据集,评估多模态模型在文本丰富场景中的推理能力

    Hugging Face 发布了 ConTextual 数据集,用于评估多模态模型在文本丰富场景中的推理能力。该数据集包含 506 个具有挑战性的指令,涵盖了 8 个现实世界的视觉场景。

    推荐理由:ConTextual 数据集的发布为评估多模态模型在文本丰富场景中的推理能力提供了新的基准,有助于推动相关领域的研究进展。

5月8日周一
  1. Hugging Face Blog65

    文本到视频模型研究进展

    本文深入探讨了文本到视频模型的研究进展,包括挑战、方法和最新成果,如Phenaki、Make-A-Video、NUWA、VideoGPT、CogVideo、Video Diffusion Models (VDM)、MagicVideo、Tune-a-Video、Video LDM、Text2Video-Zero、Runway Gen1和Gen2、NUWA-XL等。

    推荐理由:本文深入探讨了文本到视频模型的研究进展,包括挑战、方法和最新成果,对了解该领域的发展具有重要意义。

4月26日周三
2月3日周五
  1. Hugging Face Blog70

    深入探讨视觉-语言模型

    本文介绍了视觉-语言模型的研究进展,包括训练策略、应用领域和开源资源,对了解该领域有重要价值。

    推荐理由:本文介绍了视觉-语言模型的研究进展,包括训练策略、应用领域和开源资源,对了解该领域有重要价值。

11月30日周三
  1. Hugging Face Blog70

    VQ-Diffusion:一种基于离散潜在空间的图像生成模型

    VQ-Diffusion 是由中国科学院大学和微软共同开发的一种条件潜在扩散模型,它使用离散潜在空间进行噪声和去噪过程,为图像生成领域带来了新的研究方向。

    推荐理由:VQ-Diffusion 是一种新颖的图像生成模型,其独特的离散潜在空间处理方式为图像生成领域带来了新的研究方向。