跳到正文

#多模态

今日 0 条
10月15日周四
10月4日周日
10月3日周六
9月30日周三
9月25日周五
9月24日周四
9月23日周三
9月1日周二
  1. Google Research85

    Google Research 发布 TimesFM-3:零样本多变量时间序列预测基础模型

    Google Research 发布了 TimesFM-3,这是一种先进的零样本时间序列基础模型,能够在单次前向传递中实现高度准确的多变量时间序列预测。该模型在多个公开基准测试中取得了最先进的性能。

    推荐理由:TimesFM-3 在多个公开基准测试中取得了最先进的多元和单变量预测性能,为时间序列预测领域带来了新的突破。

7月16日周四
  1. Google Research70

    揭秘扩散模型创造力之谜

    Google Research 发布论文,深入探讨了扩散模型创造力的来源,揭示了神经网络训练过程中的数学原理,并展示了如何通过调整训练过程来提高模型的创造力。

    推荐理由:原文深入探讨了扩散模型创造力的来源,揭示了神经网络训练过程中的数学原理,对理解扩散模型的工作机制具有重要意义。

6月22日周一
5月12日周二
  1. Google DeepMind83

    Google DeepMind 发布 Co-Scientist:基于 Gemini 的多智能体科研助手

    Google DeepMind 在 Nature 发表研究并推出 Co-Scientist,这是一个基于 Gemini 构建的多智能体 AI 系统,旨在通过迭代生成、辩论和进化来加速复杂科学问题的假设发现。

    推荐理由:原文展示了基于 Gemini 的多智能体系统如何通过辩论和进化机制生成科学假设,并提供了具体的生物医学应用案例及注册入口。

5月8日周五
  1. Berkeley AI Research70

    自适应并行推理:高效推理缩放的新范式

    本文介绍了自适应并行推理,这是一种提高推理效率的新范式,通过让推理模型自主决定何时分解和并行化子任务,以及如何协调它们,从而提高推理效率。

    推荐理由:本文介绍了自适应并行推理,这是一种提高推理效率的新范式,读者可以了解其原理和应用前景。

4月30日周四
4月21日周二
  1. Hugging Face Blog70

    QIMMA:首个以质量优先的阿拉伯语LLM评测平台

    QIMMA是一个针对阿拉伯语LLM的评测平台,通过质量验证和代码评估,为阿拉伯语NLP研究提供了更可靠的数据。QIMMA整合了14个源基准的109个子集,涵盖了7个领域,包括文化、STEM、法律、医疗、安全、诗歌和文学以及软件开发。

    推荐理由:QIMMA是一个针对阿拉伯语LLM的评测平台,通过质量验证和代码评估,为阿拉伯语NLP研究提供了更可靠的数据。

4月16日周四
4月13日周一
  1. Google DeepMind70

    Google DeepMind 发布 Gemini Robotics-ER 1.6:增强具身推理以支持真实世界机器人任务

    Google DeepMind 发布 Gemini Robotics-ER 1.6,这是一款专为机器人设计的高层推理模型,旨在通过增强的空间推理和多视角理解提升物理世界的自主性。

    推荐理由:原文详细拆解了空间推理、成功检测及仪表读取等核心能力,并给出了API入口与开发者示例,适合评估其在机器人自主作业中的实际落地价值。

4月3日周五
  1. Google DeepMind87

    Google DeepMind 发布 Gemma 4:号称每字节最强开源模型

    Google DeepMind 正式发布 Gemma 4 系列开源模型,采用 Apache 2.0 许可证,旨在提供先进的推理能力和智能体工作流支持。该系列包含 E2B、E4B、26B MoE 和 31B Dense 四种尺寸,其中 31B 模型在 Arena AI 文本排行榜上位列全球第三。

    推荐理由:官方发布了基于 Apache 2.0 许可的 Gemma 4 系列,涵盖从移动端到工作站的多种规格,开发者可据此评估其在本地推理和智能体工作流中的实际部署潜力。

3月29日周日
  1. Google DeepMind65

    Google DeepMind 展示由 Gemini 驱动的 AI 鼠标指针原型

    Google DeepMind 发布由 Gemini 驱动的 AI 鼠标指针实验性演示,旨在让指针不仅识别指向内容,还能理解用户意图。该系统遵循四项交互原则,包括保持工作流连续性、利用“这个/那个”等自然语言简写以及将像素转化为可操作实体。目前这些理念正被整合进 Chrome 和 Google AI Studio 等产品中,允许用户仅通过指向和语音即可执行图像编辑或地图查询等操作。

    推荐理由:原文展示了基于 Gemini 的实验性 AI 指针,通过视觉与语义上下文理解替代传统文本提示词,为跨应用交互提供了新的设计思路。

3月26日周四
  1. Google DeepMind62

    Google DeepMind 发布 Lyria 3 Pro 音乐模型并扩展至多个产品

    Google DeepMind 推出 Lyria 3 Pro,这是其最先进的音乐生成模型,支持创建长达 3 分钟的曲目,并具备对前奏、主歌、副歌和桥段等音乐结构的理解与定制能力。

    推荐理由:Lyria 3 Pro 支持生成长达 3 分钟的曲目并具备结构感知能力,同时向 Vertex AI、Gemini 等更多平台开放,为不同层级的创作者提供可控的音乐生成入口。

3月18日周三
  1. Google Research58

    Google Research 回顾十年 AI 医疗进展:从创新到真实场景落地

    Google Research 发布文章总结其在医疗健康领域十年的计算机科学研究成果,重点介绍了 AI 在个性化护理、临床协作及开发者生态中的应用。文中详细阐述了 Personal Health Agent (PHA) 如何通过整合多模态数据提供长期健康支持,以及 AMIE 多智能体系统在解读复杂病历和影像方面的能力。

  2. Google Research78

    Google Research 与 NHS 合作发表两项研究:AI 辅助乳腺癌筛查提升检出率并减少工作量

    Google Research 与英国 NHS 合作开展 AIMS 研究,并在 Nature Cancer 发表两项配套论文,评估基于 AI 的乳腺癌检测系统在真实临床工作流中的表现。

    推荐理由:Google Research 联合 NHS 在 Nature Cancer 发表两项研究,验证 AI 辅助乳腺癌筛查能提升检出率并显著降低放射科医生工作量。

3月12日周四
  1. Google Research78

    Google 在 Flood Hub 推出 AI 驱动的城市山洪预测功能

    Google Research 宣布在 Flood Hub 平台上线城市山洪预测功能,利用新 AI 方法提前 24 小时预测风险。该模型通过 Gemini 分析新闻报道构建 Groundsource 数据集以弥补历史数据缺失,仅依赖全球气象产品即可实现覆盖,旨在缩小发展中国家与发达国家间的预警差距。

    推荐理由:原文介绍了基于AI的城市山洪预警功能,读者可了解其如何利用非结构化数据解决全球南方缺乏监测设施的问题。

  2. Google Research68

    Google Research 推出 Groundsource:利用 Gemini 将新闻报道转化为洪水历史数据

    Google Research 推出 Groundsource 可扩展方法论,利用 Gemini 大语言模型将非结构化的全球新闻报道转化为可操作的历史数据。首个开放获取的数据集包含来自 150 多个国家的 260 万条城市山洪记录,旨在解决自然灾害预测中的数据稀缺问题。

    推荐理由:Google Research 发布 Groundsource 方法,利用 Gemini 将全球新闻转化为结构化洪水历史数据,为灾害预测提供新基线。

3月7日周六
3月4日周三
  1. Google DeepMind65

    Google DeepMind 发布 Gemini 3.1 Flash-Lite 模型

    Google DeepMind 推出 Gemini 3.1 Flash-Lite,这是其最快且最具成本效益的 Gemini 3 系列模型,现已通过 Google AI Studio 和 Vertex AI 向开发者和企业开放预览。

    推荐理由:原文给出了 Gemini 3.1 Flash-Lite 的定价、速度提升数据及基准测试得分,读者可据此评估其在高频工作负载中的性价比与性能表现。

2月27日周五
2月19日周四
  1. Google DeepMind65

    Gemini 应用推出 Lyria 3 音乐生成功能

    Gemini 应用现已集成 Google DeepMind 最新的音乐生成模型 Lyria 3,用户可通过文本描述或上传图片在几秒钟内生成 30 秒的高质量音乐片段。

    推荐理由:Gemini 应用集成 Lyria 3 模型,支持从文本或图片生成带歌词的 30 秒音乐,并嵌入 SynthID 水印以增强 AI 内容可识别性。

2月18日周三
  1. Google Research32

    Google Research 提出 MapTrace:利用 Gemini 2.5 Pro 和 Imagen-4 生成合成数据教 AI 读地图

    Google Research 推出 MapTrace,通过自动化流水线解决多模态大模型在地图路径追踪上的空间推理缺陷。该方案利用 Gemini 2.5 Pro 和 Imagen-4 生成并筛选高质量合成数据,开源了 200 万组问答对。实验表明,仅用 23,000 条路径数据微调即可显著提升模型的细粒度空间理解能力。

2月10日周二
  1. Google Research40

    Perch 2.0:基于鸟类训练的 AI 模型如何迁移至水下鲸类识别

    Google DeepMind 发布的 Perch 2.0 生物声学基础模型虽主要基于鸟类数据训练,却成功迁移至水下任务。该模型在 NOAA PIPAN、ReefSet 和 DCLDE 数据集上表现优异,能有效分类须鲸及虎鲸亚种。其嵌入向量结合逻辑回归的少样本学习方案,大幅降低了构建自定义海洋声景分类器的计算成本。

2月5日周四
2月4日周三
  1. Google Research68

    Google Research 宣布与 Included Health 合作开展全美首个真实世界虚拟护理 AI 随机研究

    Google Research 宣布与美国医疗服务提供商 Included Health 合作,待 IRB 批准后启动一项全美范围的随机对照研究,以评估对话式 AI 在真实世界虚拟护理工作流程中的表现。

    推荐理由:Google Research 联合 Included Health 启动全美随机对照试验,旨在通过真实临床数据验证对话式 AI 在虚拟护理中的安全性与效用。

1月30日周五
  1. Google DeepMind80

    Google DeepMind 向美国 Google AI Ultra 订阅者推出 Project Genie 交互世界原型

    Google DeepMind 正式向美国地区 18 岁以上的 Google AI Ultra 订阅者开放 Project Genie 实验性研究原型。该工具由 Genie 3、Nano Banana Pro 和 Gemini 驱动,支持通过文本或图像提示创建、探索和重混交互式世界,并能在移动时实时生成前方路径。

    推荐理由:官方开放了基于 Genie 3 的交互式世界生成原型,用户可体验实时路径生成与场景重混,适合关注世界模型落地形态的读者。

1月23日周五
  1. Google Research33

    Google Research 提出小模型意图提取分解方法

    Google Research 在 EMNLP 2025 发表研究,提出通过“屏幕摘要+意图提取”的两阶段分解工作流,使小多模态大语言模型(MLLM)能在设备端实现 superior 的用户意图理解。该方法在 Gemini 和 Qwen2 基座模型上验证,其中 Gemini 1.5 Flash 8B 结合此策略的效果可与 Gemini 1.5 Pro 媲美,且成本与速度更优。

1月16日周五
1月14日周三
  1. Google Research73

    Google Research 发布 MedGemma 1.5 4B 与 MedASR 医疗语音识别模型

    Google Research 发布开源医疗生成式 AI 模型 MedGemma 1.5 4B 和医疗自动语音识别模型 MedASR。

    推荐理由:原文给出了 MedGemma 1.5 4B 在 CT、MRI 及病理图像上的具体精度提升数据,以及 MedASR 相比 Whisper large-v3 的医疗听写错误率降低幅度,为开发者评估模型能力边界提供了量化依据。

  2. Google DeepMind68

    Google DeepMind 发布 Veo 3.1 Ingredients to Video 更新:增强一致性、创意与控制力

    Google DeepMind 发布 Veo 3.1 Ingredients to Video 更新,提升了基于参考图像生成视频的角色与背景一致性,并支持原生 9:16 垂直视频输出及 1080p/4K 分辨率升级。

    推荐理由:官方详细说明了 Veo 3.1 在角色一致性、垂直原生输出及高分辨率升级上的具体改进,并明确了各平台入口。

11月20日周四
  1. OpenAI News70

    OpenAI 发布 GPT-5 加速科学进步研究案例

    OpenAI 发布 GPT-5 在加速科学进步方面的研究案例,展示了 AI 与研究人员如何合作生成证明、发现新见解并重塑发现速度。

    推荐理由:OpenAI 发布了 GPT-5 在加速科学进步方面的研究案例,展示了 AI 与研究人员如何合作生成证明、发现新见解并重塑发现速度。