跳到正文

技术方向

多模态 最新动态

文本之外的能力:视觉理解、图文混合、音视频输入输出的模型与产品进展。

9 条精选近 30 天 8 条共收录 14 条

更新

多模态的精选

今天10月9日周五第 1–9 条
  1. TechCrunch · AI82

    OpenAI 随 GPT-6 推出 ChatGPT Intelligent UI 界面

    OpenAI 随 GPT-6 推出 ChatGPT 的 Intelligent UI,让对话加入可交互按钮、定制计算器、图表、可编辑图形和示意图。该功能可用于解释飞机机翼原理、展示食谱、规划徒步路线等,并支持用户调低视觉内容的比例。Intelligent UI 面向 Pro、Plus、Business 和 Enterprise 用户全球上线,免费版及低价 Go 用户于周四获得该功能。

    推荐理由:文章具体展示了 Intelligent UI 如何把文本回答扩展为可交互图表、计算器和示意图,并说明了不同 ChatGPT 用户层级的上线安排。

10月8日周四
  1. Hugging Face Blog74

    Liquid AI 发布面向端侧的多模态决策模型 d1-3B 与 d1-omni-600M

    Liquid AI 发布两款开放权重决策模型 d1-3B 和实验性的 d1-omni-600M,分别支持文本与图像、文本与图像或文本与音频输入。在七个公开数据集上,d1-3B 的平均分为 82.9,d1-omni-600M 为 78.4;d1-3B 在 Jetson AGX Thor 上单个问题延迟为 16 ms,在 Jetson Orin Nano 上为 50 ms。

    推荐理由:文章将模型结构、公开数据集对比和端侧延迟放在一起,便于判断两款决策模型在质量、模态支持与设备部署之间的取舍。

10月7日周三
10月6日周二
10月1日周四
  1. Google DeepMind80

    Google 发布 Gemini 4 Argon,支持 1M tokens 输出并将分阶段开放

    Google 发布新模型 Gemini 4 Argon,面向软件工程、企业知识工作和网络安全防御等复杂长流程任务,当前先向 Fairwind Program 的可信网络防御者开放。

    推荐理由:原文将 Gemini 4 Argon 的长程推理、企业工作流与网络安全能力放在同一发布框架中,并给出价格、评测成绩和分阶段开放计划。

9月29日周二
  1. Microsoft Research60

    Microsoft Research 推出 Quine 生物学 AI 研究系统

    Microsoft Research 推出 Quine,这是一个结合生物学多模态世界模型与交互式研究工具的实验性 AI 研究系统。研究团队在胰腺导管腺癌(PDAC)研究中用它筛选并排序数千种化合物,最高排名化合物在湿实验中产生了最大的预期细胞状态变化,整个流程在一个周末内完成。

    推荐理由:Quine将生物学多模态世界模型与文献、科学工具和湿实验连接起来,并展示了在胰腺癌细胞状态研究中筛选化合物的路径。

9月25日周五
9月16日周三
9月1日周二
  1. Microsoft Research61

    Microsoft Research 发布 GigaPath-Flash 与 GigaTIME-Flash 高效病理基础模型

    Microsoft Research 发布 GigaPath-Flash 和 GigaTIME-Flash 两个开放权重病理基础模型,面向更高效的全切片分析和肿瘤微环境研究。

    推荐理由:文章展示了 GigaPath-Flash 与 GigaTIME-Flash 如何以更低计算成本处理大规模病理数据,并给出模型结构、基准表现与资源估算。