会前预热
多模态
雷峰网 · GAIR DAO · 2026-05-19
代码驱动的视觉感知,正在为大模型补上「看」这门必修课。 作者丨陈淑瑜 编辑丨岑 峰 如果把过去几年多模态大模型在STEM领域的进展放在一起审视,会发现一个相当微妙的错位。研究者们几乎把全部精力都押在了推理能力的提升上,强化学习、思维链、自我纠错……各种花式推理策略层出不穷,模型在文本推理基准上的得分也确实在节节攀升。 但一个尴尬的事实始终摆在那里:当模型被丢进一道需要看图才能解答的几何题时,...
会前预热
计算机视觉
雷峰网 · GAIR DAO · 2026-05-16
视频智能正从画面生成走向运动控制、动态建模、信号理解与真实场景应用。 作者丨郑佳美 编辑丨马晓宁 过去,视频生成更多是在解决“像不像”的问题:人物是否清晰,画面是否流畅,风格是否统一。但随着模型能力提升,视频真正困难的部分开始显现出来——它不是一组漂亮帧的连续播放,而是一个由时间、空间、运动、相机、光照和物理信号共同构成的动态系统。 只要模型无法理解这些隐含结构,它生成的视频就可能看似逼真,...
会前预热
生成式模型
雷峰网 · GAIR DAO · 2026-05-15
2026年,大厂们不再比谁的GPU多,而是比谁的算法更聪明。 作者丨陈淑瑜 编辑丨岑 峰 一个在2026年越来越难以回避的问题是:如果H100全面断供、电费账单直线飙升、训练一次大模型的成本足以买下一家创业公司,大模型的故事还讲得下去吗? 也许顶级学术会议的论文能给大家一个新的启发。 今年的CVPR收到了四千余篇投稿,其中一个清晰的信号正在浮现:大厂不再比拼GPU数量,而是较量如何把GPU用...
会前预热
多模态
雷峰网 · GAIR DAO · 2026-04-30
【封面图片来源:网站名微信公众号,所有者:机器之心】 一、背景 在多模态大模型飞速发展的今天,如何精准地将密集的"图像块(Patch)"表示与对应概念的"文本嵌入"对齐,依然是阻碍模型迈向更细粒度理解的"致命弱点"。研究团队在消融实验中发现了一个反直觉现象:通过块级别蒸馏出的小参数学生模型,在零样本分割等密集型图文对齐任务上,性能竟然大幅反超了规模巨大的教师模型!。论文提出 TIPSv2,通...