会前预热
计算机视觉
雷峰网 · GAIR DAO · 2026-04-30
如果回看过去十年的计算机视觉发展,其主线其实非常清晰:从早期以 ImageNet classification 为代表的“识别范式”,到以检测、分割为核心的“结构理解”,再到扩散模型推动的“生成范式”,视觉研究始终围绕一个核心目标展开——让机器更准确地“看见世界”。 然而,这一路径在近两年开始出现明显的边界:当模型已经可以在静态图像上达到接近甚至超过人类的感知水平时,“看得更准”本身,正在变...
会前预热
生成式模型
雷峰网 · GAIR DAO · 2026-04-30
在过去几年中,视频生成技术取得了令人瞩目的进展。从基于扩散模型的方法到大规模视频基础模型,生成结果在视觉质量上已经逐渐逼近真实世界。然而,当我们进一步审视这些模型时,一个更本质的问题开始显现:它们究竟是在“理解世界”,还是仅仅在“拟合像素分布”? 传统视频生成方法大多建立在 2D 图像空间之上,通过逐帧建模来合成动态内容。这种范式虽然在短时间尺度和视觉表现上表现出色,但也暴露出一系列根本性局...
会前预热
生成式模型
雷峰网 · GAIR DAO · 2026-04-27
一、研究背景 多模态生成是计算机视觉最活跃的研究方向之一。虚拟试衣(Virtual Try-on)是电商零售核心场景,但传统方法严重依赖人体姿态识别、图像分割等辅助模型,流程冗长,外部误差累积明显;生成质量上,面料质感失真、蕾丝花纹丢失、透明材质处理困难等问题长期困扰用户体验,制约了商业落地。RefTON 开创性地引入服装上身参考图作为视觉指引,仅需人物原图与目标服装图,就能实现高保真的虚拟...
会前预热
计算机视觉
雷峰网 · GAIR DAO · 2026-04-24
一、研究背景 视觉重定位(Visual Relocalization)是机器人和自动驾驶的基础能力:当系统回到一个曾经建图的场景时,如何通过单张图像精准估计6自由度相机位姿。这一任务在弱纹理场景、图像数据库稀疏或视角变化剧烈时面临严峻挑战。现有方法存在三个核心痛点:一是图像稀疏瓶颈,数据库图像有限时,初始位姿检索和粗匹配精度下降明显;二是特征匹配局限,单一特征类型难以兼顾粗匹配的全局视角覆盖...
会前预热
生成式模型
雷峰网 · GAIR DAO · 2026-04-22
很多人在使用文生图工具时都会遇到类似的情况,输入一段很清晰的描述,希望画面中人物站在左边、动物在右边,或者希望海报上出现一段完整可读的文字,但生成结果却常常让人失望。 要么位置关系混乱,要么文字变形,要么整体画面看起来不自然。继续调整参数,有时结果会更接近描述,但画面质量却明显下降,颜色变得奇怪,结构开始扭曲。反复尝试之后,往往需要生成十几张甚至几十张图,才能勉强挑出一张可用的。 这种既想让...
会前预热
生成式模型
雷峰网 · GAIR DAO · 2026-04-22
过去一段时间,AI 视频最让人惊艳的,往往都是前几秒。人物状态自然,光影氛围到位,动作也足够流畅,很容易让人产生一种感觉,视频生成已经离真正可用不远了。 但行业越往前走,问题也越清楚,真正难的从来不是做出一小段漂亮画面,而是能不能把这种质量稳定地延续下去。一旦视频时长被拉长,很多模型就会开始慢慢失稳,人物、场景和动作表面上还在延续,内部却已经出现细节漂移和时序松动。 这也是为什么,今天 AI...
会前预热
生成式模型
雷峰网 · GAIR DAO · 2026-04-22
过去两年,视频生成的发展几乎是指数级的。从最早只能生成模糊片段,到如今可以生成具有叙事结构、光影一致性甚至风格控制的长视频,行业表面上已经接近一个阶段性成熟。 但如果把评价标准从“能不能生成一段视频”稍微提高到“能不能控制镜头”,问题就会完全暴露出来。当前大多数模型仍然停留在一种近似二维的生成范式中,它们擅长在时间上延续视觉模式,却缺乏对空间结构的稳定建模能力。 一旦涉及视角变化,模型往往无...
会前预热
生成式模型
雷峰网 · GAIR DAO · 2026-04-09
很多人都经历过这样一种落差。现实里的空间是立体的,是包围人的,是可以转身、抬头、回望的,可一旦被手机或相机拍成视频,世界立刻被压缩成一个窄窄的取景框。 暴雨来临前的天空并不只在镜头正前方,深夜街区的压迫感也不只来自路面,商场中庭、地下车站、展馆大厅、建筑内部,这些真正让人产生现场感的东西,往往恰恰存在于镜头之外。我们记录下了事件,却没有真正留住空间,保存了画面,却没有保存身处其中的感觉。 这...
会前预热
生成式模型
雷峰网 · GAIR DAO · 2026-03-30
过去两年,视频生成模型的发展呈现出一个非常明显的趋势:视觉质量在快速逼近真实世界。从最初的模糊片段,到如今可以生成具有复杂场景、多主体交互甚至长时序叙事的视频,模型在纹理、光影和语义一致性方面已经取得了长足进步。一些系统甚至被称为通用世界模型的雏形,试图通过数据驱动的方式重建现实世界的运行规律。 但随着分辨率和时长的提升,一个更深层的问题开始暴露出来:模型在视觉上越来越真实,却在物理上仍然不...
会前预热
具身智能
雷峰网 · GAIR DAO · 2026-03-24
试想一下,当机器人伸手去拿桌上的杯子,刚把杯子抬起来,又停住了,随后把它放回原位,然后再次伸手去拿。同一个动作,它重复了一遍,像是忘记了自己刚刚已经做过什么。类似的情况在真实环境中并不少见:按钮明明已经按下,却还在反复按,明明抽屉已经关好,却还在继续推。 这些失败并不是因为它“看不清”,而是因为它缺乏一套能够模拟时空演化的“世界模型”。当前的视觉语言行动模型虽然能够理解图像与指令,但在连续任...