会前预热
大语言模型
雷峰网 · Guangwei.mai · 2026-04-30
过去几年,视觉生成与视觉理解领域的技术推进,整体上始终沿着一条相对明确的路径展开:当一套建模范式被验证有效之后,后续的大量工作往往都会围绕这套既有框架持续做模型扩容、训练增强、采样优化与局部模块修补,以此换取更高的性能上限。
无论是扩散生成、视频 world model,还是动作建模与视觉匹配,主流研究在很长时间里都更多表现为对既有系统的持续加固,而不是对底层假设本身的重新审视。
但从今...
会前预热
大语言模型
雷峰网 · Guangwei.mai · 2026-04-30
如果回看过去十年的计算机视觉发展,其主线其实非常清晰:从早期以 ImageNet classification 为代表的“识别范式”,到以检测、分割为核心的“结构理解”,再到扩散模型推动的“生成范式”,视觉研究始终围绕一个核心目标展开——让机器更准确地“看见世界”。
然而,这一路径在近两年开始出现明显的边界:当模型已经可以在静态图像上达到接近甚至超过人类的感知水平时,“看得更准”本身,正在...
会前预热
具身智能
雷峰网 · Guangwei.mai · 2026-04-30
在过去几年中,视频生成技术取得了令人瞩目的进展。从基于扩散模型的方法到大规模视频基础模型,生成结果在视觉质量上已经逐渐逼近真实世界。然而,当我们进一步审视这些模型时,一个更本质的问题开始显现:它们究竟是在“理解世界”,还是仅仅在“拟合像素分布”?
传统视频生成方法大多建立在 2D 图像空间之上,通过逐帧建模来合成动态内容。这种范式虽然在短时间尺度和视觉表现上表现出色,但也暴露出一系列根本性...
会前预热
大语言模型
雷峰网 · Guangwei.mai · 2026-04-28
【封面图片来源:网站名中国科学院自动化研究所,所有者:GThinker】
一、研究背景
多模态大语言模型(MLLM)在文本推理领域已展现出强大的迭代反思能力,但在涉及复杂视觉场景的推理任务中,依然存在明显缺陷——研究团队将其定义为视觉惯性(Visual Inertia)现象:尽管 MLLM 在文本语境中擅长进行多轮迭代推理并修正错误,但在视觉推理过程中往往不加质疑地依赖最...
会前预热
计算机视觉
雷峰网 · Guangwei.mai · 2026-04-28
【封面图片来源:网站名中国科学院自动化研究所,所有者:MeanFuser】
一、研究背景
端到端自动驾驶近年来取得了飞速进展,生成模型在多模态轨迹规划中展现出巨大潜力。现有基于锚点引导的生成方法能有效刻画驾驶行为的不确定性并提升整体性能,但存在一个内在矛盾:这类方法依赖离散锚点词汇表,并要求其在测试阶段充分覆盖轨迹分布以保证鲁棒性,从而在词汇规模与模型性能之间引入不可调...
会前预热
计算机视觉
雷峰网 · Guangwei.mai · 2026-04-27
一、研究背景
多模态生成是计算机视觉最活跃的研究方向之一。
虚拟试衣(Virtual Try-on)是电商零售核心场景,但传统方法严重依赖人体姿态识别、图像分割等辅助模型,流程冗长,外部误差累积明显;生成质量上,面料质感失真、蕾丝花纹丢失、透明材质处理困难等问题长期困扰用户体验,制约了商业落地。RefTON 开创性地引入服装上身参考图作为视觉指引,仅需人物原图与目标服装...
会前预热
具身智能
雷峰网 · Guangwei.mai · 2026-04-24
一、研究背景
视觉重定位(Visual Relocalization)是机器人和自动驾驶的基础能力:当系统回到一个曾经建图的场景时,如何通过单张图像精准估计6自由度相机位姿。这一任务在弱纹理场景、图像数据库稀疏或视角变化剧烈时面临严峻挑战。
现有方法存在三个核心痛点:一是图像稀疏瓶颈,数据库图像有限时,初始位姿检索和粗匹配精度下降明显;二是特征匹配局限,单一特征类型难...
会前预热
具身智能
雷峰网 · Guangwei.mai · 2026-04-24
一、研究背景
大型视觉语言模型(VLM)虽然在2D图像理解和语言推理上表现优异,但在3D空间推理能力上存在明显短板——它们往往难以准确理解物体的相对位置关系、深度信息及3D几何结构,直接制约了其在机器人、自动驾驶等具身智能场景中的应用。
现有多模态融合方法主要存在两大问题:一是浅层融合(Early Fusion)仅在模型输入或早期阶段融合视觉与语言,难以在高层建立细粒度...
会前预热
计算机视觉
雷峰网 · Guangwei.mai · 2026-04-24
一、研究背景
3D 高斯泼溅(3DGS)凭借其高质量实时渲染能力,已成为新视角合成领域的主流方法。然而随着各类变体涌现,学术界面临一个困境:这些工作往往混杂了实现层面的工程优化与算法层面的创新,导致难以公平评估哪些改进真正有价值,学术比较缺乏统一基准。
与此同时,3DGS 的训练耗时(通常30分钟以上)成为快速迭代实验的瓶颈,显存占用(12GB+)也限制了其在低资源环境下...
会前预热
大语言模型
雷峰网 · Guangwei.mai · 2026-04-24
一、研究背景
从视频中准确理解并重建人体3D运动是计算机视觉的重要研究方向,在体育赛事分析、VR/AR、人机交互以及医疗康复等领域具有广泛应用价值。然而,在真实复杂场景中,该任务仍面临三大严峻挑战:
首先是身份关联不稳定——多人交互时,频繁的遮挡和快速运动容易导致ID Switch,影响后续重建的一致性;其次是运动轨迹中断——视角变化和极端遮挡会造成目标跟踪丢失;第...