会前预热
计算机视觉
雷峰网 · GAIR DAO · 2026-04-30
【封面图片来源:网站名微信公众号,所有者:极市平台】一、背景 工业质检和医疗影像分析中,传统方法采用"一个任务一个模型"的碎片化模式,检测不同模态(如RGB、红外、3D深度)需要部署多个专用模型,导致运维成本高、泛化能力差。现有方法存在域干扰问题——直接融合多域特征会引入噪声,导致大量误报。能否构建一个通用的"大脑",既能理解多模态融合信息,又能针对不同任务动态调用"专家知识"?这一问题的解...
会前预热
多模态
雷峰网 · GAIR DAO · 2026-04-30
【封面图片来源:网站名微信公众号,所有者:机器之心】 一、背景 在多模态大模型飞速发展的今天,如何精准地将密集的"图像块(Patch)"表示与对应概念的"文本嵌入"对齐,依然是阻碍模型迈向更细粒度理解的"致命弱点"。研究团队在消融实验中发现了一个反直觉现象:通过块级别蒸馏出的小参数学生模型,在零样本分割等密集型图文对齐任务上,性能竟然大幅反超了规模巨大的教师模型!。论文提出 TIPSv2,通...
会前预热
生成式模型
雷峰网 · GAIR DAO · 2026-04-30
过去几年,视觉生成与视觉理解领域的技术推进,整体上始终沿着一条相对明确的路径展开:当一套建模范式被验证有效之后,后续的大量工作往往都会围绕这套既有框架持续做模型扩容、训练增强、采样优化与局部模块修补,以此换取更高的性能上限。 无论是扩散生成、视频 world model,还是动作建模与视觉匹配,主流研究在很长时间里都更多表现为对既有系统的持续加固,而不是对底层假设本身的重新审视。 但从今年 ...
会前预热
计算机视觉
雷峰网 · GAIR DAO · 2026-04-30
如果回看过去十年的计算机视觉发展,其主线其实非常清晰:从早期以 ImageNet classification 为代表的“识别范式”,到以检测、分割为核心的“结构理解”,再到扩散模型推动的“生成范式”,视觉研究始终围绕一个核心目标展开——让机器更准确地“看见世界”。 然而,这一路径在近两年开始出现明显的边界:当模型已经可以在静态图像上达到接近甚至超过人类的感知水平时,“看得更准”本身,正在变...
会前预热
生成式模型
雷峰网 · GAIR DAO · 2026-04-30
在过去几年中,视频生成技术取得了令人瞩目的进展。从基于扩散模型的方法到大规模视频基础模型,生成结果在视觉质量上已经逐渐逼近真实世界。然而,当我们进一步审视这些模型时,一个更本质的问题开始显现:它们究竟是在“理解世界”,还是仅仅在“拟合像素分布”? 传统视频生成方法大多建立在 2D 图像空间之上,通过逐帧建模来合成动态内容。这种范式虽然在短时间尺度和视觉表现上表现出色,但也暴露出一系列根本性局...
会前预热
多模态
雷峰网 · GAIR DAO · 2026-04-28
【封面图片来源:网站名中国科学院自动化研究所,所有者:GThinker】一、研究背景 多模态大语言模型(MLLM)在文本推理领域已展现出强大的迭代反思能力,但在涉及复杂视觉场景的推理任务中,依然存在明显缺陷——研究团队将其定义为视觉惯性(Visual Inertia)现象:尽管 MLLM 在文本语境中擅长进行多轮迭代推理并修正错误,但在视觉推理过程中往往不加质疑地依赖最初的视觉解释,即使这种...
会前预热
具身智能
雷峰网 · GAIR DAO · 2026-04-28
【封面图片来源:网站名中国科学院自动化研究所,所有者:MeanFuser】一、研究背景 端到端自动驾驶近年来取得了飞速进展,生成模型在多模态轨迹规划中展现出巨大潜力。现有基于锚点引导的生成方法能有效刻画驾驶行为的不确定性并提升整体性能,但存在一个内在矛盾:这类方法依赖离散锚点词汇表,并要求其在测试阶段充分覆盖轨迹分布以保证鲁棒性,从而在词汇规模与模型性能之间引入不可调和的权衡——词汇太少则覆...
会前预热
生成式模型
雷峰网 · GAIR DAO · 2026-04-27
一、研究背景 多模态生成是计算机视觉最活跃的研究方向之一。虚拟试衣(Virtual Try-on)是电商零售核心场景,但传统方法严重依赖人体姿态识别、图像分割等辅助模型,流程冗长,外部误差累积明显;生成质量上,面料质感失真、蕾丝花纹丢失、透明材质处理困难等问题长期困扰用户体验,制约了商业落地。RefTON 开创性地引入服装上身参考图作为视觉指引,仅需人物原图与目标服装图,就能实现高保真的虚拟...
会前预热
计算机视觉
雷峰网 · GAIR DAO · 2026-04-24
一、研究背景 视觉重定位(Visual Relocalization)是机器人和自动驾驶的基础能力:当系统回到一个曾经建图的场景时,如何通过单张图像精准估计6自由度相机位姿。这一任务在弱纹理场景、图像数据库稀疏或视角变化剧烈时面临严峻挑战。现有方法存在三个核心痛点:一是图像稀疏瓶颈,数据库图像有限时,初始位姿检索和粗匹配精度下降明显;二是特征匹配局限,单一特征类型难以兼顾粗匹配的全局视角覆盖...
会前预热
强化学习
雷峰网 · GAIR DAO · 2026-04-22
很多人其实已经在不知不觉中接触到了多智能体协作带来的变化。 电商大促时,仓库里往往不是一台机器人在工作,而是一整组机器人同时分拣、运输、避让和交接。自动驾驶真正困难的地方,也不只是让一辆车学会开,而是让很多辆车在同一条路上彼此配合。现实中的很多复杂任务,本质上都不是单个智能体可以独立完成的,智能系统也是一样。 但现实世界并不会给这些系统太多试错机会。仓库机器人撞一次货架,工业机械臂装错一次零...