AI 技术获全球顶级学术会议认可, 小米 2 篇论文入选 ICCV 2025
- 2025-07-10 01:58:38
- 438
IT之家7月8日消息,据小米技术消息,计算机视觉国际大会ICCV2025论文录用结果公布,小米两篇论文凭借创新性研究成果成功入选:视频理解大模型核心技术Q-Frame,推出行业首个动态帧选择与分辨率自适应框架,实现即插即用;持续学习框架AnalyticSubspaceRouting(Any-SSR),成功解决大语言模型在持续学习领域的核心难题「灾难性遗忘」问题。
据介绍,计算机视觉国际大会ICCV与国际计算机视觉与模式识别会议CVPR、欧洲计算机视觉国际会议ECCV并称为计算机领域世界三大顶级学术会议,每两年举办一次。其中,ICCV2025年投稿量达11239篇,录用率为24%。上述两篇论文代表了小米AI团队在基座大模型领域的最新探索成果,其中视频理解大模型核心技术Q-Frame由小米AI团队全面自研,大模型持续学习框架Any-SSR由小米AI团队联合华南理工大学攻关。
全自研视频理解大模型核心技术Q-Frame
在视频理解大模型(Video-LLMs)的研究中,小米AI团队针对传统“均匀帧采样”处理方式存在时间碎片化信息丢失、盲目采样及算力浪费等问题痛点,推出全自研的Q-Frame核心技术,该成果以论文《Q-Frame:Query-awareFrameSelectionandMulti-ResolutionAdaptationforVideo-LLMs》入选ICCV2025。
Q-Frame作为视频理解大模型核心技术,是行业首个动态帧选择与分辨率自适应框架,也是首个无需训练,市面上各类视频理解大模型基座均可即插即用的算法框架。Q-Frame拥有三大行业首次创新,能够精准理解视频内容与用户问题,通过精准捕捉跟用户问题最相关的视频关键内容,将有效信息量提升5倍:
跨模态查询检索(Cross-modalQueryRetrieval,CQR)
查询感知帧选择(Query-awareFrameSelection,QFS)
多分辨率自适应(Multi-ResolutionAdaptation,MRA)
在MLVU评测集上,Q-Frame使Qwen2-VL的理解准确率从55.5%提升至65.4%;在LongVideoBench上,让GPT-4o的准确率从53.3%提升到58.6%。此外,其多分辨率自适应特性可根据内容重要性和查询需求动态调整帧分辨率,避免算力浪费。
通过采用动态查询感知帧选择和多分辨率自适应,Q-Frame还有效解决了「均匀帧采样」策略下时间碎片化的信息丢失、问题无感知的盲目采样和分辨率一刀切的算力浪费三大难题。与传统均匀选帧、统一处理方式不同,在有限计算资源下,Q-Frame可使模型更高效准确理解视频。
此外,Q-Frame具有即插即用(plug-and-play)的特点,可与市场上现有的各类视频理解大模型兼容,无论是开源模型还是闭源模型,无需对模型进行额外的训练或微调。以VILA-V1.5和Qwen2-VL等开源模型为例,在集成Q-Frame后,这些模型在视频理解任务上的性能均得到了显著提升。同样,对于闭源的GPT-4o模型,Q-Frame也展现出了良好的兼容性,进一步证明了其广泛的适用性。
Q-Frame在小米「人车家全生态」战略中有着多元的应用场景,目前正在持续探索和落地:小米YU7发布时提到的哨兵模式中,能够分清楚普通的风吹草动和可能带来剐蹭、碰撞的危险行为;智能家居中,能够在监控画面中找到最关键的画面,帮助用户解答问题;在小爱视频问答场景中,可以直接定位到视频中能够解答问题的片段开始播放等。
大模型持续学习框架Any-SSR
在大语言模型(LLMs)持续学习(ContinualLearning,CL)领域,往往会因新任务的学习而导致对旧任务知识的遗忘,即灾难性遗忘问题。小米AI团队联合华南理工大学针对这一难题开展研究,其成果《AnalyticSubspaceRouting:HowRecursiveLeastSquaresWorksinContinualLearningofLargeLanguageModel》成功入选ICCV2025。
Any-SSR框架作为行业首个将递归最小二乘法(RecursiveLeastSquares,RLS)引入大语言模型持续学习的技术框架,通过分析路由机制,动态地把不同任务分配到独立子空间学习,避免任务间知识干扰,创新性解决了大语言模型持续学习中灾难性遗忘问题。同时,利用低秩适应(Low-RankAdaptation,LoRA)与分析路由相结合的方式,实现了新旧知识的无缝整合与动态学习。
在一系列技术创新的基础上,Any-SSR方法实现了“近乎完美”的知识保留(即不遗忘),同时能无缝地学习新知识。在实验中,Any-SSR在TRACE基准测试上的表现显著优于其他方法,包括多任务学习(MTL)等,不仅在整体性能(OP)上取得了优异成绩,还实现了零反向知识转移(BWT)。
IT之家从小米技术获悉,过去五年,小米集团研发投入约1020亿元,在2025年的300亿研发投入中,大约有四分之一将被用于AI相关方向。未来五年(2026-2030年),小米还将在核心技术赛道再投入2000亿元。
- 上一篇:基辅遭受俄最大规模空袭
- 下一篇:女子给自己签字开了小时无痛