噼哩啪哩国语版电影免费观看,在这里发现兴趣,分享快乐,记录生活的每个精彩瞬间

k1体育麻将胡了

搜索 猫眼影戏 融媒体矩阵
  • 山东手机报

  • 猫眼影戏

  • 公共网官方微信

  • 公共网官方微博

  • 抖音

  • 人民号

  • 天下党媒平台

  • 央视频

  • 百家号

  • 快手

  • 头条号

  • 哔哩哔哩

首页 >新闻 >社会新闻

视频模子原生支持行动一致,只是你不会用!揭开「首帧」的神秘

2025-12-05 03:11:13
泉源:

猫眼影戏

作者:

洪晓红

手机审查

  猫眼影戏记者 惠特斯特布尔 报道Q8X2R7L1T4J5M9B6W3

新智元报道

编辑:LRST

【新智元导读】最新要领FFGo改变了我们对视频天生模子中第一帧的明确。第一帧并非简朴起点,而是模子的「看法影象体」,存储了后续画面的视觉元素。FFGo通过少量样本和特殊训练,激活模子的这种能力,实现高质量的视频定制,无需修改模子结构或大宗数据,为视频天生开发了新偏向。

在Text-to-Video / Image-to-Video 手艺突飞猛进的今天,我们已经习惯了这样一个知识:

视频天生的第一。‵irst Frame)只是时间轴的起点,是后续动画的起始画面。

但马里兰大学、南加利福尼亚大学、麻省理工学院的最新研究发明:第一帧的真正角色完全不是「起点」,它着实是视频模子的「看法影象体」(conceptual memory buffer), 所有后续画面引用的视觉实体,都被它默默贮保存这一帧里。

论文链接:https://arxiv.org/abs/2511.15700

项目主页:http://firstframego.github.io

该研究的起点,源于对视频天生模子中一个普遍保存但尚未被系统研究的征象的深入思索。

论文的焦点洞察很是大胆:视频天生模子会自动把首帧中的角色、物体、纹理、结构等视觉实体,所有「记着」,并在后续帧中一直复用。

换句话说,岂论你给几多参考物体,模子都会在第一帧悄悄把它们打包成一个「看法蓝图(blueprint)」。

研究者用Veo3、Sora2、Wan2.2等视频模子测试发明:

若首帧泛起多工具组合, 在很少的情形下,通过使用特殊的转场提醒词 ,模子在后续帧里能自然融合它们, 甚至能支持跨场景转场、坚持角色属性一致 ;

可是这个神奇的转场提醒词 关于每个模子,每个要天生的视频都是纷歧样的,并且模子在转场融合多物体后常 ;岜⑽锾,场景一致性损失,或者物体丧失的问题。

这说明:

? 第一帧是模子「影象」外来参考的地方

? 但默认情形下,这种能力「不稳固、不可控」

FFGo要领

不改结构、不大规模微调,只用20–50个例子就能让任何预训练的视频模子变身强盛的「参考图驱动视频定制系统」。

研究者基于这个洞见提出了一套极其轻量的做法 :FFGo。

要害优势震撼整个行业:

? 不修改任何模子结构? 不需要百万级训练数据? 只需 20–50 个 carefully curated 的视频例子? 几个小时的 LoRA 训练? 就能实现SOTA级别的视频内容定制

这在现有要领中险些是不可想象的。

研究职员列出了6大应用场景:

机械人操作(Robot Manipulation)

自动驾驶模拟(Driving Simulation)

航拍/水下/无人机模拟(Aerial / Underwater)

多产品展示

影视制作

恣意多角色组合视频天生

用户只需要给模子一张包括多个物体/角色的首帧,再配一个文本prompt,FFGo就能让模子自动「记着」所有元素并天生交互视频, 且画面一致性、物体身份坚持、行动连贯都很是强,甚至支持「多达5个参考实体同时融合」, 而 VACE/SkyReels-A2限制在3个以内,会直接漏物体。

手艺亮点

用VLM自动构建20–50条高质量训练集

用Gemini-2.5 Pro自动识别远景物体, 用SAM2提取RGBA mask, 自动天生视频文本形貌,构建适配视频模子输入的训练样本, 这大大降低了手工事情量。

使用Few-shot LoRA激活模子「影象机制」

研究发明:

模子自然具备融合多参考物体的能力, 但默认难以「触发」

一段特殊prompt(如「ad23r2 the camera view suddenly changes」)能起到「转场信号」的作用

LoRA学到的不是新能力,而是「怎样触发这些能力」,推理时只需丢掉前4。╓an2.2的压缩。

视频真正的混淆内容在第5帧之后最先。前4帧是压缩帧,直接舍弃即可。

FFGo为什么这么强?

研究职员做了大宗比照实验:? FFGo 能坚持物体身份一致性(Identity Preservation)? 能处置惩罚更多参考工具(5个 vs 3个)? 能阻止大模子微调带来的「灾难性遗忘」? 输出画面更自然、更连贯

特殊是在多物体场景和通用的多物体互动场景下 FFGo的天生效果显著优于VACE和SkyReels-A2。

基础模子无意「乐成」,代表了什么?

在研究FFGo的历程中,有一个特殊要害的实验图示值得单独拿出来说:在无意的、极有数的情形下,Wan2.2原始I2V模子也能完成一次「完善」的使命:

多个参考物体没有消逝

场景转场坚持稳固

行动连贯、身份一致

与文本提醒(例如 wingsuit 航行者与 Cybertruck 贴合运动)高度匹配

若是只看这一组效果,你甚至会以为原始模子自己就具备稳固的多工具融合能力。

但事实恰恰相反,乐成的意义并不在于「基础模子体现很好」,而是在于:基础模子原来就「拥有」这种能力,只是大大都时间无法被稳固激活。

研究团队的洞察在这里被证实:

? 视频天生模子确实会把多个参考实体存进第一帧的内部影象结构中? 视频模子自己能执行「多工具+行动一致」的天生? 但这种行为默认险些不可控、不稳固、难复现

这就像模子体内藏着一块「隐藏 GPU」,无意会亮一下,但你完全不可指望它全天候事情。

FFGo不是教会模子新能力,而是让它「稳固施展」

在上述比照中,FFGo的效果与原始模子的「无意乐效果果」险些一致,这说明:FFGo的LoRA不是在重写模子,而是在激活已有的潜在能力。

换句话说:原始模子=有潜力,但无法一连施展,而FFGo=让潜力酿成稳固能力(且不破损预训练知识)

论文中提到,FFGo能保存原模子的天生质量,而不是像古板大规模微调那样牺牲泛化能力, 没有任何微调可以媲美预训练的数据质量和学习效果。

这个实验也证实晰一件极具革命性的事:首帧自己就具备「看法影象体」的角色、视频模子天生可以做多工具融合、要害只是缺乏一个「触发机制」。

FFGo做的就是:用几十条样本、一个全心设计的转场标记(transition phrase)、Few-shot LoRA,把这种能力重新「开机」,并且让它可控、稳固、可靠。

这也是为什么:FFGo能用20–50个样例,把SOTA模子甩在死后。

这个实验所转达的,实质上就是一句话:视频模子已经足够强,只是我们已往一直没有找到准确的用法。

而FFGo正是在教我们一件事:怎样「准确使用」视频天生模子。

总结

用一句话归纳综合这篇论文的研究意义:它不是让模子学会新能力,而是教我们怎样使用模子已经拥有但从未被准确使用的能力。

研究职员提出了一个极具启发性的未来偏向:

更智慧地使用模子,而不是更暴力地训练模子 用更少的数据、更轻的微调,获得更强的定制能力 把「首帧作为看法影象体」酿成视频天生的新范式

总之,在视频模子中:

第一帧不是起点,而是模子的「影象库」, 视频模子自然具备多工具融合能力

FFGo用极低本钱把这种能力「叫醒」, 不改结构、不必大数据, 仅20–50个例子即可实现SOTA视频定制

实验笼罩机械人、驾驶、影视等多场景, 用户研究中以81.2%票数大幅领先

这篇论文不但是一个手艺突破,更像是翻开了视频天生模子的「隐藏手艺树」。

参考资料:

https://arxiv.org/abs/2511.15700

秒追ASI

?点赞、转发、在看一键三连?

点亮星标,锁定新智元极速推送!

UniV

??时势1:人与猪交配视频

??12月05日,联合国秘书长呼吁在加沙和苏丹实现斋月停火,

  石村内,一群皮孩子正在玩耍,被山林中的新闻惊动,跑到村头,见到这么多人在林中马上吓了一大跳,眼光全都被吸引了已往。

,老师的婬肉泬被c。

??12月05日,菲律宾华人企业家施恭旗获中国政府友谊奖,

  那是一只能有柱子那么粗的腿,强壮有力,密布着金色的兽毛,璀璨醒目,宛若黄金铸成,熠熠生辉,且凶气滔天!

?第十六章 服软,夏目彩春吃精子,吃大鸡巴,黃色A片三級三級三級免费看密使,国产91在线播放。

??时势2:五星视频58星币入口网站

??12月05日,《二十四节气七十二候》系列高清视频:立夏,

  “族长爷爷,尚有阿叔他们,一直瞒着我,在为我五岁的洗礼犯愁,着实我都知道了。现在好了,有了三头远古遗种,真血一定足够了。”

?第二十章 惊变,www.7773c.cn免费网站怎么打不开了,久久99伊人,超碰日本。

??12月05日,(文化中国行)国家博物馆馆长谈“文博热”:民族文化自信大幅提升的集中体现,

  一行人审慎而小心,以两件祖器护身与防御,将三枚禽卵送到村口,放在草地上,此后迅速退了回去。

,国产一级特色色片,97少妇无码视频碰碰碰,欧美精品人爱A欧美精品。

??时势3:fi11cnn实验室免费2023网站

??12月05日,京津冀协同创新指数年均增速12.9%,

  五是起劲提高教育教学质量。教育局整年多次下校检查指导学校事情 ;举行了远程教育优质课评选活动,一方面推动了各校信息化建设的程序,另一方面增进了西席在课堂教学的有用性上的关注与探索 ;出台了《教学质量赏罚步伐》 ;组织了全县统考,并实时召开剖析总结会,引起了学校的重视。20xx年我县考入内地西藏班的学生有27名,名列地区前茅 ;考入高中的学生167名,其中考入区内重点高中的学生94名,位列地区第四位。

,美女和夜网址大全在线观看,精品熟女综合网,精品tv一区在线观看。

??12月05日,2024年四川省农民工春晚将一展新时代农民工力量,

  曾提出:“建设高素质干步队伍,是全党的一项刻禁止缓的重大使命。增强农村下层组织建设也必需把建设高素质的农村下层干步队伍作为要害环节和必需抵达的一个目的。”农村下层干部是我们党和国家干步队伍的主要组成部分,是向导农民群众脱贫致富奔小康,实现农业农村现代化和建设社会主义新农村的焦点实力 O虏愀刹蕉游樗刂试跹,直接影响着我镇的经济生长和社会前进。上面千条线,下面一根针,要创立性地贯彻执行党的目的政策,要害在干部。以是只有我们村居干部树立起一心一意为人民效劳的头脑,才华全力以赴地向导农民群众生长农村经济,为农村各项事业的生长创立须要的物质基础。通过掌握宣传群众、发动群从、组织群众、效劳群众的基本功,学会用民主果真透明的要领治理村务,建设健全农村事情的各项制度,使农村事情逐步走上规范化、法制化、民主化、科学化的轨道。这样,才华获得群众的拥护,党和国家在下层的一系列目的政策才华获得周全的贯彻落实,新农村建设才华生气勃勃兴旺蓬勃。

,东北老女人卖婬女丝袜,国产视频 十一区,PH中文破解版下载安装。

??时势4:狼友视频在线观看主页

??12月05日,赣江南昌枢纽(主支)船闸正式通航,

  “什么?”强盛的中年男子震惊,刚一突破就连开了三口洞天,这闻所未闻,跟天方夜谭般,恐怖的有些吓人。

,大型黄片视频,国产AV真实灌醉女播放,99riav 53。

??12月05日,(寻味中华|戏曲)云南滇剧:300年乡间“年戏”温润年轻人,

  增强干步队伍头脑作风建设是党的建设中的一个极其主要的课题。面临刷新开放的新形势、新使命,面临生长市场经济的新情形、新问题,进一步增强干步队伍头脑作风建设,关于落实经济事情的各项使命,关于加速地方经济生长,具有极为主要的意义。

,国产精品久久久久野外,91精品免费视频,九一免费看pinkloving的网黄专辑。

责编:佩内塔

审核:保罗·施罗德

责编:孙树兴

相关推荐 换一换

Copyright (C) 2001-   dzwww.com. All Rights Reserved

新闻信息效劳允许证 - 音像制品出书允许证 - 广播电视节目制作谋划允许证 - 网络视听允许证 - 网络文化谋划允许证

山东省互联网传媒集团主理  联系电话:0531-85193202  违法不良信息举报电话:0531-85196540

鲁ICP备09023866号-1   鲁公网安备 37010202000111号  

Copyright (C) 2001- Dzwww   鲁ICP备09023866号-1

网站地图