Meta 推出 V-JEPA 模型，利用 AI 高效补充视频受遮蔽部分
创始人
2024-02-17 20:49:52
0次

原标题：Meta 推出 V-JEPA 模型，利用 AI 高效补充视频受遮蔽部分

IT之家 2 月 17 日消息，Meta 首席 AI 科学家 Yann LeCun 在 2022 年推出了 JEPA（Joint Embedding Predictive Architectures）模型架构，次年基于 JEPA 架构开发了一款“I-JEPA”图片预测模型，目前又推出了一款名为“V-JEPA”的视频预测模型。

据介绍，相关 JEPA 架构及 I-JEPA / V-JPA 模型主打“预测能力”，号称可以以“人类理解”的方式，利用抽象性高效预测生成图片 / 视频中被遮蔽的部分。

IT之家注意到，研究人员使用一系列经过遮蔽处理的特定视频训练 I-JEPA / V-JEPA 模型，研究人员要求模型利用“抽象方式”填充视频中缺失的内容，从而让模型在填充间学习场景，进一步预测未来的事件或动作，进而达到对世界更深层次的理解。

▲ 图源 Meta 官方新闻稿（下同）

研究人员表示，这种训练方法能够让模型专注于影片的高层次概念，而“不会钻牛角尖处理下游任务不重要的细节”，研究人员举例“人类观看内含树木的影片时，不会特别关心树叶的运动方式”，因此采用这种抽象概念的模型，相对于业界竞品效率更佳。

研究人员同时提到，V-JEPA 采用一种名为“Frozen Evaluations”的设计结构，即“模型在预训练之后，核心部分不会再改变”，因此只需要在模型之上添加小型专门层即可适应新任务，具有更高普适性。

上一篇：史上第一个iOS木马被发现：窃取面部识别数据以解锁银行账户

下一篇：孙兴慜：直到死亡来临那一天，我永远不会忘记热刺球迷的支持

相关内容

热门资讯

25名中学生，在青海成功发射火... 6月18日15时39分，来自广东的25名中学生火箭爱好者，在青海省海西州茫崖市冷湖火箭发射基地成功发...
6G浪潮将至，场景应用驱动产业... “我们已经闻到了6G的味道。”在6月18日举行的全球新一代信息通信技术合作组织（GTI）国际产业大会...
凡澈建设取得预埋管道支撑装置专... 金融界2025年6月19日消息，国家知识产权局信息显示，福建省凡澈建设发展有限公司取得一项名为“一种...
胜业电气获得实用新型专利授权：... 证券之星消息，根据天眼查APP数据显示胜业电气（920128）新获得一项实用新型专利授权，专利名为“...
首款折叠屏iPhone或今秋启... 关于苹果首款“折叠屏iPhone”的消息已经在市场上流传好几年了，而如今似乎终于等到了一个明确的时间...
原创 他... 1972年，李政道和杨振宁一起荣获诺贝尔物理学奖。李政道回到阔别已久的祖国探亲，那时我国的科研事业尚...
政务服务拥抱“智变” 四川3万... 成都6月19日电 (记者 贺劭清)19日，42岁的桑郎尔加在四川省甘孜藏族自治州丹巴县委党校远程观看...
桂西公路发展中心开启智慧养护新... 会议现场。黄茗倪摄 6月16日，桂西公路发展中心公路养护迎来智慧交通新里程碑——由桂西公路发展中心与...
海尔智家获得实用新型专利授权：... 证券之星消息，根据天眼查APP数据显示海尔智家（600690）新获得一项实用新型专利授权，专利名为“...
无机房电梯控制系统备件更换费用... 现在很多建筑都装了无机房电梯，它节省空间又美观。不过，电梯用久了，控制系统备件难免会出现问题需要更换...
云南交投智算中心在昆明发布 6月19日，云南交投智算中心在昆明正式发布，在算力、数据、算法、安全、服务等领域实现全面升级。 据悉...
YU7虽未至，平板再先行｜聊聊... 一个月之前，小米在15周年新品发布会上推出玄戒O1自研旗舰芯片，以及小米平板7 Ultra的时候，就...
曝华为和苹果新机正在测试eSI... 【CNMO科技消息】6月19日，数码闲聊站发文透露，国行eSIM技术正在测试阶段，主要由苹果推动，旨...
万洋肥业取得一种磷矿破碎装置专... 金融界2025年6月19日消息，国家知识产权局信息显示，济源市万洋肥业有限公司取得一项名为“一种磷矿...
荣耀与中国移动宣布AI终端战略... 2025年6月19日，荣耀与中国移动在上海联合举办“中国移动&荣耀AI终端战略合作发布会”。此次合作...
清华惊现“神秘高科技组织” 最近，“清华学生戴头套看演出”的照片在网上引发关注。照片中，8名头戴监测设备的志愿者坐在新清华学堂的...
天津地铁智慧科技取得一种闸门控... 金融界2025年6月19日消息，国家知识产权局信息显示，天津地铁智慧科技有限公司取得一项名为“一种闸...
中科三环：探讨出口许可与产能扩... 中科三环（000970）发布公告，2025年6月19日，公司举行了特定对象调研活动，参与单位包括华泰...
荣耀X70i千元机携手中国移动... 荣耀与中国移动在最近的荣耀AI技术沟通大会上携手宣布了一项重大合作，而合作的先行者——荣耀X70i智...
Switch 2系统更新20.... Switch 2系统更新20.1.5现已上线，其中包含整体稳定性改进以及一些未公开的改进。 从官方...