苹果开发生成式 AI 技术 HUGS：30 分钟内创建“数字化身”_资讯

创始人

2024-01-08 13:10:06

0次

IT之家 12 月 20 日消息，苹果机器学习研究团队近日发布博文，展示了全新的生成式 AI 技术-- HUGS，能够在 30 分钟内分析短视频，然后映射创建新的动作和角度。

苹果研究员 Anurag Ranjan 发布推文，表示 HUGS 的全称叫作 Human Gaussian Splats，使用机器学习和计算机视觉，在原始输入数据较少的情况下，创建出逼真的人像元素。

苹果官方介绍中表示神经渲染技术目前已经有了长足的进步，但最适合的场景依然是静态场景的摄影测量，还无法推广到环境中自由移动的人类。

HUGS 使用 3D Gaussian Splatting 的技术，在场景中创建可移动的人类。

该方法本身需要少量的主体视频，通常在场景中运动，并显示尽可能多的表面供系统工作。

在某些情况下，该技术对源输入数据的要求很低，最少可以低至 50 到 100 帧的单目视频，相当于 2 到 4 秒的 24fps 视频。

苹果声称，该系统已经过训练，可以“在 30 分钟内解开静态场景和完全可动画化的人类化身”。

苹果表示 SMPL 体模型虽然用于初始化人类高斯模型，但无法捕获每个细节。对于未建模的元素（如布料和头发），该过程可以偏离 SMPL 模型，来填补模型捕获中的空白。

苹果官方表示从训练视频到以 60fps 的渲染速度输出，能够在半小时完成人体建模和“最先进的渲染质量”动画，这比 NeuMan 和 Vid2Avatar 等其它方法快 100 倍。

IT之家附上论文参考地址如下：

Project: https://machinelearning.apple.com/research/hugs

Xiv: https://arxiv.org/abs/2311.17910

一个提示攻破所有模型，Open... 新智元报道编辑：peter东犀牛【新智元导读】多年来，生成式AI供应商一直向公众保证，大语...

深圳市科达利取得盖板组件及电池... 金融界2025年5月15日消息，国家知识产权局信息显示，深圳市科达利实业股份有限公司取得一项名为“盖...

原创千... 你可能以为千元机只是给爸妈用的“接电话神器”，或者学生党的“临时战备机”，但红米Turbo4 Pro...

“人工智能+”，山西怎么“+” “人工智能是年轻的事业，也是年轻人的事业”“推动我国人工智能朝着有益、安全、公平方向健康有序发展”…...

华为将推出鸿蒙折叠电脑 5月15日，第一财经获悉，在5月19日nova 14系列及鸿蒙电脑新品发布会上，华为将推出鸿蒙折叠电...

华为发布会将推出鸿蒙折叠电脑，... 5月15日，第一财经获悉，在5月19日nova 14系列及鸿蒙电脑新品发布会上，华为将推出鸿蒙折叠电...

香港故宫文博馆推出“‘纹’以载... 5月14日，在香港故宫文博馆，参观者在沉浸式体验数字化的故宫建筑、陶瓷、织绣等文物上的传统纹样。 5...

竹芒科技申请机器人送货专利，避... 金融界2025年5月15日消息，国家知识产权局信息显示，深圳竹芒科技有限公司申请一项名为“机器人送货...

博白：人工智能进校园点燃学生... 5月12日，博白县人工智能社科普及进校园活动走进博白镇幼儿园，活动通过为小朋友展现科学原理，培育他们...

含硼聚乙烯板：科研机构的高效屏... 在现代科研领域，尤其是涉及核能、放射性物质等领域的研究中，中子屏蔽材料的重要性不言而喻。含硼聚乙烯板...

全车塑料，没有音响，这就是美国... 都说 3 万块的宏光 MINIEV 是给人民造车，那现在美国人民也有自己的宏光 MINIEV 了。 ...

蔡司智能玻璃新突破：车窗变身高... 蔡司公司在中国首次公开展示了其革命性的车辆智能玻璃方案，这一创新技术在近期举行的2025上海国际车展...

中国打造2800颗算力卫星天基... 北京时间2025年5月14日12时12分，国星宇航在酒泉卫星发射中心使用长征二号丁运载火箭，成功将太...

AI早报 | 腾讯高管称现有G... 腾讯高管称GPU够训练未来几代模型 5月14日，腾讯控股表示，AI能力已经对公司效果广告与长青游戏...

阿里巴巴开源视频生成与编辑模型... IT之家 5 月 14 日消息，据《科创板日报》报道，阿里巴巴正式开源通义万相 Wan2.1-VAC...

智能快车，出发向未来！2025... 智能时代到来，数字技术将如何撬动教育变革？5月14日，2025世界数字教育大会在湖北武汉开幕，教育数...

火星地下暗藏巨型液态水海洋，或... 一项震撼科学界的新发现揭示了火星可能隐藏着一个庞大的液态水海洋，这一发现彻底颠覆了我们对这颗红色星球...

腾讯研究院AI速递 20250... 生成式AI 一、 AI 笔记产品 Notion 今天发布了 3 个 AI 新功能All-In-One...

重庆力争农业生产信息化率202... 本报讯（新重庆-重庆日报记者赵伟平）5月14日，记者从2025年全市智慧农业现场推进会上获悉，我...

难怪现在小屏手机这么火这几款... 【CNMO科技消息】在智能手机市场竞争日益激烈的当下，大屏手机曾一度占据主流，成为众多消费者的首选。...