苹果开源FastVLM视觉语言模型 为智能穿戴设备铺路
创始人
2025-05-13 19:42:13
0次

【太平洋科技快讯】5月13日，苹果机器学习团队在GitHub上发布并开源了一款新型视觉语言模型(VLM)——FastVLM。该模型提供0.5B、1.5B和7B三个版本，基于苹果自研的MLX框架开发，并借助LLaVA代码库进行训练，专为Apple Silicon设备的端侧AI运算进行了优化。

FastVLM的核心是一个名为FastViTHD的混合视觉编码器。该编码器专为在高分辨率图像上实现高效的VLM性能而设计，其处理速度较同类模型提升3.2倍，体积却仅有3.6分之一。FastViTHD通过减少令牌输出量并显著缩短编码时间，实现了性能的飞跃。

根据技术文档显示，FastVLM在保持精度的前提下，实现了高分辨率图像处理的近实时响应，同时所需的计算量比同类模型要少得多。最小模型版本(FastVLM-0.5B)的首词元响应速度比LLaVA-OneVision-0.5B模型快85倍，视觉编码器体积缩小3.4倍。搭配Qwen2-7B大语言模型版本，使用单一图像编码器即超越Cambrian-1-8B等近期研究成果，首词元响应速度提升7.9倍。

苹果技术团队指出，基于对图像分辨率、视觉延迟、词元数量与LLM大小的综合效率分析，他们开发出了FastVLM。该模型在延迟、模型大小和准确性之间实现了最优权衡。该技术的应用场景指向苹果正在研发的智能眼镜类穿戴设备。多方信息显示，苹果计划于2027年推出对标Meta Ray-Bans的AI眼镜，同期或将发布搭载摄像头的设备。

FastVLM的本地化处理能力可有效支持此类设备脱离云端实现实时视觉交互。MLX框架允许开发者在Apple设备本地训练和运行模型，同时兼容主流AI开发语言。FastVLM的推出证实苹果正构建完整的端侧AI技术生态。

上一篇：钉钉布局澳门市场 将合作开发AI服务机器人

下一篇：江苏同悦取得集成式小型制氮机专利，减少了装置的空间占用

相关内容

热门资讯

中国移动南亚东南亚国际数字信息... 来源：云南网 9月12日，中国移动南亚东南亚国际数字信息大通道能力发布会在云南昆明举办。会上，中国移...
银河电力等“电能表时钟误差校准... 天眼查APP显示，近日，银河电力集团股份有限公司,江西银河表计有限公司申请的“电能表时钟误差校准系统...
“FOLO福禄球”亮相服贸会，... 9月13日，在2025年中国国际服务贸易交易会现场，科技体育领域迎来新突破。由国内数字体育先锋企业北...
拓斯达推出首款人形机器人！行业... 来源：市场资讯 （来源：财联社） 财联社9月13日讯（记者 陆婷婷）具身智能机器人产业发展势头正劲，...
豪迈科技获得实用新型专利授权：... 证券之星消息，根据天眼查APP数据显示豪迈科技（002595）新获得一项实用新型专利授权，专利名为“...
Canalys：2026 年，... 来源：市场资讯 （来源：IT之家） IT之家 9 月 12 日消息，Canalys 科纳仕咨询今天发...
原创 街... 一条街十几家手机店的时代结束了 还记得十几年前，走在任何一条商业街上，总能看到成排的手机店：华为、...
模型之变如何引发数据质变？专家... 来源：封面新闻 封面新闻记者 欧阳宏宇 可供大模型训练的人类数据越来越少，Scaling Law正在...
服贸会上的文旅“新”体验 9月13日，在文旅服务专题展区经开区展台，小朋友和机器人下五子棋。 AI换装拍照、可穿戴设备、智能机...
星宇股份获得实用新型专利授权：... 证券之星消息，根据天眼查APP数据显示星宇股份（601799）新获得一项实用新型专利授权，专利名为“...
固态电池概念持续火爆 是“实火... 沾上固态电池概念就涨，是近期A股市场的常态。 截至9月12日收盘，万得固态电池指数近20天已经上涨1...
星宇股份获得实用新型专利授权：... 证券之星消息，根据天眼查APP数据显示星宇股份（601799）新获得一项实用新型专利授权，专利名为“...
马上评｜上海这家成立仅一年的学... “人工智能是年轻的事业，也是年轻人的事业。”习近平总书记对上海人工智能发展寄予厚望。 市委书记陈吉宁...
专家：探索数值模拟+人工智能，... 新京报讯（记者张璐）作为服贸会专题论坛之一，“2025年北京国际大都市清洁空气与气候行动论坛”9月1...
引力波研究新突破：GW1908... 在宇宙深邃的幕布下，一场跨越数亿年的引力之舞正在悄然上演。两个黑洞在彼此引力的牵引下，如跳着华尔兹般...
南山智尚推出织物触觉智能手套 ... 中证报中证网讯（记者 张鹏飞）9月12日，南山智尚（300918）举办织物触觉智能手套新品发布会，机...
疯狂科学家制造的“电弧秀” 大科技2025-09-13 18:20:33 在1887年突破性地发明了交流电机之后，“疯狂科学家...
微信推出“后悔药”！网友：救了... 近日 微信团队发布了 安卓微信8.0.63内测版本 这是继iOS版本后的一次重要更新 这次更新虽然看...
农业银行公布“一种网络探测运维... 天眼查APP显示，近日，中国农业银行股份有限公司申请的“一种网络探测运维装置”专利公布。 摘要显示，...
大湾区科学论坛走进琴澳 促科创... 中新网广州9月12日电 (记者 王坚)据大湾区科学论坛秘书处12日消息，为期两天的大湾区科学论坛——...