时间：2024/4/12 12:17:44来源：www.pc6.com作者：学臣我要评论(0)
4月12日 消息:Meta AI近日推出了一种名为MA-LMM的新型模型，旨在解决长期视频理解中的挑战。LLMs在处理文本数据时表现出了令人印象深刻的能力，但在处理视频输入方面存在一些限制，例如上下文长度限制和GPU内存限制。
为了克服这些限制，研究人员提出了MA-LMM，这是一种记忆增强的大型多模态模型，采用了在线处理视频帧和存储特征的方法。
MA-LMM模型的核心思想是通过顺序处理视频帧并将特征存储在长期记忆库中，以有效地保留长视频序列中的判别信息。该模型由三个主要组件组成:视觉特征提取器、可训练的查询变压器（Q-Former）以及大型语言模型。通过这种结构，MA-LMM能够在不增加GPU内存负担的情况下，显著提高处理长视频序列的效率，并有效地解决了LLMs中的上下文长度限制问题。实验证明，MA-LMM在各种任务中表现出了优越性能。与现有模型相比，在长期视频理解、视频问答、视频字幕生成和在线动作预测等任务中，MA-LMM均取得了更好的效果。其创新性的设计以及利用长期记忆库和顺序处理的方法使得该模型能够在各种复杂场景下取得显著成果，证明了其在多模态视频理解应用中的有效性和多功能性。
相关视频
相关阅读 Meta计划下周推Llama3基础版，夏季推出全面版Meta将在Facebook和Instagram上标记AI生成的内容meta2智能眼镜怎么样 meta2智能眼镜评测腾讯等公司5000万美金投资Meta 美国AR创业公司Meta即将上市魅蓝Metal降价活动是什么 魅蓝Metal怎么限时优惠青葱metal手机怎么样 青葱metal手机配置魅蓝metal发布会视频直播地址报告称：OpenAI和Meta即将发布具有人类推理能力的AI模型
热门文章
滴滴和优步合并了吗 优
思源黑体：改变
锤子手机发布会看点预
TK域名免费注册及解析
最新文章
Meta AI推MA-LMM:用于
新版GPT-4 Turbo现已向
DreamWorld AI推全身运动捕捉技术 可创建动suno劲敌！AI音乐生成工具Udio正式发布 输入Udio音乐生成器详细使用方法教程 Suno AI最Udio免费内测申请地址 Udio AI生成音乐官网
人气排行 2020年放假安排时间表全年图 2020年法定节假2021年放假安排时间表全年图 2021年法定节假微信公众号怎么申请 微信公众号申请要钱吗zune怎么用？zune使用攻略！2014台式机装机配置推荐snmp协议在windows下的安装与配置微信朋友圈三天可见怎么破解 朋友圈仅展示三2016猴年邮票多少钱一套 2016猴年邮票价格表
查看所有0条评论>>