能够看懂视频并帮你处理视频的AI大模型:Memories.ai
作者:微信文章哈咯,朋友们!我是Rancher,这里是一个专注AI应用的频道~
Memories.ai是一个直接补上AI核心短板的创新产品,它不是简单的“视频工具”,而是给AI装了个“视觉记忆大脑”。
想象一下:你可以像和ChatGPT聊PDF一样,对着100小时的监控录像、十年的电影存档、百万条TikTok视频直接提问,AI立刻找出你要的画面、总结关键信息,甚至帮你生成剪辑好的视频——这不是科幻,是Memories.ai今天刚发布的“大型视觉记忆模型(LVMM)”做到的事。
一、从Meta实验室到创业:为什么要给AI做“视觉记忆”?
Shawn是Memories.ai的创始人,前Meta研究员、剑桥大学计算机博士。根据他的描述,他14岁时去英国读高中,最震撼的不是陌生的文化,而是记忆的视觉化——我能闭着眼想起家乡卧室的布局、朋友的面孔,这些不是“数据”,是能和新经历关联的“活的记忆”。
后来在Meta工作,他和团队一年发了4篇顶会论文,但越研究越发现:现在的AI“没记忆”——ChatGPT聊完就忘,Gemini处理1小时视频就上限,连谷歌、OpenAI的模型都卡在“长期视觉记忆”这个坎儿上。
做视觉记忆不是堆规模,而是AI领域最难啃的“硬骨头”:要压缩视频不丢信息,要索引内容不卡速度,要检索结果精准不跑偏,还要让“记忆越多越聪明”。如果AI能像人一样“看视频、记内容、能推理”,就能把海量视频从“存储包袱”变成“可对话的知识宝库”——这就是他离开Meta创业的原因,有些问题太重要,不容等待。
二、让AI像人一样“看+记+想”的底层逻辑
传统视频AI的逻辑是“一次性读整本书”:把整个视频塞进模型,处理30分钟就上限。而他们的Memories.ai模仿了人类记忆的工作方式,用“索引+检索”的思路,让AI能处理无限时长的视频——
线索激发:西部世界中福特博士的经典台词是什么?(比如“西部世界-场景-台词”);
粗略检索:“检索模型”快速从视频库中筛选出相关片段(比如背着粉色背包的狗);(你甚至可一看到它帮你标注了时间轴!)
细粒度提取:“全模态索引”和“选择模型”会提取细节——统计所有大豆场景并进行描述。(这个功能简直是混剪的福音!)
记忆监控:“反射模型”检查信息对不对(比如找一些视频网站上的具体类型产品的推广者);
记忆重构:“重建模型”把碎片拼成完整的答案,比如:剪辑一个电影摘要。
(我想,很快相关类型的内容,将会让生产量级井喷!)
简单说,Memories.ai不是“处理视频”,而是给视频建了个“可搜索的记忆库”——不管是1小时还是1000小时的视频,只要索引过,就能“随用随取”,不用再重新处理。
三、Memories.ai的能力可以解决很多真实场景痛点
Memories.ai不是为了技术而技术——Memories.ai已经帮客户解决了真问题:
企业级:把“视频包袱”变成“洞察金矿”
安保:和安保公司合作,帮他们从数月的监控录像里找“无人看管的行李”,以前要手动翻几小时,现在一句话就搞定;
媒体:电影工作室用它检索十年的存档镜头,导演找“1999年《黑客帝国》的绿色代码雨”,几秒就定位;
营销:索引了100万个TikTok视频,帮品牌找“提到耐克的内容”“当下流行的化妆品趋势”,不用再刷无尽的推送;
体育:帮球队分析运动员表现,比如“勒布朗整个职业生涯的三分球数”,AI会从所有比赛录像里统计,给出带视频验证的答案。
个人/创作者:把“视频苦力”变成“创意助手”
找回忆:有用户用它找小时候看过的电影,虽然描述不清场景,AI还是帮他定位到了类似镜头,甚至激发了创作灵感;做剪辑:只需说“把这个电影剪成适合TikTok的短剧”,AI会自动剪辑、加背景音乐,不用再拖拽 timeline;学知识:把讲座视频上传,AI会自动生成带视觉内容的PDF笔记,还能回答“第30分钟讲的机器学习算法是什么”;做营销:用Memories.ai来分析以前没注意到的“产品推销结构”,对现场营销进行优化。
(比较实用的功能)
(5s~2小时,文件小于1GB即可)*Memories.ai无法识别互联网链接中的视频,现在看起来比较麻烦的就是,你需要先在本地整理好素材。
现阶段只支持tiktok上的素材检索:
总之,这些功能已经让产品很有想象力了!AI的未来,是“会看会记”的未来
Memories.ai不是要做另一个视频编辑工具,而是要给AI装一个“视觉记忆层”——当AI能记住你看过的每一个视频、每一个场景,它就能真正理解你的需求:
帮创作者自动剪出高光,不用再熬夜剪辑;帮营销人员抓住趋势,不用再刷遍社交媒体;帮安保快速响应威胁,不用再盯着监控屏幕;帮学生整理笔记,不用再反复看讲座视频。
人工智能的未来,不是更聪明,而是更“像人”——会看、会记、会用记忆解决问题。
现在Memories.ai已经开放试用,有一说一,真的挺有意思的。
看起来AI的“视觉记忆”时代,从今天开始了。
点击关注我的账号!点赞、分享、推荐!这对我的帮助真的很大!感恩!
页:
[1]