人工智能领域又有新进展。
可理解视频内容的MiniGPT4-Video面世
人工智能领域又有新进展。随着MiniGPT4-Video的问世,视频理解这项难题有了显著的突破。
据报道,4月4日,KAUST和哈佛大学研究团队发表的论文中提出MiniGPT4-Video框架——专为视频理解而设计的多模态大模型。该模型能够处理时间视觉和文本数据,使其能够熟练地理解视频的复杂性。MiniGPT4-video不仅考虑视觉内容,还集成了文本对话,允许模型有效地回答涉及视觉和文本组件的查询。
例如,MiniGPT4-Video能够为宣传视频配出标题、宣传语;也可以对视频的处理过程进行理解。MiniGPT4-Video甚至可以根据视频内容进行诗歌创作、内容解说等。这意味着,MiniGPT4-Video在处理复杂视频内容时表现亮眼,提供高质量的输出。
据悉,该模型优于现有的最先进的方法,在MSVD、MSRVTT、TGIF和TVQA基准上分别提高了4.22%、1.13%、20.82%和13.1%,模型和代码已公开。但目前的缺陷在于上下文窗口限制。下一步,团队将研究模型能力扩展到处理更长视频的能力。
多模态概念股出炉
AI视频已然成为多模态LLM发展的大趋势。总的来说,融易新媒体消息,MiniGPT4-Video的出现是AI在视频理解领域迈出的一大步。随着未来研究的不断深入,有研究人员认为,MiniGPT4-Video将在多模态人工智能领域发挥更加重要的作用。
据证券时报·数据宝不完全统计,A股市场的多模态大模型概念股共计13只。从净利润变动来看,大华股份和万兴科技2023年净利润同比翻倍,增幅依次为217.1%、112.1%。另有拓维信息、佳都科技、北信源等实现扭亏为盈。
近期,大华股份在互动平台表示,公司在通信能力方面,围绕网络连接技术、数据交换技术和前沿网络技术三个方面,打造融合连接能力体系,通信和连接技术的持续进步,有助于支撑物联网向视联网升级。公司发布了星汉大模型,融合图像、点云、文本、语音等多模态数据,实现了准确性和泛化性的跃升,大幅提升视觉解析能力。
万兴科技旗下“天幕”大模型以音视频生成式AI技术为基础,由视频、音频、图片和语言大模型组成,涵盖文生视频、文生3D视频、视频AI配乐、数字人播报等近百项音视频原子能力,同时支持全球不同语言,相关能力已在Wondershare Filmora、Wondershare Virbo等海外产品上规模化商用。
固态电池 轻松续航1000公里,燃油车的末日来了吗? 2023年6月,北京卫蓝 新能源 科技有限公司...
2 AI视频理解再上一层楼 MiniGPT4-Video面世!多模态概念股有望受益人工智能 领域又有新进展。 可理解视频内容的MiniGPT4-Video面世 人工智能 领域又有新进展。随...
固态电池 轻松续航1000公里,燃油车的末日来了吗? 2023年6月,北京卫蓝 新能源 科技有限公司...
2 AI视频理解再上一层楼 MiniGPT4-Video面世!多模态概念股有望受益人工智能 领域又有新进展。 可理解视频内容的MiniGPT4-Video面世 人工智能 领域又有新进展。随...
3 “脱胎”华东医药 抢“减肥神药”首仿 上演同业竞争?减重市场之庞大,引众多药企“竞折腰”,与 华东医药 有着“隐秘”关系的IPO公司似乎要“拔...
4 4月高胜率板块揭秘 这个行业最有戏!券商4月金股出炉 两路资金清明节后A股会否迎来开门红?哪些行业最有戏? 清明节后A股怎么走 每年清明节后至4月底,...
5 越来越鹰!美联储鲍曼:如果通胀居高不下 可能需要进一步加息美东时间周五,美联储理事米歇尔·鲍曼就货币政策发表了讲话,她指出,现在还不是降低利率...
6 固态电池年内二次狂欢:三祥新材8天接近翻倍成“新欢” “旧固态电池 技术近期在多领域应用加速落地,A股相关概念股再度迎来爆发。 固态电池 电解质材...
7 何立峰同美财政部部长耶伦会谈中美经贸双方牵头人、国务院副总理何立峰和美财政部部长耶伦于4月5日至6日在广州举行多轮...
8 4日国际金价创盘中历史新高 收盘小幅下跌国际金价4月4日盘中一度涨至2325美元/盎司,创盘中历史新高。不过随后受部分投资者获利了结...
9 2023年我国医保医疗救助2.5亿人次医疗救助是我国医疗保障体系中起托底作用的制度安排,用来保障医疗救助对象获得基本医疗...
10 2024-2026,长征火箭有13次搭载和“拼车”机会近日,作为中国航天科技集团有限公司商业航天的先锋,航天科技集团长城公司同步发布2024~...
备案号:鄂ICP备2022006215号 Copyright © 2002-2022 关于我们 网站地图