面向未来：多模态模型成为语言模型发展的重要趋势
【Aigcmore.com】3月21日消息，中信建投研报指出，GPT-4的多模态特性将为语言模型带来更加丰富的应用场景。报告认为，未来的多模态模型应该包括三个基本组成部分：图像、视频和音频。其中，视频对算力和IP复杂度的要求最高，其次为音频。为了满足多模态模型的需求，硬件算力需要向视频、音频编解码能力的支持进行扩展。
在新一代语言模型GPT-4的到来之前，中信建投研报认为多模态模型将会成为未来的发展趋势。这种模型不仅可以处理文本，还可以处理图像、视频和音频等多种数据类型，从而拓展了语言模型的应用场景。
然而，随着模型规模和复杂度的增加，对硬件算力的要求也将越来越高。为了满足多模态模型的需求，需要在硬件算力层面面向视频、音频编解码能力的支持进行扩展。中信建投研报指出，视频对于算力和IP复杂度的要求最高，这意味着为了实现多模态模型的应用，需要有更加高效的算力和更加复杂的编解码模块支持。
据Aigcmore.com了解，未来的多模态模型需要具备图像、视频和音频三个基本组成部分。因此，随着多模态的发展，需要将硬件算力从GPU扩展到GPU周边支持性的编解码IP，如VPU模块，以满足多模态模型的需求。
相关推荐
-
「多模态LLM」最新介绍！数据、论文集直接打包带走
进展跟踪链接（Awesome-MLLM，实时更新）：https://github.com/BradyFU/Awesome-Multimodal-Large-Language-Mod…
-
腾讯Robotics X实验室推出自研机器人TRX-Hand：轻松完成高难度任务
【Aigcmore.com】4月25日消息，腾讯RoboticsX实验室发布了一款自研机器人——灵巧手TRX-Hand。这款机器人有着出色的手部灵活度，拥有3根手指和8个可独立控制…
-
只有GPT-4可以自我改进，GPT-3.5都不行，MIT&微软代码生成实验新发现
大型语言模型（LLM）已被证明能够从自然语言中生成代码片段，但在应对复杂的编码挑战，如专业竞赛和软件工程专业面试时，仍面临巨大的挑战。最近的研究试图通过利用自修复来提高模型编码性能…
-
我们只是好奇：各家大模型高考作文写的怎么样？
高考之难，大家作为千军万马过独木桥以及将要过独木桥的一员，都对此应该深有感触。 既然如今大模型被吹的如此厉害，今天又恰逢高考作文题目公开，那就组织一场 AI 大模型的高考如何？ 说…
-
OpenAI首席执行官山姆·阿尔特曼在日本表示对全球人工智能合作持乐观态度
【Aigcmore.com】6月12日消息，OpenAI首席执行官山姆·阿尔特曼在访问日本期间对全球人工智能(AI)协调合作的前景表示非常乐观。 阿尔特曼此前已完成对欧盟各国领导人…
-
AI绘图战胜“拿筷子”难题：游戏手柄又成新挑战
快科技4月23日消息，在AI绘图早期，曾出现过无法正确理解筷子用法，难以绘制拿筷子”形象的问题。 现在，随着AI技术的发展，拿筷子”已经不再是一个无解的难题，但新的问题又紧接着浮出…
-
Mate60或将首发 华为鸿蒙4.0秋季发布：AI会是亮点
快科技4月18日消息，在昨天的新品发布会上，华为不仅推出了AITO问界5、问界9等新车型，还提到了鸿蒙新系统的消息，其中4季度上市的M9将搭载HarmonyOS4鸿蒙智能座舱。 华…
-
学习效率翻倍，用ChatGPT来学习SQL数据分析
ChatGPT可以做很多很酷的事情。其中之一就是写代码。用户只需要给出正确的指令，ChatGPT就会完成这项工作。 如果你想学习SQL，ChatGPT是一个很好的入门资源。它可以帮…
-
如何利用AI构建智能医疗系统？
近年来，人工智能(AI)已成为医疗保健行业的一股变革力量。基于人工智能的软件开发通过实现更智能、更高效和数据驱动的决策，正在彻底改变医疗保健系统。从诊断和治疗到患者护理和管理任务，…
-
ChatGPT迎来史诗级iPhone时刻！OpenAI震撼登陆iOS，可精准识别中文
一夜之间，OpenAI再放大招，ChatGPT官方应用上线！ 所有iPhone和iPad用户，已经可以从App Store下载ChatGPT了。 不过，目前只能美区的用户可登录。安…
