多模态
分类
领域
但视觉与语言是完全异构模态，像素无法简单对应文字词元，攻克异构模态融合，一直是多模态领域长期发展的核心难点。
文章
对于多模态领域，这种从架构层面的重构，意义堪比Transformer之于大语言模型。
文章
模型
4月，商汤正式发布并开源了基于原生统一架构的多模态模型SenseNovaU1（简称U1），切入设计赛道。
文章
架构
并在今年3月推出原生统一多模态架构NEO-unify。
文章
技术
他与腾讯现任首席AI科学家姚顺雨曾在OpenAI共事，两人共同见证了GPT系列及多模态技术的迭代。
文章
安全护栏
7月13日，蚂蚁AI安全实验室宣布开源智能体安全护栏SingGuard-NSFA，并同步披露多模态安全护栏SingGuard的详细信息。
文章
SingGuard正是为此设计的多模态安全护栏。
文章
此次SingGuard-NSFA与SingGuard多模态安全护栏相继开源，是蚂蚁集团持续推进AI安全技术研发和开放生态建设的重要实践。
文章
信息
智能体开始自主调用工具、运行代码、规划任务，模型也逐渐具备理解图像、文本等多模态信息的能力，AI系统的能力边界不断拓展，也带来了新的安全挑战。
文章
