目前，无论是需要超强硬件支撑的AI迭代与训练，还是运行要求相对较低、需求相对分散的AI推理，均在超算中心内进行，采用云生成然后发送到端的形式运作。
但随着AIGC内容愈加丰富，从文本发展到图像、视频等多模态内容，上述模式引发了一系列的问题，例如网络带宽成本高昂、时延较为严重等，进而影响到AI大模型的商业化进程与用户使用体验。
而作为算力体系的重要一环，边缘算力具有低时延、安全性高等优势。因此，智能模组的重要性开始凸显。
智能模组则为边缘算力的最佳载体，有机构称其为AI的“毛细血管”。智能模组是指融入了算力或通用处理芯片的通讯模组，已经应用于车机、消费等多个领域。目前，已有厂商尝试相关方案：
3月2日，高通中国公众号发布了全球首个运行于安卓手机上的Stable Diffusion终端侧演示。此前，Stable Diffusion只能在云端计算集群内运行。
3月23日，华为推出“智能搜图”功能，基于多模态大模型技术，在手机端侧对模型进行小型化处理。
华为与高通一定程度上验证了高性能边缘AI的可行性，通过模型压缩叠加联网智能的方式有望在边缘端实现AI大模型的体验。在两者的示范效应下，智能物联网模组相关企业有望获得发展。
