Abstract not available.
多模态大语言模型（MLLMs）中的持续学习旨在顺序获取知识的同时缓解灾难性遗忘，然而现有方法存在固有局限性：基于架构的方法会引入额外计算开销且通常对新型任务泛化性差，基于重放的方法依赖存储历史数据从而引发隐私和存储问题，而传统正则化策略单独使用不足以完全防止参数干扰。我们提出章鱼（Octopus）——一种基于无历史梯度正交化（HiFGO）的两阶段持续学习框架，该框架无需历史任务数据即可实现梯度层面的正交性。我们提出的两阶段微调策略将任务适应与正则化解耦，在可塑性与稳定性之间达成原则性平衡。在UCIT上的实验表明，章鱼方法建立了最先进的性能，在平均准确率（Avg）和最终准确率（Last）指标上分别超越先前最优方法2.14%和6.82%。