2026-07-10
CoFrGeNets:用连分数重构Transformer模型架构
IBM Research提出了一种新型模型架构CoFrGeNets(连分数生成网络),旨在替代GPT、Llama等主流大模型中的多头注意力机制和前馈网络。该架构基于数学中的连分数理论,通过"梯形"计算结构以更少参数表达更...
IBM Research提出了一种新型模型架构CoFrGeNets(连分数生成网络),旨在替代GPT、Llama等主流大模型中的多头注意力机制和前馈网络。该架构基于数学中的连分数理论,通过"梯形"计算结构以更少参数表达更...