揭秘扩散模型"创造力"的数学本质
研究人员在ICLR 2026发表论文,揭示扩散模型的"创造力"并非随机现象,而是神经网络训练过程中正则化效应导致"得分函数平滑化"的数学结果。这种平滑化使生成过程在训练数据点之间进行插值,而非简单复制训练样本。研究表明,...
研究人员在ICLR 2026发表论文,揭示扩散模型的"创造力"并非随机现象,而是神经网络训练过程中正则化效应导致"得分函数平滑化"的数学结果。这种平滑化使生成过程在训练数据点之间进行插值,而非简单复制训练样本。研究表明,...
谷歌推出实验性开源模型DiffusionGemma,基于Gemma 4家族构建,采用扩散技术替代传统逐词元处理方式,可同时生成整段文本,推理速度比自回归模型快4倍。该模型为26B混合专家架构,推理时仅激活3.8B参数,量...
谷歌推出实验性开源模型DiffusionGemma,基于Gemma 4家族构建,采用扩散技术替代传统逐词元处理方式,能够同时生成整块文本,推理速度比自回归模型提升4倍。该模型为26B混合专家架构,推理时仅激活3.8B参数...
Google DeepMind推出Gemma 4开源模型家族新成员DiffusionGemma,采用类似图像生成的扩散机制,能并行生成整块文本,而非逐个token线性输出。该模型为MoE架构,总参数260亿,推理时仅激活...
Inception公司发布Mercury 2大语言模型,采用扩散技术而非传统自回归方法。该模型每秒可生成超过1000个标记,比OpenAI、Anthropic和谷歌的速度优化模型快5到10倍。扩散模型从粗略答案开始并行优...
谷歌DeepMind推出实验性研究模型Gemini Diffusion,采用扩散方法生成文本,打破传统大语言模型依赖自回归逐词生成的模式。该技术从随机噪声开始,逐步细化为连贯输出,显著提升生成速度至每秒1000-2000...
Inception是一家位于帕洛阿尔托的新公司,由斯坦福大学计算机科学教授Stefano Ermon创立,声称开发了一种基于“扩散”技术的新型AI模型,称为扩散基础的大型语言模型(DLM)。目前备受关注的生成AI模型大致...
可控场景生成(即生成具有可重新排列布局的图 像的任务)是生成建模的一个重要课题 [16, 34],其应 用范围包括社交媒体平台的内容生成和编辑,以及互 动式室内设计和视频游戏。