LIVE INDEX / 最新文章
"知识诞生"的奥秘:MIT研究揭示大语言模型如何跨越时间、空间和规模形成语义特征

"知识诞生"的奥秘:MIT研究揭示大语言模型如何跨越时间、空间和规模形成语义特征

这项研究探索了大语言模型内部可解释特征的形成过程,分析了它们在训练过程中(时间)、模型层级间(空间)和不同规模模型(尺度)的行为变化。研究团队使用稀疏自编码器技术,成功识别出特定语义概念在神经激活中出现的时间点和位置。研...

自适应思维模式切换:南京大学研究团队提出进程级思维模式动态调整方法,让AI更"聪明"也更"高效"

自适应思维模式切换:南京大学研究团队提出进程级思维模式动态调整方法,让AI更"聪明"也更"高效"

南京大学研究团队提出了一种新型推理范式:进程级自适应思维模式切换(PATS),能让大型语言模型根据每步推理的难度动态调整思维策略。与传统固定策略不同,PATS在波束搜索框架中通过控制候选步骤数量(2/4/8个)模拟不同复...