大型语言模型 关键字列表
一文读懂 LLM 的构建模块:向量、令牌和嵌入

一文读懂 LLM 的构建模块:向量、令牌和嵌入

本文讨论了构建大型语言模型(LLM)的关键要素:向量、令牌和嵌入。向量是机器理解语言的基础,通过将文本数据转换为高维向量空间中的表示。令牌是文本数据在模型内部的表示形式,可以是单词、子词或字符。嵌入则是融入了语义语境的令牌表征,代表文本的意义和上下文信息。这些组件共同构筑了LLM的技术支柱,赋予模型卓越的语言理解和生成能力。

极智芯 | 解读近存计算AI芯势力Groq LPU

极智芯 | 解读近存计算AI芯势力Groq LPU

极智视界分享了Groq LPU的特点,这是一款专注于生成式AI推理加速的近存计算AI芯片。Groq的LPU以其高推理效率和近存计算技术,特别适合处理大型语言模型(LLM)。

音乐与大模型的研究

我们推出了ChatMusician,一个开源的大型语言模型(LLM),它通过在文本兼容的音乐表示上进行预训练和微调,能够理解和生成音乐。

LLM指导3D说话面部生成!百度提出AVI-Talking!

数源AI推荐了一篇论文AVI-Talking,该论文提出了一种基于音频-视觉指令的系统,用于生成表现力丰富的3D说话人脸。系统通过大型语言模型理解音频信息,并生成指令来指导基于扩散的生成网络合成逼真的3D面部动画。

思科将如何在2024年让Webex“变成”一个动词

思科的一位合作伙伴在谈及该公司重塑统一通信与协作(UC&C)统治地位的计划时,对CRN表示:“我认为,从呼叫的角度来说,(Webex)仍然处于相当有利的位置,而且我认为他们会通过联络中心加速前进。