作为美国卡内基梅隆大学的助理教授和美国 AI 初创公司 Cartesia 的联合创始人， Albert Gu 曾凭借联合提出 Mamba 这一新型序列建模架构而 入选 TIME 100 AI ， 还曾入选 2025 谷歌研究学者计划名单。

在人工智能飞速发展的今天，语言模型已经成为我们日常生活中不可或缺的一部分。不过，你可能不知道的是，现在的AI系统在理解文本时都需要一个叫做"分词器"的预处理步骤，就像我们在做菜前需要把食材切成小块一样。然而，这种传统做法存在不少问题。来自卡内基梅隆大 ...

USC的研究团队通过深入观察发现了一个有趣的现象：几乎所有现代图像生成模型，无论是扩散模型还是自回归模型，在训练过程中都在做同一件事情——从损坏的信息中恢复完整的图像。这就像拼图游戏一样，有些模型从被高斯噪声破坏的图片中恢复原图，有些模型则从部分遮挡 ...

中文分词是中文自然语言处理的一个非常重要的组成部分，在学界和工业界都有比较长时间的研究历史，也有一些比较成熟的解决方案。今天我们 ...

金融界2025年7月12日消息，达闼机器人股份有限公司近日获得国家知识产权局授予的“分词方法及装置”专利（公告号CN114676697B），该专利申请于2022年3月。这一技术的突破将为自然语言处理（NLP）领域带来新的发展机遇，助力企业在人工智能应 ...

从 ChatGPT 到文心一言，大模型已成产品革新的关键。但要真正理解它们的能力，产品经理必须掌握底层的语言处理机制。这篇文章将拆解 Tokenizer 与 Embedding 的核心逻辑，用产品视角解析 AI 如何“读懂”语言。 当我们向 ...

在人工智能技术迅猛发展的背景下，语言模型已成为我们生活中不可或缺的组成部分。卡内基梅隆大学与CartesiaAI的研究团队近日发布了一项具有革命性的研究成果，提出了全新的H-Net架构，能够让AI系统直接处理原始字节级数据，摆脱传统分词器的依赖。这项 ...

中文分词的最佳效果又被刷新了。 在今年的ACL 2020上，来自创新工场大湾区人工智能研究院的两篇论文中的模型，刷新了这一领域的成绩。 WMSeg，在 ...

Jiaying 英语中，分词的用法多样，它们常用来构成动词的完成时态或进行时态。 部分动词的现在分词和过去分词可以作形容词使用，甚至是用在一句话中构成分句的一部分。 我们先来看一下问题中提到的第一组句子。 Phil 'I am starving to death' and 'I am starved to death'.

雷锋网 AI 研习社按，本文系广州火焰信息科技有限公司投稿，作者苏剑林。正文如下： 中文分词 关于中文分词的介绍和重要性，我就不多说了 ...

三、分词的复合结构 单独分词作状语时，分词的逻辑主语必须与主句主语一致;当分句的逻辑主语与主句的主语不一致时，为了表意明确，分词会自带一个逻辑主语，这就形成了独立主格结构。 分词的复合结构和作状语的分词用法相同，只是加上了逻辑主语。

Transformer架构作为当前大语言模型的主流架构，因为拥有特殊的注意力机制，存在输出长度较短的缺点。为了解决这个问题，业界提出RWKV、Mamba等解决方案。 其中，Albert ...