公开课程预览
了解语言模型如何使用 BPE 和其他算法将文本分解为标记，以及为什么标记化影响从成本到功能的一切。
完成本课后，你将理解:
神经网络与数字一起工作。他们无法像您那样读“你好”这个词。在任何语言模型可以处理文本之前，必须将其分解为称为“令牌”的小数字片段。这个看似简单的步骤对人工智能如何理解和误解语言产生了深远的影响。
标记化 - 人工智能如何读取文本 属于 AI 萌芽
标记化 - 人工智能如何读取文本 是 AI 萌芽 的一部分。升级后可解锁完整课程、测验、进度跟踪和所有学院内容。
7 天免费。随时取消，无需任何理由。