• 解读AI大模型，从了解token开始
  • 什么是token？最小的语义单元
  • GPT系列采用了什么样的token类型？
  • 如何用子词来表示和生成文本？
  • 编码和解码
  • 嵌入和预测
  • 生成与自回归
  • 总结

解读AI大模型，从了解token开始​

2024年8月27日修改
2024年7月10日创建
​
作者：AI小智​
原文：https://mp.weixin.qq.com/s/Q-8mCeUookrhEo5UFFZciw​
​
​
附件不支持打印
common.docs_name - LarkCCM_Docs_Menu_Image
飞书文档 - 图片
​