分类: chatgpt

1 篇文章

DCT AI平台
1.什么是token? 总结:大部分情况下,你都可以使用 1 汉字 = 2 token 来近似估算中文聊天的中文所需 token 数。 Token 是大语言模型处理信息的最小单元,它介于“字”和“词”之间。 你可以用下方的网址,来计算一段文字会变成多少token: https://gpt-tokenizer.dev/ 2.性能 总结: gpt-4-…