所以对于中文来说，GPT4 api 的价格低于 GPT3

G_Z: @dotey GPT-4的tokenizer对中文效率好了很多, 以前8000 token 是3800个中文字左右, 现在能用到6700字.

英文单词比token大概是1.35 .
中文的话, GPT3 比例大概是2.1 (单中文字~2.1 token)
而新的ChatGPT API和GPT4则是大幅优化到了 1.2 .
(以前用约34万字的三体黑暗森林做实验)