langchain社区回调的infino_callback.get_num_tokens

langchain社区回调的infino_callback.get_num_tokens(string: str, openai_model_name: str) → int

使用tiktoken包计算OpenAI的令牌数量。

官方文档：https://github.com/openai/openai-cookbook/blob/main

/examples/How_to_count_tokens_with_tiktoken.ipynb

参数

• 字符串 (str) –

• openai模型名称 (str) –

返回类型

整数