langchain_mistralai.embeddings.DummyTokenizer

class langchain_mistralai.embeddings.DummyTokenizer[源代码]

当分词器不可访问时(例如通过Huggingface)使用的假的分词器

方法

__init__()

encode_batch(texts)

__init__()
encode_batch(texts: List[str]) List[List[str]][源代码]
参数

texts (列表[string]) –

返回类型

列表[列表[字符串]]