langchain_mistralai.embeddings
.DummyTokenizer¶
- class langchain_mistralai.embeddings.DummyTokenizer[源代码]¶
当分词器不可访问时(例如通过Huggingface)使用的假的分词器
方法
__init__
()encode_batch
(texts)- __init__()¶
langchain_mistralai.embeddings
.DummyTokenizer¶当分词器不可访问时(例如通过Huggingface)使用的假的分词器
方法
|
|
|