langchain_community.document_loaders.mhtml
.MHTMLLoader¶
- class langchain_community.document_loaders.mhtml.MHTMLLoader(file_path: Union[str, Path], open_encoding: Optional[str] = None, bs_kwargs: Optional[dict] = None, get_text_separator: str = ''][source]¶
使用 BeautifulSoup 解析 MHTML 文件。
通过路径初始化,可选地包括使用的文件编码,以及传递给 BeautifulSoup 对象的任何 kwargs。
- 参数
file_path (Union[str, Path]) – 要加载的文件的路径。
open_encoding (Optional[str]) – 打开文件时使用的编码。
bs_kwargs (Optional[dict]) – 要传递给 BeautifulSoup 对象的任何 kwargs。
get_text_separator (str) – 从 soup 获取文本时使用的分隔符。
方法
__init__
(file_path[, open_encoding, ...])通过路径初始化,可选地包括使用的文件编码,以及传递给 BeautifulSoup 对象的任何 kwargs。
文档的懒惰加载器。
aload
()将数据加载到文档对象中。
将 MHTML 文档加载到文档对象中。
load
()将数据加载到文档对象中。
load_and_split
([text_splitter])加载文档并将它们拆分为块。
- __init__(file_path: Union[str, Path], open_encoding: Optional[str] = None, bs_kwargs: Optional[dict] = None, get_text_separator: str = '') None [source]¶
通过路径初始化,可选地包括使用的文件编码,以及传递给 BeautifulSoup 对象的任何 kwargs。
- 参数
file_path (Union[str, Path]) – 要加载的文件的路径。
open_encoding (Optional[str]) – 打开文件时使用的编码。
bs_kwargs (Optional[dict]) – 要传递给 BeautifulSoup 对象的任何 kwargs。
get_text_separator (str) – 从 soup 获取文本时使用的分隔符。
- 返回类型
None
- load_and_split(text_splitter: Optional[TextSplitter] = None) List[Document] ¶
加载文档并将其拆分为块。块以Document的形式返回。
不要重写此方法。应考虑此方法已过时!
- 参数
text_splitter (可选[TextSplitter]) – 用于拆分文档的TextSplitter实例。默认值为RecursiveCharacterTextSplitter。
- 返回
Document列表。
- 返回类型
List[Document]