langchain_community.document_loaders.xorbits.XorbitsLoader

class langchain社区.document加载器.xorbits.XorbitsLoader(data_frame: Any, page_content_column: str = 'text')

加载 Xorbits DataFrame。

使用 DataFrame 对象初始化。

要求

必须安装 xorbits。您可以通过 pip install xorbits 安装。

参数

• data_frame (Any) – Xorbits DataFrame 对象。

• page_content_column (str) – 包含页面内容的列名称。默认为 “text”。

方法

__init__(data_frame[, page_content_column])	使用 DataFrame 对象初始化。
alazy_load()	Documents 的懒加载器。
aload()	将数据加载到 Document 对象中。
lazy_load()	从 DataFrame 中懒加载记录。
load()	将数据加载到 Document 对象中。
load_and_split([text_splitter])	加载 Documents 并分割为块。

__init__(data_frame: Any, page_content_column: str = 'text')

使用 DataFrame 对象初始化。

要求

必须安装 xorbits。您可以通过 pip install xorbits 安装。

参数

• data_frame (Any) – Xorbits DataFrame 对象。

• page_content_column (str) – 包含页面内容的列名称。默认为 “text”。

async alazy_load() → AsyncIterator[Document]

Documents 的懒加载器。

返回类型

AsyncIterator[Document]

async aload() → List[Document]

将数据加载到 Document 对象中。

返回类型

List[Document]

lazy_load() → Iterator[Document]¶

从 DataFrame 中懒加载记录。

返回类型

Iterator[Document]

load() → List[Document]¶

将数据加载到 Document 对象中。

返回类型

List[Document]

load_and_split(text_splitter: Optional[TextSplitter] = None) → List[Document]¶

加载文档并将它们分成块。块作为Document返回。

不要覆盖此方法。应考虑将其弃用！

参数

text_splitter (Optional[TextSplitter]) – 用于拆分文档的TextSplitter实例。默认值为RecursiveCharacterTextSplitter。

返回

文档列表。

返回类型

List[Document]

使用XorbitsLoader的示例

• Xorbits Pandas DataFrame