langchain_google_community.gcs_directory.GCSDirectoryLoader

class langchain_google_community.gcs_directory.GCSDirectoryLoader(project_name: str, bucket: str, prefix: str = '', loader_func: Optional[Callable[[str], BaseLoader]] = None)[source]

从GCS目录加载。

使用存储桶和密钥名称初始化。

参数

  • project_name (str) – GCS存储桶所属项目的ID。

  • bucket (str) – GCS存储桶的名称。

  • prefix (str) – GCS存储桶的前缀。

  • loader_func (Optional[Callable[[str], BaseLoader]]) – 基于文件路径参数实例化的加载器函数。如果没有提供，GCSFileLoader将使用其默认加载器。

方法

__init__(project_name, bucket[, prefix, ...])

使用存储桶和密钥名称初始化。

alazy_load()

Documents的懒加载。

aload()

将数据加载到Document对象中。

lazy_load()

Documents的懒加载。

load()

加载文档。

load_and_split([text_splitter])

加载Documents并将它们拆分为块。
__init__(project_name: str, bucket: str, prefix: str = '', loader_func: Optional[Callable[[str], BaseLoader]] = None)[source]

使用存储桶和密钥名称初始化。

参数

  • project_name (str) – GCS存储桶所属项目的ID。

  • bucket (str) – GCS存储桶的名称。

  • prefix (str) – GCS存储桶的前缀。

  • loader_func (Optional[Callable[[str], BaseLoader]]) – 基于文件路径参数实例化的加载器函数。如果没有提供，GCSFileLoader将使用其默认加载器。

async alazy_load() → AsyncIterator[Document]

Documents的懒加载。

返回类型

AsyncIteratorDocument

async aload() → List[Document]

将数据加载到Document对象中。

返回类型

Document

lazy_load() → Iterator[Document]

Documents的懒加载。

返回类型

IteratorDocument

load() → List[Document][source]

加载文档。

返回类型

Document

load_and_split(text_splitter: Optional[TextSplitter] = None) → List[Document]

加载文档并将它们分割成块。这些块作为文档返回。

不要重写此方法。应考虑将其已弃用！

参数

text_splitter (可选[TextSplitter]) – 用于分割文档的 TextSplitter 实例。默认为 RecursiveCharacterTextSplitter。

返回值

文档列表。

返回类型

列表[Document]