Azure Blob Storage 容器

Azure Blob Storageopen in new window 是微软的云端对象存储解决方案。Blob Storage 专为存储海量的非结构化数据进行优化。非结构化数据是指不符合特定数据模型或定义的数据,例如文本或二进制数据。

Azure Blob Storage 的设计目标包括:

  • 直接向浏览器提供图像或文档。
  • 存储用于分布式访问的文件。
  • 流式传输视频和音频。
  • 写入日志文件。
  • 存储用于备份和恢复、灾难恢复和归档的数据。
  • 存储用于本地部署或 Azure 托管服务的分析数据。

本文介绍了如何从 Azure Blob Storage 上的容器加载文档对象。

#!pip install azure-storage-blob
from langchain.document_loaders import AzureBlobStorageContainerLoader
loader = AzureBlobStorageContainerLoader(conn_str="<conn_str>", container="<container>")
loader.load()

[Document(page_content='Lorem ipsum dolor sit amet.', lookup_str='', metadata={'source': '/var/folders/y6/8_bzdg295ld6s1_97_12m4lr0000gn/T/tmpaa9xl6ch/fake.docx'}, lookup_index=0)]

指定前缀

您还可以指定一个前缀,以更精细地控制要加载的文件。

loader = AzureBlobStorageContainerLoader(conn_str="<conn_str>", container="<container>", prefix="<prefix>")
loader.load()

[Document(page_content='Lorem ipsum dolor sit amet.', lookup_str='', metadata={'source': '/var/folders/y6/8_bzdg295ld6s1_97_12m4lr0000gn/T/tmpujbkzf_l/fake.docx'}, lookup_index=0)]

Last Updated:
Contributors: 刘强