Huawei OBS 目录
以下代码展示了如何将华为 OBS(对象存储服务)中的对象作为文档进行加载。
# Install the required package
# pip install esdk-obs-python
from langchain_community.document_loaders import OBSDirectoryLoader
API Reference:OBSDirectoryLoader
endpoint = "your-endpoint"
# Configure your access credentials\n
config = {"ak": "your-access-key", "sk": "your-secret-key"}
loader = OBSDirectoryLoader("your-bucket-name", endpoint=endpoint, config=config)
loader.load()
指定加载的前缀
如果你想从存储桶中加载具有特定前缀的对象,可以使用以下代码:
loader = OBSDirectoryLoader(
"your-bucket-name", endpoint=endpoint, config=config, prefix="test_prefix"
)
loader.load()
从 ECS 获取认证信息
如果您的 langchain 部署在华为云 ECS 上并已设置 代理,加载器可以直接从 ECS 获取安全令牌,而无需访问密钥和密钥。
config = {"get_token_from_ecs": True}
loader = OBSDirectoryLoader("your-bucket-name", endpoint=endpoint, config=config)
loader.load()
使用公共存储桶
如果您的存储桶的存储桶策略允许匿名访问(匿名用户拥有 listBucket 和 GetObject 权限),您可以直接加载对象,无需配置 config 参数。
loader = OBSDirectoryLoader("your-bucket-name", endpoint=endpoint)
loader.load()
Related
- Document loader conceptual guide
- Document loader how-to guides