S3 Load
本文档主要介绍如何导入 AWS S3 中存储的数据。也支持导入其他支持S3协议的对象存储系统导入,如果百度云的BOS,阿里云的OSS和腾讯云的COS等、
- 源数据在 支持S3协议的存储系统中,如 S3,BOS 等。
- 准本AK 和 SK 首先需要找到或者重新生成 AWS ,可以在AWS console 的 找到生成方式, 如下图所示: AK_SK 选择 注意保存生成 AK和SK.
- 准备 REGION 和 ENDPOINT REGION 可以在创建桶的时候选择也可以在桶列表中查看到。ENDPOINT 可以通过如下页面通过REGION查到
导入方式和Broker Load 基本相同,只需要将 语句替换成如下部分
S3 SDK 默认使用 virtual-hosted style 方式。但某些对象存储系统可能没开启或没支持 virtual-hosted style 方式的访问,此时我们可以添加 参数来强制使用 path style 方式: