Azure Blob Storage 到 Amazon S3 传输操作符¶

使用 AzureBlobStorageToS3Operator 传输操作符将数据从 Azure Blob Storage 复制到 Amazon Simple Storage Service (S3)。

先决条件任务¶

要使用这些操作符，您必须执行以下操作

使用 AWS 控制台或 AWS CLI 创建必要的资源。
通过 pip 安装 API 库。
pip install 'apache-airflow[amazon]'
详细信息请参阅 Airflow® 的安装
设置连接.

操作符¶

Azure Blob Storage 到 Amazon S3¶

要将数据从 Azure Blob Storage 容器复制到 Amazon S3 存储桶，您可以使用 AzureBlobStorageToS3Operator

示例用法

tests/system/amazon/aws/example_azure_blob_to_s3.py

azure_blob_to_s3 = AzureBlobStorageToS3Operator(
    task_id="azure_blob_to_s3",
    container_name=azure_container_name,
    dest_s3_key=s3_key_url,
)

参考¶

这个条目是否有帮助？