tests.system.google.cloud.dataproc.example_dataproc_workflow¶

用于 Dataproc 工作流操作符的 Airflow DAG 示例。

属性¶

`ENV_ID`
`DAG_ID`
`PROJECT_ID`
`REGION`
`CLUSTER_NAME_BASE`
`CLUSTER_NAME_FULL`
`CLUSTER_NAME`
`CLUSTER_CONFIG`
`PIG_JOB`
`WORKFLOW_NAME`
`WORKFLOW_TEMPLATE`
`create_workflow_template`
`test_run`

模块内容¶

tests.system.google.cloud.dataproc.example_dataproc_workflow.ENV_ID[源代码]¶

tests.system.google.cloud.dataproc.example_dataproc_workflow.DAG_ID = 'dataproc_workflow'[源代码]¶

tests.system.google.cloud.dataproc.example_dataproc_workflow.PROJECT_ID[源代码]¶

tests.system.google.cloud.dataproc.example_dataproc_workflow.REGION = 'europe-west1'[源代码]¶

tests.system.google.cloud.dataproc.example_dataproc_workflow.CLUSTER_NAME_BASE = ''[源代码]¶

tests.system.google.cloud.dataproc.example_dataproc_workflow.CLUSTER_NAME_FULL = ''[源代码]¶

tests.system.google.cloud.dataproc.example_dataproc_workflow.CLUSTER_NAME = ''[源代码]¶

tests.system.google.cloud.dataproc.example_dataproc_workflow.CLUSTER_CONFIG[源代码]¶

tests.system.google.cloud.dataproc.example_dataproc_workflow.PIG_JOB[源代码]¶

tests.system.google.cloud.dataproc.example_dataproc_workflow.WORKFLOW_NAME = 'airflow-dataproc-test'[源代码]¶

tests.system.google.cloud.dataproc.example_dataproc_workflow.WORKFLOW_TEMPLATE[源代码]¶

tests.system.google.cloud.dataproc.example_dataproc_workflow.create_workflow_template[源代码]¶

tests.system.google.cloud.dataproc.example_dataproc_workflow.test_run[源代码]¶

此条目有帮助吗？