ASF：Apache 软件基金会¶

Airflow 支持由 Apache 软件基金会创建的各种软件。

软件¶

这些集成允许您在 Apache 软件基金会开发的软件中执行各种操作。

Apache Beam¶

操作符: airflow.providers.apache.beam.operators.beam.
钩子: airflow.providers.apache.beam.hooks.beam.
指南: Apache Beam 操作符.
提供者: apache-airflow-providers-apache-beam
产品文档: Apache Beam

Apache Cassandra¶

钩子: airflow.providers.apache.cassandra.hooks.cassandra.
传感器: airflow.providers.apache.cassandra.sensors.record， airflow.providers.apache.cassandra.sensors.table。
指南: Apache Cassandra 操作符.
提供者: apache-airflow-providers-apache-cassandra
产品文档: Apache Cassandra

Apache Drill¶

钩子: airflow.providers.apache.drill.hooks.drill.
指南: 通过 SQLExecuteQueryOperator 连接到 Apache Drill.
提供者: apache-airflow-providers-apache-drill
产品文档: Apache Drill

Apache Druid¶

操作符: airflow.providers.apache.druid.operators.druid.
钩子: airflow.providers.apache.druid.hooks.druid.
指南: Apache Druid 操作符.
提供者: apache-airflow-providers-apache-druid
产品文档: Apache Druid

Apache Flink¶

操作符: airflow.providers.apache.flink.operators.flink_kubernetes.
传感器: airflow.providers.apache.flink.sensors.flink_kubernetes.
指南: Apache Flink 操作符.
提供者: apache-airflow-providers-apache-flink
产品文档: Apache Flink

Apache Hive¶

操作符: airflow.providers.apache.hive.operators.hive， airflow.providers.apache.hive.operators.hive_stats。
钩子: airflow.providers.apache.hive.hooks.hive.
传感器: airflow.providers.apache.hive.sensors.hive_partition， airflow.providers.apache.hive.sensors.metastore_partition， airflow.providers.apache.hive.sensors.named_hive_partition。
指南: Apache Hive 操作符.
提供者: apache-airflow-providers-apache-hive
产品文档: Apache Hive

Apache Impala¶

钩子: airflow.providers.apache.impala.hooks.impala.
提供者: apache-airflow-providers-apache-impala
产品文档: Apache Impala

Apache Kafka¶

操作符: airflow.providers.apache.kafka.operators.consume， airflow.providers.apache.kafka.operators.produce。
钩子: airflow.providers.apache.kafka.hooks.base， airflow.providers.apache.kafka.hooks.client， airflow.providers.apache.kafka.hooks.consume， airflow.providers.apache.kafka.hooks.produce。
传感器: airflow.providers.apache.kafka.sensors.kafka.
提供者: apache-airflow-providers-apache-kafka
产品文档: Apache Kafka

Apache Kylin¶

操作符: airflow.providers.apache.kylin.operators.kylin_cube.
钩子: airflow.providers.apache.kylin.hooks.kylin.
提供者: apache-airflow-providers-apache-kylin
产品文档: Apache Kylin

Apache Livy¶

操作符: airflow.providers.apache.livy.operators.livy.
钩子: airflow.providers.apache.livy.hooks.livy.
传感器: airflow.providers.apache.livy.sensors.livy.
指南: Apache Livy 操作符.
提供者: apache-airflow-providers-apache-livy
产品文档: Apache Livy

Apache Pig¶

操作符: airflow.providers.apache.pig.operators.pig.
钩子: airflow.providers.apache.pig.hooks.pig.
指南: Apache Pig 操作符.
提供者: apache-airflow-providers-apache-pig
产品文档: Apache Pig

Apache Pinot¶

钩子: airflow.providers.apache.pinot.hooks.pinot.
指南: Apache Pinot 钩子.
提供者: apache-airflow-providers-apache-pinot
产品文档: Apache Pinot

Apache Spark¶

操作符: airflow.providers.apache.spark.operators.spark_jdbc， airflow.providers.apache.spark.operators.spark_sql， airflow.providers.apache.spark.operators.spark_submit。
钩子: airflow.providers.apache.spark.hooks.spark_connect， airflow.providers.apache.spark.hooks.spark_jdbc， airflow.providers.apache.spark.hooks.spark_jdbc_script， airflow.providers.apache.spark.hooks.spark_sql， airflow.providers.apache.spark.hooks.spark_submit。
指南: Apache Spark 操作符.
提供者: apache-airflow-providers-apache-spark
产品文档: Apache Spark

标准¶

操作符: airflow.providers.standard.operators.datetime, airflow.providers.standard.operators.weekday, airflow.providers.standard.operators.bash, airflow.providers.standard.operators.python, airflow.providers.standard.operators.generic_transfer, airflow.providers.standard.operators.trigger_dagrun, airflow.providers.standard.operators.latest_only。
钩子: airflow.providers.standard.hooks.filesystem, airflow.providers.standard.hooks.package_index, airflow.providers.standard.hooks.subprocess。
传感器: airflow.providers.standard.sensors.date_time, airflow.providers.standard.sensors.time_delta, airflow.providers.standard.sensors.time, airflow.providers.standard.sensors.weekday, airflow.providers.standard.sensors.bash, airflow.providers.standard.sensors.python, airflow.providers.standard.sensors.filesystem, airflow.providers.standard.sensors.external_task。
指南: BashOperator, PythonOperator, BranchDateTimeOperator。
提供者: apache-airflow-providers-standard
产品文档: 标准

WebHDFS¶

钩子: airflow.providers.apache.hdfs.hooks.webhdfs.
传感器: airflow.providers.apache.hdfs.sensors.web_hdfs.
指南: WebHDFS 操作符.
提供者: apache-airflow-providers-apache-hdfs
产品文档: WebHDFS

传输¶

这些集成允许您复制来自/到 Apache 软件基金会开发的软件的数据。

Apache Hive 到 Amazon DynamoDB¶

源产品文档: Apache Hive
目标产品文档: Amazon DynamoDB
操作符指南: Apache Hive 到 Amazon DynamoDB
Python API: airflow.providers.amazon.aws.transfers.hive_to_dynamodb
提供者: apache-airflow-providers-amazon

Apache Hive 到 Apache Druid¶

源产品文档: Apache Hive
目标产品文档: Apache Druid
Python API: airflow.providers.apache.druid.transfers.hive_to_druid
提供者: apache-airflow-providers-apache-druid

Vertica 到 Apache Hive¶

源产品文档: Vertica
目标产品文档: Apache Hive
Python API: airflow.providers.apache.hive.transfers.vertica_to_hive
提供者: apache-airflow-providers-apache-hive

Apache Hive 到 MySQL¶

源产品文档: Apache Hive
目标产品文档: MySQL
Python API: airflow.providers.apache.hive.transfers.hive_to_mysql
提供者: apache-airflow-providers-apache-hive

Apache Hive 到 Samba¶

源产品文档: Apache Hive
目标产品文档: Samba
Python API: airflow.providers.apache.hive.transfers.hive_to_samba
提供者: apache-airflow-providers-apache-hive

Amazon Simple Storage Service (S3) 到 Apache Hive¶

源产品文档: Amazon Simple Storage Service (S3)
目标产品文档: Apache Hive
Python API: airflow.providers.apache.hive.transfers.s3_to_hive
提供者: apache-airflow-providers-apache-hive

MySQL 到 Apache Hive¶

源产品文档: MySQL
目标产品文档: Apache Hive
Python API: airflow.providers.apache.hive.transfers.mysql_to_hive
提供者: apache-airflow-providers-apache-hive

Microsoft SQL Server (MSSQL) 到 Apache Hive¶

源产品文档: Microsoft SQL Server (MSSQL)
目标产品文档: Apache Hive
Python API: airflow.providers.apache.hive.transfers.mssql_to_hive
提供者: apache-airflow-providers-apache-hive

Apache Cassandra 到 Google Cloud Storage (GCS)¶

源产品文档: Apache Cassandra
目标产品文档: Google Cloud Storage (GCS)
Python API: airflow.providers.google.cloud.transfers.cassandra_to_gcs
提供者: apache-airflow-providers-google

此条目是否有帮助？