ASF：Apache 软件基金会¶

Airflow 支持 Apache 软件基金会创建的各种软件。

软件¶

这些集成使您能够在 Apache 软件基金会开发的软件中执行各种操作。

Apache Beam¶

运算符: airflow.providers.apache.beam.operators.beam.
挂钩: airflow.providers.apache.beam.hooks.beam.
指南: Apache Beam 运算符.
提供程序: apache-airflow-providers-apache-beam
产品文档: Apache Beam

Apache Cassandra¶

挂钩: airflow.providers.apache.cassandra.hooks.cassandra.
传感器: airflow.providers.apache.cassandra.sensors.record，airflow.providers.apache.cassandra.sensors.table。
指南: Apache Cassandra 算子.
提供程序: apache-airflow-providers-apache-cassandra
产品文档: Apache Cassandra

Apache Drill¶

运算符: airflow.providers.apache.drill.operators.drill.
挂钩: airflow.providers.apache.drill.hooks.drill.
指南: 通过 SQLExecuteQueryOperator 连接到 Apache Drill.
提供程序: apache-airflow-providers-apache-drill
产品文档: Apache Drill

Apache Druid¶

运算符: airflow.providers.apache.druid.operators.druid，airflow.providers.apache.druid.operators.druid_check。
挂钩: airflow.providers.apache.druid.hooks.druid.
指南: Apache Druid 算子.
提供程序: apache-airflow-providers-apache-druid
产品文档: Apache Druid

Apache Flink¶

运算符: airflow.providers.apache.flink.operators.flink_kubernetes.
传感器: airflow.providers.apache.flink.sensors.flink_kubernetes.
指南: Apache Flink 算子.
提供程序: apache-airflow-providers-apache-flink
产品文档: Apache Flink

Apache Hive¶

运算符: airflow.providers.apache.hive.operators.hive，airflow.providers.apache.hive.operators.hive_stats。
挂钩: airflow.providers.apache.hive.hooks.hive.
传感器: airflow.providers.apache.hive.sensors.hive_partition，airflow.providers.apache.hive.sensors.metastore_partition，airflow.providers.apache.hive.sensors.named_hive_partition。
指南: Apache Hive 算子.
提供程序: apache-airflow-providers-apache-hive
产品文档: Apache Hive

Apache Impala¶

挂钩: airflow.providers.apache.impala.hooks.impala.
提供程序: apache-airflow-providers-apache-impala
产品文档: Apache Impala

Apache Kafka¶

运算符: airflow.providers.apache.kafka.operators.consume，airflow.providers.apache.kafka.operators.produce。
挂钩: airflow.providers.apache.kafka.hooks.base，airflow.providers.apache.kafka.hooks.client，airflow.providers.apache.kafka.hooks.consume，airflow.providers.apache.kafka.hooks.produce。
传感器: airflow.providers.apache.kafka.sensors.kafka.
提供程序: apache-airflow-providers-apache-kafka
产品文档: Apache Kafka

Apache Kylin¶

运算符: airflow.providers.apache.kylin.operators.kylin_cube.
挂钩: airflow.providers.apache.kylin.hooks.kylin.
提供程序: apache-airflow-providers-apache-kylin
产品文档: Apache Kylin

Apache Livy¶

运算符: airflow.providers.apache.livy.operators.livy.
挂钩: airflow.providers.apache.livy.hooks.livy.
传感器: airflow.providers.apache.livy.sensors.livy.
指南: Apache Livy Operators.
提供程序: apache-airflow-providers-apache-livy
产品文档: Apache Livy

Apache Pig¶

运算符: airflow.providers.apache.pig.operators.pig.
挂钩: airflow.providers.apache.pig.hooks.pig.
指南: Apache Pig Operators.
提供程序: apache-airflow-providers-apache-pig
产品文档: Apache Pig

Apache Pinot¶

挂钩: airflow.providers.apache.pinot.hooks.pinot.
指南: Apache Pinot Hooks.
提供程序: apache-airflow-providers-apache-pinot
产品文档: Apache Pinot

Apache Spark¶

运算符: airflow.providers.apache.spark.operators.spark_jdbc，airflow.providers.apache.spark.operators.spark_sql，airflow.providers.apache.spark.operators.spark_submit。
挂钩: airflow.providers.apache.spark.hooks.spark_connect，airflow.providers.apache.spark.hooks.spark_jdbc，airflow.providers.apache.spark.hooks.spark_jdbc_script，airflow.providers.apache.spark.hooks.spark_sql，airflow.providers.apache.spark.hooks.spark_submit。
指南: Apache Spark 算子.
提供程序: apache-airflow-providers-apache-spark
产品文档: Apache Spark

WebHDFS¶

挂钩: airflow.providers.apache.hdfs.hooks.webhdfs.
传感器: airflow.providers.apache.hdfs.sensors.web_hdfs.
指南: WebHDFS 算子.
提供程序: apache-airflow-providers-apache-hdfs
产品文档: WebHDFS

传输¶

这些集成允许您从 Apache Software Foundation 开发的软件中复制数据或将数据复制到该软件。

Apache Hive 到 Amazon DynamoDB¶

源产品文档: Apache Hive
目标产品文档: Amazon DynamoDB
操作指南: Apache Hive 到 Amazon DynamoDB
Python API: airflow.providers.amazon.aws.transfers.hive_to_dynamodb
提供程序: apache-airflow-providers-amazon

Apache Hive 到 Apache Druid¶

源产品文档: Apache Hive
目标产品文档: Apache Druid
Python API: airflow.providers.apache.druid.transfers.hive_to_druid
提供程序: apache-airflow-providers-apache-druid

Vertica 到 Apache Hive¶

源产品文档: Vertica
目标产品文档: Apache Hive
Python API: airflow.providers.apache.hive.transfers.vertica_to_hive
提供程序: apache-airflow-providers-apache-hive

Apache Hive 到 MySQL¶

源产品文档: Apache Hive
目标产品文档: MySQL
Python API: airflow.providers.apache.hive.transfers.hive_to_mysql
提供程序: apache-airflow-providers-apache-hive

Apache Hive 至 Samba¶

源产品文档: Apache Hive
目标产品文档: Samba
Python API: airflow.providers.apache.hive.transfers.hive_to_samba
提供程序: apache-airflow-providers-apache-hive

Amazon Simple Storage Service (S3) 至 Apache Hive¶

源产品文档: Amazon Simple Storage Service (S3)
目标产品文档: Apache Hive
Python API: airflow.providers.apache.hive.transfers.s3_to_hive
提供程序: apache-airflow-providers-apache-hive

MySQL 至 Apache Hive¶

源产品文档: MySQL
目标产品文档: Apache Hive
Python API: airflow.providers.apache.hive.transfers.mysql_to_hive
提供程序: apache-airflow-providers-apache-hive

Microsoft SQL Server (MSSQL) 至 Apache Hive¶

源产品文档: Microsoft SQL Server (MSSQL)
目标产品文档: Apache Hive
Python API: airflow.providers.apache.hive.transfers.mssql_to_hive
提供程序: apache-airflow-providers-apache-hive

Apache Cassandra 至 Google Cloud Storage (GCS)¶

源产品文档: Apache Cassandra
目标产品文档: Google Cloud Storage (GCS)
Python API: airflow.providers.google.cloud.transfers.cassandra_to_gcs
提供程序: apache-airflow-providers-google

此条目有帮助吗？