Apache Livy 连接

Apache Livy 连接类型支持连接到 Apache Livy。Apache Livy 连接底层使用 Http 连接。

默认连接 ID

Livy Hook 使用参数 livy_conn_id 来指定连接 ID,默认值为 livy_default

配置连接

主机

Livy 服务器的 http 主机。你可以在 主机 字段中添加方案,或者在 方案 字段中提供。

端口

如果主机是 Apache Livy 服务器的 URL,则指定端口。

方案 (可选)

指定服务类型等:http/https。

登录名 (可选)

指定要连接的 Apache Livy 服务器的登录名。

密码 (可选)

指定要连接的 Apache Livy 服务器的密码。

附加参数 (可选)

以 json 格式指定头部信息。

在环境变量中指定连接时,应使用 URI 语法进行指定。

请注意,URI 的所有组成部分都应进行 URL 编码。

例如

export AIRFLOW_CONN_LIVY_DEFAULT='http://username:password@livy-server.com:80?headers=header'

此条目有帮助吗?