跳转到主要内容

为Apache Airflow回溯databricks提供程序包apache-airflow-backport-providers-databricks

项目描述

包apache-airflow-backport-providers-databricks

版本:2020.11.23

目录

回溯包

这是一个为databricks提供程序的回溯提供程序包。此提供程序包的所有类都在airflow.providers.databricks Python包中。

此回溯包仅支持Python 3.6+。

虽然 Airflow 1.10.* 继续支持 Python 2.7+ - 如果您想使用这个回滚包,则需要将 Python 升级到 3.6+。

安装

您可以通过 pip install apache-airflow-backport-providers-databricks 在现有的 airflow 1.10.* 安装上安装此包。

PIP要求

PIP 包 所需版本
requests >=2.20.0, <3

提供者类摘要

在 Airflow 2.0 中,所有 databricks 提供者的操作员、传输、钩子、传感器和密钥都在 airflow.providers.databricks 包中。您可以阅读更多关于提供者包命名约定的信息,请参阅 提供者包命名约定

操作符

移动操作符

Airflow 2.0 操作员: airflow.providers.databricks Airflow 1.10.* 之前的位置(通常为 airflow.contrib
operators.databricks.DatabricksRunNowOperator contrib.operators.databricks_operator.DatabricksRunNowOperator
operators.databricks.DatabricksSubmitRunOperator contrib.operators.databricks_operator.DatabricksSubmitRunOperator

钩子

移动钩子

Airflow 2.0 钩子: airflow.providers.databricks Airflow 1.10.* 之前的位置(通常为 airflow.contrib
hooks.databricks.DatabricksHook contrib.hooks.databricks_hook.DatabricksHook

发布

发布 2020.11.23

提交 已提交 主题
19b7e4565 2020-11-18 启用 Markdownlint 规则 MD003/heading-style/header-style (#12427)
ae7cb4a1e 2020-11-17 更新回滚提供者更改中的错误提交哈希 (#12390)
6889a333c 2020-11-15 改进操作员和钩子参考文档 (#12366)
7825e8f59 2020-11-13 文档安装改进 (#12304)
b02722313 2020-11-13 向 databricks 钩子添加安装/卸载 API (#12316)
85a18e13d 2020-11-09 针对提供者包的交叉依赖指向 PyPI 项目页面 (#12212)
59eb5de78 2020-11-09 更新提供者 README 以符合即将推出的 1.0.0beta1 版本 (#12206)
b2a28d159 2020-11-09 将提供者包脚本移动到 dev (#12082)
7e0d08e1f 2020-11-09 添加 Databricks 操作员的如何操作指南 (#12175)
4e8f9cc8d 2020-11-03 启用 Black - Python 自动格式化器 (#9550)
8c42cf1b0 2020-11-03 使用 PyUpgrade 使用 Python 3.6 功能 (#11447)
5a439e84e 2020-10-26 准备提供者版本 0.0.2a1 (#11855)

发布 2020.10.29

提交 已提交 主题
b680bbc0b 2020-10-24 为 2020.10.29 生成回滚提供者 readmes/setup (#44)
349b0811c 2020-10-20 添加 D200 pydocstyle 检查 (#11688)
16e712971 2020-10-13 添加对 Airflow 2.0 提供者包的支持 (#11487)
0a0e1af80 2020-10-03 修复提供者 README TOC 中的损坏的 Markdown 链接 (#11249)

发布 2020.10.5

提交 已提交 主题
ca4238eb4 2020-10-02 修复回滚包中的月份为十月 (#11242)
5220e4c38 2020-10-02 准备回滚版本 2020.09.07 (#11238)
54353f874 2020-09-27 增加五个不同提供者的类型覆盖率 (#11170)
966a06d96 2020-09-18 如果未在 extras 中提供,则从连接中获取 databricks 主机 (#10762)
9549274d1 2020-09-09 升级 black 到 20.8b1 (#10818)
fdd9b6f65 2020-08-25 在提供者包上启用 Black (#10543)
bfefcce0c 2020-08-25 更新 REST API 调用,以便 GET 请求将有效负载传递到查询字符串而不是请求正文 (#10462)
3696c34c2 2020-08-24 修复单词 "release" 中的拼写错误 (#10528)
2f2d8dbfa 2020-08-25 删除 IntelliJ 本地所有 "noinspection" 注释 (#10525)
ee7ca128a 2020-08-22 修复提供者 README 中的损坏的 Markdown 引用 (#10483)
cdec30125 2020-08-07 为所有操作员和传感器添加正确的签名 (#10205)
7d24b088c 2020-07-25 在 example_dags (2) 中停止使用 start_date 在 default_args 中 (#9985)
e13a14c87 2020-06-21 启用并修复与空格相关的 PyDocStyle 检查 (#9458)
d0e7db402 2020-06-19 修复新版本中的发布编号 (#9408)

发布 2020.6.24

提交 已提交 主题
12af6a080 2020-06-19 为 2020.6.23rc1 版本准备最终清理 (#9404)
c7e5bce57 2020-06-19 为 2020.6.23rc1 准备回滚发布候选 (#9370)
f6bd817a3 2020-06-16 引入 'transfers' 包 (#9320)
0b0e4f7a4 2020-05-26 为回滚的 RC3 版本做准备 (#9026)
00642a46d 2020-05-26 修复剩余 20 个命名错误的操作员名称。 (#8994)
f1073381e 2020-05-22 在 Databricks 操作员中添加对 spark python 和提交任务的支持 (#8846)
375d1ca22 2020-05-19 回滚包 2020.05.20 的发布候选 2 (#8898)
12c5e5d8a 2020-05-17 为回滚包准备发布候选 (#8891)
f3521fb0e 2020-05-16 为回滚包发布生成说明文件 (#8886)
92585ca4c 2020-05-15 为回滚操作员添加了自动化发布说明生成功能 (#8807)
649935e8c 2020-04-27 [AIRFLOW-8472]: PATCH 对 Databricks 插件 _do_api_call 的修复 (#8473)
16903ba3a 2020-04-24 [AIRFLOW-8474]: 添加从 Databricks 运行中获取 job_id 的可能性 (#8475)
5648dfbc3 2020-03-23 在 'amazon', 'cloudant' 和 'databricks' 提供商中添加对 Super 类的缺失调用 (#7827)
3320e432a 2020-02-24 [AIRFLOW-6817] 懒加载 airflow.DAG 以保持用户界面 API 不变 (#7517)
4d03e33c1 2020-02-22 [AIRFLOW-6817] 从 airflow/__init__.py 中删除导入,用显式导入替换隐式导入,并在 UPDATING.MD 中添加条目 - squashed/rebased (#7456)
97a429f9d 2020-02-02 [AIRFLOW-6714] 删除关于 UTF-8 的魔法注释 (#7338)
83c037873 2020-01-30 [AIRFLOW-6674] 根据 AIP-21 将 example_dags 移动到适当位置 (#7287)
c42a375e7 2020-01-27 [AIRFLOW-6644][AIP-21] 将服务类移动到 providers 包中 (#7265)

项目详情


下载文件

下载您平台上的文件。如果您不确定要选择哪个,请了解更多关于 安装软件包 的信息。

源代码分发

构建分发

支持者:

AWS AWS 云计算和安全赞助商 Datadog Datadog 监控 Fastly Fastly CDN Google Google 下载分析 Microsoft Microsoft PSF 赞助商 Pingdom Pingdom 监控 Sentry Sentry 错误记录 StatusPage StatusPage 状态页面