作业内的 Klio 管道执行器
项目描述
klio-exec 软件包
执行器 – 不建议用户直接使用 – 是一个CLI,用于在作业的Docker容器内部启动管道(即Apache Beam的“驱动器”)。许多来自klio-cli的命令直接包装成执行器中的命令:一个klio-cli命令将通过与klio-exec相关的命令来设置运行管道所需的Docker上下文。Docker上下文包括挂载作业目录、设置环境变量、挂载凭证等。
由于klio-exec软件包不建议直接安装,请查看安装指南了解如何设置安装。还有用户指南和API文档以获取更多信息。
什么是Klio?
Klio是一个允许您轻松且大规模处理音频文件(或任何二进制文件)的生态系统。
Klio作业是建立在Apache Beam之上的、针对音频和二进制文件处理而优化的Python(流式或批处理)有偏见的数据管道。
Klio由Spotify构建,用于运行我们的大规模音频智能系统,并由工程师和音频研究团队使用,以帮助开发并部署下一代音频算法。
有关Klio的更多信息,请点击此处。
入门指南
查看我们的快速入门指南,了解如何开始使用Klio。
资源
查看我们的完整文档。
查看我们的贡献者指南。
加入Spotify FOSS Slack组织中的#klio频道。
阅读一些我们的常见问题解答。
查看我们的行为准则 - 这是我们的行事方式。
版本信息
22.3.0 (2022-03-04)
修复
修复了在通过PCollection传递时为None的bug。例如,当用户希望将数据输入配置完全从作业配置中删除时。
项目详情
下载文件
下载适用于您平台的文件。如果您不确定选择哪一个,请了解更多关于安装包的信息。
源代码分发
klio-exec-22.3.0.tar.gz (52.9 kB 查看哈希值)
构建分发
klio_exec-22.3.0-py2.py3-none-any.whl (38.9 kB 查看哈希值)
关闭
klio-exec-22.3.0.tar.gz的哈希值
算法 | 哈希摘要 | |
---|---|---|
SHA256 | b49c725383c8fd3437c05aca65b276d61fe15500d5b85b709b8d5d3a0ce81c17 |
|
MD5 | b3bf15e2bd43de38da258ea5525fd79e |
|
BLAKE2b-256 | 587754cbff3f1e56e83d3d02bc154fc40ac1a765dda7c237874516d50e7fff5f |
关闭
klio_exec-22.3.0-py2.py3-none-any.whl的哈希值
算法 | 哈希摘要 | |
---|---|---|
SHA256 | f03e15a98efc8a46c413f21949ca4bf1c9c854dfdbe25c7f0ad1a457e72331f3 |
|
MD5 | 2f51fb3671e6e3886ad2963d4d50c514 |
|
BLAKE2b-256 | a57b5631a4522a497c8c1de2a66dfca9e997cd893a432084d323913e9e31072e |