跳转到主要内容

用于维护工件元数据的库。

项目描述

ML元数据

Python PyPI

ML元数据(MLMD) 是一个用于记录和检索与ML开发者和数据科学家工作流程相关的元数据的库。

注意:ML元数据可能在1.0版本之前可能不兼容。

入门

有关MLMD的更多背景信息和使用说明,请参阅 入门指南

从PyPI安装

安装ML元数据推荐的方法是使用 PyPI包

pip install ml-metadata

然后导入相关包

from ml_metadata import metadata_store
from ml_metadata.proto import metadata_store_pb2

夜间包

ML元数据(MLMD)还在Google Cloud上的https://pypi-nightly.tensorflow.org托管每日构建的包。要安装最新的每日构建包,请使用以下命令

pip install --extra-index-url https://pypi-nightly.tensorflow.org/simple ml-metadata

使用Docker安装

这是在Linux下构建ML元数据的推荐方法,并在Google上持续测试。

请首先按照以下说明安装dockerdocker-composedockerdocker-compose

然后在项目根目录下运行以下命令

DOCKER_SERVICE=manylinux-python${PY_VERSION}
sudo docker-compose build ${DOCKER_SERVICE}
sudo docker-compose run ${DOCKER_SERVICE}

其中PY_VERSION是以下之一:{39, 310, 311}

dist/下将生成一个wheel文件,并按照以下方式安装

pip install dist/*.whl

从源代码安装

1. 先决条件

要编译和使用ML元数据,您需要设置一些先决条件。

安装Bazel

如果系统上没有安装Bazel,请按照这些说明进行安装。

安装cmake

如果系统上没有安装cmake,请按照这些说明进行安装。

2. 克隆ML元数据仓库

git clone https://github.com/google/ml-metadata
cd ml-metadata

请注意,这些说明将安装ML元数据的最新master分支。如果您想安装特定的分支(例如发布分支),请将-b <branchname>传递给git clone命令。

3. 构建pip包

ML元数据使用Bazel从源代码构建pip包

python setup.py bdist_wheel

生成的.whl文件可以在dist子目录中找到。

4. 安装pip包

pip install dist/*.whl

5.(可选)构建grpc服务器

ML元数据使用Bazel从源代码构建C++二进制文件

bazel build -c opt --define grpc_no_ares=true  //ml_metadata/metadata_store:metadata_store_server

支持的平台

MLMD在以下64位操作系统上构建和测试

  • macOS 10.14.6(Mojave)或更高版本。
  • Ubuntu 20.04或更高版本。
  • [已弃用] Windows 10或更高版本。对于兼容Windows的库,请参阅MLMD 1.14.0或更早版本。

项目详情


下载文件

下载您平台的文件。如果您不确定选择哪个,请了解有关安装包的更多信息。

源分发

本发行版没有提供源分布文件。请参阅有关生成分布存档的教程。

构建的分布

ml_metadata-1.16.0-cp311-cp311-manylinux_2_17_x86_64.manylinux2014_x86_64.whl (7.5 MB 查看哈希值)

上传时间 CPython 3.11 manylinux: glibc 2.17+ x86-64

ml_metadata-1.16.0-cp311-cp311-macosx_12_0_x86_64.whl (20.1 MB 查看哈希值)

上传时间 CPython 3.11 macOS 12.0+ x86-64

ml_metadata-1.16.0-cp310-cp310-manylinux_2_17_x86_64.manylinux2014_x86_64.whl (7.5 MB 查看哈希值)

上传时间 CPython 3.10 manylinux: glibc 2.17+ x86-64

ml_metadata-1.16.0-cp310-cp310-macosx_12_0_x86_64.whl (20.1 MB 查看哈希值)

上传时间 CPython 3.10 macOS 12.0+ x86-64

ml_metadata-1.16.0-cp39-cp39-manylinux_2_17_x86_64.manylinux2014_x86_64.whl (7.5 MB 查看哈希值)

上传时间 CPython 3.9 manylinux: glibc 2.17+ x86-64

ml_metadata-1.16.0-cp39-cp39-macosx_12_0_x86_64.whl (20.1 MB 查看哈希值)

上传时间 CPython 3.9 macOS 12.0+ x86-64

由以下机构支持

AWS AWS 云计算和安全赞助商 Datadog Datadog 监控 Fastly Fastly CDN Google Google 下载分析 Microsoft Microsoft PSF赞助商 Pingdom Pingdom 监控 Sentry Sentry 错误记录 StatusPage StatusPage 状态页面