跳转到主要内容

Google BigQuery API客户端库

项目描述

GA pypi versions

在不合适的硬件和基础设施下,查询大量数据集可能既耗时又昂贵。Google BigQuery 通过利用Google基础设施的处理能力,使针对追加为主的表的SQL查询变得超级快速,从而解决了这个问题。

快速入门

为了使用这个库,您首先需要完成以下步骤:

  1. 选择或创建一个云平台项目。

  2. 为您的项目启用计费。

  3. 启用Google Cloud BigQuery API。

  4. 设置身份验证。

安装

使用pip在virtualenv中安装此库。virtualenv是一个用于创建隔离Python环境的工具。它解决的基本问题是依赖关系和版本,以及间接的权限问题。

使用virtualenv,可以在不需要系统安装权限的情况下安装此库,并且不会与已安装的系统依赖冲突。

支持的Python版本

Python >= 3.7

不受支持的Python版本

Python == 2.7, Python == 3.5, Python == 3.6。

与此库兼容的Python 2.7和3.5的最后版本是google-cloud-bigquery==1.28.0

Mac/Linux

pip install virtualenv
virtualenv <your-env>
source <your-env>/bin/activate
<your-env>/bin/pip install google-cloud-bigquery

Windows

pip install virtualenv
virtualenv <your-env>
<your-env>\Scripts\activate
<your-env>\Scripts\pip.exe install google-cloud-bigquery

示例用法

执行查询

from google.cloud import bigquery

client = bigquery.Client()

# Perform a query.
QUERY = (
    'SELECT name FROM `bigquery-public-data.usa_names.usa_1910_2013` '
    'WHERE state = "TX" '
    'LIMIT 100')
query_job = client.query(QUERY)  # API request
rows = query_job.result()  # Waits for query to finish

for row in rows:
    print(row.name)

使用OpenTelemetry进行监控

此应用程序使用OpenTelemetry从API调用输出到BigQuery的跟踪数据。为了在BigQuery客户端中启用OpenTelemetry跟踪,需要安装以下PyPI软件包

pip install google-cloud-bigquery[opentelemetry] opentelemetry-exporter-gcp-trace

安装后,可以在BigQuery客户端和BigQuery作业中使用OpenTelemetry。然而,首先必须指定一个导出器,以确定跟踪数据将被输出到哪里。示例在此

from opentelemetry import trace
from opentelemetry.sdk.trace import TracerProvider
from opentelemetry.sdk.trace.export import BatchSpanProcessor
from opentelemetry.exporter.cloud_trace import CloudTraceSpanExporter
tracer_provider = TracerProvider()
tracer_provider = BatchSpanProcessor(CloudTraceSpanExporter())
trace.set_tracer_provider(TracerProvider())

在此示例中,所有跟踪数据都将发布到Google Cloud Trace控制台。有关OpenTelemetry的更多信息,请参阅OpenTelemetry文档

项目详情


发布历史 发布通知 | RSS订阅

下载文件

下载适用于您的平台的文件。如果您不确定选择哪个,请了解有关安装包的更多信息。

源分布

google_cloud_bigquery-3.26.0.tar.gz (455.6 kB 查看哈希值)

上传时间

构建分布

google_cloud_bigquery-3.26.0-py2.py3-none-any.whl (239.1 kB 查看哈希值)

上传时间 Python 2 Python 3

由以下支持

AWS AWS 云计算和安全赞助商 Datadog Datadog 监控 Fastly Fastly CDN Google Google 下载分析 Microsoft Microsoft PSF 赞助商 Pingdom Pingdom 监控 Sentry Sentry 错误记录 StatusPage StatusPage 状态页面