Jak programowo zapytać program BigQuery z poziomu Pythona bez interakcji użytkownika końcowego?

Question

To pytanie wydaje się być tak proste, aby odpowiedzieć, ale po dniach badań i kilku ślepych uliczkach, nie mogę wydawać wyników zapytania z BigQuery bez nalegań na OAuth użytkownika. Czy ktoś miał na to szczęście? Nie używam aplikacji Google AppEngine, jest ona hostowana pod numerem EC2. Oto dokładna sytuacja:

User wants reporting data --> 
Web server makes queries to BigQuery --> 
Data is transformed for use in WebApp and returned to User. 

Ilekroć wykonaj przykłady Google, ja skończyć się coraz przeglądarki internetowej pojawiały się z prośbą o mnie, aby wybrać konto Google, aby użyć do uwierzytelniania.

Answer 1

Przykro mi, ale trudno jest znaleźć informacje na ten temat. Szukacie tego, co się nazywa Service Accounts, które są udokumentowane w naszym przewodniku Authorizing Access to the BigQuery API using OAuth 2.0.

Oto przykład, używając Python client library, chociaż będziemy chcieli spojrzeć na odnośną dokumentacją Informacje o nabyciu odpowiednich poświadczeń:

import httplib2 

from apiclient.discovery import build 
from oauth2client.client import SignedJwtAssertionCredentials 

# REPLACE WITH YOUR Project ID 
PROJECT_NUMBER = 'XXXXXXXXXXX' 
# REPLACE WITH THE SERVICE ACCOUNT EMAIL FROM GOOGLE DEV CONSOLE 
SERVICE_ACCOUNT_EMAIL = 'XXXXX@developer.gserviceaccount.com' 

# OBTAIN THE KEY FROM THE GOOGLE APIs CONSOLE 
# More instructions here: http://goo.gl/w0YA0 
f = file('key.p12', 'rb') 
key = f.read() 
f.close() 

credentials = SignedJwtAssertionCredentials(
    SERVICE_ACCOUNT_EMAIL, 
    key, 
    scope='https://www.googleapis.com/auth/bigquery') 

http = httplib2.Http() 
http = credentials.authorize(http) 

service = build('bigquery', 'v2') 
datasets = service.datasets() 
response = datasets.list(projectId=PROJECT_NUMBER).execute(http) 

print 'Dataset list:' 
for dataset in response['datasets']: 
    print '%s' % dataset['datasetReference']['datasetId'] 

Answer 2

miałem ten sam problem. Jest to prawdopodobnie spowodowane brakiem wymaganych uprawnień w projekcie dla klucza konta usługi, z którego korzystasz.

Answer 3

Jeśli zalogować lokalnie gcloud:

gcloud auth application-default login 

Następnie pliki poświadczenia zostaną zapisane w ~/.config/gcloud /, który może być ładowany z:

from oauth2client.client import GoogleCredentials 
from apiclient.discovery import build 

credentials = GoogleCredentials.get_application_default() 
service = build('bigquery', 'v2') 

lub można wystarczy załadować plik klucza bezpieczeństwa BQ bezpośrednio za pomocą:

from google.cloud import bigquery 
client = bigquery.Client.from_service_account_json(path_to_key.json)