So verwenden Sie Google BigQuery für die Berechnung und Speicherung großer Datenmengen in der PHP-Entwicklung

Angesichts der zunehmenden Datenmenge können herkömmliche Datenbankverwaltungssysteme die Speicher- und Rechenanforderungen von Big Data nicht mehr erfüllen. Google BigQuery wird als neuartiger Cloud-Speicher- und Computing-Dienst von immer mehr Unternehmen und Entwicklern genutzt. In diesem Artikel wird erläutert, wie Sie Google BigQuery für die Berechnung und Speicherung großer Datenmengen in der PHP-Entwicklung verwenden.

1. Was ist Google BigQuery? Google BigQuery ist ein leistungsstarker Cloud-Big-Data-Analysedienst, der große Datenmengen mithilfe von SQL-Anweisungen effizient abfragen und über Google Cloud Storage speichern kann. Google BigQuery ermöglicht eine schnelle Analyse von Daten ohne die Kosten und den Stress einer Server- oder Datenbankverwaltung. Google BigQuery unterstützt die SQL-Sprache und kann Daten im Petabyte-Bereich verarbeiten.

2. Welche Vorbereitungen sind für die Verwendung von Google BigQuery erforderlich? Google Cloud Platform-Konto: Bevor Sie Google BigQuery verwenden können, müssen Sie ein Google Cloud Platform-Konto beantragen und den Google BigQuery-Dienst aktivieren.

Installation des Google Cloud SDK: Für die Verwendung von Google BigQuery in der lokalen Entwicklung ist die Installation des Google Cloud SDK und das Vornehmen der erforderlichen Konfigurationen erforderlich. Installation und Konfiguration können über die offizielle Website oder die Befehlszeile erfolgen.

API-Anmeldeinformationen: Bevor Sie mit der Google BigQuery API entwickeln, müssen Sie Google API-Anmeldeinformationen erhalten. Sie müssen zunächst die Google BigQuery API in der Google Cloud Console aktivieren und API-Anmeldeinformationen erstellen. Zu den Arten von Anmeldeinformationen gehören die OAuth2.0-Client-ID, der Dienstkontoschlüssel und der API-Schlüssel. Darunter eignet sich die OAuth2.0-Client-ID für die Verwendung in Webanwendungen, der Dienstkontoschlüssel eignet sich für die Verwendung in Anwendungen, die im Backend ausgeführt werden, und der API-Schlüssel eignet sich für die Verwendung in einfachen HTTP/REST-Anwendungen.
2. 3. Verwenden Sie Google BigQuery für die Datenabfrage.
3. In der PHP-Entwicklung können wir die Google API-Clientbibliothek verwenden, um die Google BigQuery-API zu verwenden. Zunächst müssen Sie ein Projekt in der Google Cloud Console erstellen und den BigQuery-API-Dienst im Projekt aktivieren. Erstellen Sie dann ein Dienstkonto in der Google Cloud Console und rufen Sie die Anmeldeinformationsdatei „credentials.json“ ab. Laden Sie abschließend die Google API PHP-Clientbibliothek herunter und installieren Sie sie.

Das Folgende ist die Code-Implementierung der Datenabfrage mit Google BigQuery:

<?php
require_once __DIR__ . '/vendor/autoload.php';
putenv('GOOGLE_APPLICATION_CREDENTIALS=' . __DIR__ . '/credentials.json');
$client = new Google_Client();
$client->useApplicationDefaultCredentials();
$client->addScope(Google_Service_Bigquery::BIGQUERY);

// 设置查询选项
$options = [
    'useLegacySql' => false
];

// 查询SQL语句
$sql = 'SELECT count(*) as count FROM `project.dataset.table`';

// 创建BigQuery服务对象
$service = new Google_Service_Bigquery($client);

// 从BigQuery查询数据
$results = $service->jobs->query('project-id', new Google_Service_Bigquery_QueryJobConfiguration([
    'query' => $sql,
    'useLegacySql' => false
]));

// 从结果中获取行数据
if ($rows = $results->getRows()) {
    $count = $rows[0]['f'][0]['v'];
    echo 'count: ' . $count . PHP_EOL;
}

Im obigen Code erstellen wir ein BigQuery-Dienstobjekt mithilfe der PHP-Clientbibliothek der Google API. Anschließend legen wir die Abfrageoptionen fest, fragen die Daten über SQL-Anweisungen ab und erhalten Zeilendaten aus den Abfrageergebnissen. Schließlich können wir bei Bedarf eine Datenverarbeitung der Abfrageergebnisse durchführen.

4. Verwenden Sie Google BigQuery zur Datenspeicherung

In Google BigQuery können wir Daten auf verschiedene Arten in Datensätzen speichern, einschließlich Batch-Einfügung, Streaming-Dateneinfügung, Tabellenimport usw. Im Folgenden verwenden wir das Batch-Einfügen als Beispiel, um die Verwendung von Google BigQuery zur Datenspeicherung vorzustellen.

Datensätze und Tabellen erstellen

Bevor Sie Google BigQuery zur Datenspeicherung verwenden, müssen Sie einen Datensatz und eine Tabelle in der Google Cloud Console erstellen. Durch das Erstellen von Datensätzen und Tabellen können wir den Datentyp und die Struktur für die Daten angeben, die wir speichern möchten.

Installieren Sie die PHP-Erweiterung von Google Cloud BigQuery

Die Verwendung von Google BigQuery zur Datenspeicherung erfordert die Installation der PHP-Erweiterung von Google Cloud BigQuery, die auf der offiziellen Website oder über die Befehlszeile installiert werden kann. Nach Abschluss der Installation müssen Sie die Google Cloud BigQuery-Erweiterung zur PHP-Konfigurationsdatei hinzufügen.

Schreiben eines PHP-Programms

Hier ist ein Beispiel eines PHP-Programms, das Google BigQuery zur Datenspeicherung verwendet:

<?php
require_once __DIR__ . '/vendor/autoload.php';
putenv('GOOGLE_APPLICATION_CREDENTIALS=' . __DIR__ . '/credentials.json');
$client = new Google_Client();
$client->useApplicationDefaultCredentials();
$client->addScope(Google_Service_Bigquery::BIGQUERY);

// 数据集和表的名称
$datasetName = 'project.dataset';
$tableName = 'table';

// 插入数据
$service = new Google_Service_Bigquery($client);
$rows = [
    ['column1' => 'value1', 'column2' => 123],
    ['column1' => 'value2', 'column3' => 'value3']
];
$service->tabledata->insertAll($projectId, $datasetName, $tableName, new Google_Service_Bigquery_TableDataInsertAllRequest([
    'rows' => $rows
]));

3. Im obigen Beispiel haben wir die PHP-Clientbibliothek der Google API verwendet, um ein BigQuery-Dienstobjekt zu erstellen Der Name des Datensatzes und der Tabelle und
sind die einzufügenden Zeilendaten. Jede Datenzeile ist ein assoziatives Array (der Schlüssel ist der Spaltenname und der Wert ist der Spaltenwert).

Zusammenfassung

Als neue Art von Cloud-Speicher- und Computing-Dienst bietet Google BigQuery Entwicklern leistungsstarke Big-Data-Analysefunktionen. Bei der PHP-Entwicklung können wir die Google BigQuery-API über die Google API-PHP-Clientbibliothek verwenden, um eine effiziente Abfrage und Speicherung von Daten zu erreichen. Ich hoffe, dieser Artikel hilft Ihnen bei der Verwendung von Google BigQuery in der PHP-Entwicklung. tabledata->insertAll()方法将数据插入到数据表中。其中，$rows

Das obige ist der detaillierte Inhalt vonSo verwenden Sie Google BigQuery für die Berechnung und Speicherung großer Datenmengen in der PHP-Entwicklung. Für weitere Informationen folgen Sie bitte anderen verwandten Artikeln auf der PHP chinesischen Website!