> 백엔드 개발 > PHP 튜토리얼 > PHP 개발 시 빅데이터 계산 및 저장을 위해 Google BigQuery를 사용하는 방법

PHP 개발 시 빅데이터 계산 및 저장을 위해 Google BigQuery를 사용하는 방법

王林
풀어 주다: 2023-06-25 20:00:02
원래의
833명이 탐색했습니다.

데이터 양이 증가함에 따라 기존 데이터베이스 관리 시스템은 더 이상 빅 데이터의 저장 및 컴퓨팅 요구 사항을 충족할 수 없습니다. Google BigQuery는 새로운 유형의 클라우드 스토리지 및 컴퓨팅 서비스로서 점점 더 많은 기업과 개발자가 사용하고 있습니다. 이 기사에서는 PHP 개발에서 빅데이터 계산 및 저장을 위해 Google BigQuery를 사용하는 방법을 소개합니다.

1. Google BigQuery란

Google BigQuery는 대용량 데이터를 SQL 문을 통해 효율적으로 쿼리하고 Google Cloud Storage를 통해 저장할 수 있는 강력한 클라우드 빅데이터 분석 서비스입니다. Google BigQuery를 사용하면 서버나 데이터베이스 관리에 따른 비용과 스트레스 없이 데이터를 빠르게 분석할 수 있습니다. Google BigQuery는 SQL 언어를 지원하며 페타바이트 수준의 데이터를 처리할 수 있습니다.

2. Google BigQuery

  1. Google Cloud Platform 계정을 사용하기 위해 필요한 준비 사항: Google BigQuery를 사용하기 전에 Google Cloud Platform 계정을 신청하고 Google BigQuery 서비스를 활성화해야 합니다.
  2. Google Cloud SDK 설치: 로컬 개발에서 Google BigQuery를 사용하려면 Google Cloud SDK를 설치하고 필요한 구성을 수행해야 합니다. 설치 및 구성은 공식 웹사이트나 명령줄을 통해 수행할 수 있습니다.
  3. API 자격 증명: Google BigQuery API로 개발하기 전에 Google API 자격 증명을 얻어야 합니다. 먼저 Google Cloud Console에서 Google BigQuery API를 활성화하고 API 자격 증명을 만들어야 합니다. 사용자 인증 정보 유형에는 OAuth2.0 클라이언트 ID, 서비스 계정 키, API 키가 포함됩니다. 그 중 OAuth2.0 클라이언트 ID는 웹 애플리케이션에 사용하기에 적합하고, 서비스 계정 키는 백엔드에서 실행되는 애플리케이션에 사용하기에 적합하며, API 키는 간단한 HTTP/REST 애플리케이션에 사용하기에 적합합니다.

3. 데이터 쿼리에 Google BigQuery를 사용하세요

PHP 개발에서는 Google API 클라이언트 라이브러리를 사용하여 Google BigQuery API를 사용할 수 있습니다. 먼저 Google Cloud Console에서 프로젝트를 만들고 프로젝트에서 BigQuery API 서비스를 활성화해야 합니다. 그런 다음 Google Cloud Console에서 서비스 계정을 만들고 자격 증명.json 자격 증명 파일을 얻습니다. 마지막으로 Google API PHP 클라이언트 라이브러리를 다운로드하여 설치하세요.

다음은 Google BigQuery를 사용한 데이터 쿼리의 코드 구현입니다.

<?php
require_once __DIR__ . '/vendor/autoload.php';
putenv('GOOGLE_APPLICATION_CREDENTIALS=' . __DIR__ . '/credentials.json');
$client = new Google_Client();
$client->useApplicationDefaultCredentials();
$client->addScope(Google_Service_Bigquery::BIGQUERY);

// 设置查询选项
$options = [
    'useLegacySql' => false
];

// 查询SQL语句
$sql = 'SELECT count(*) as count FROM `project.dataset.table`';

// 创建BigQuery服务对象
$service = new Google_Service_Bigquery($client);

// 从BigQuery查询数据
$results = $service->jobs->query('project-id', new Google_Service_Bigquery_QueryJobConfiguration([
    'query' => $sql,
    'useLegacySql' => false
]));

// 从结果中获取行数据
if ($rows = $results->getRows()) {
    $count = $rows[0]['f'][0]['v'];
    echo 'count: ' . $count . PHP_EOL;
}
로그인 후 복사

위 코드에서는 Google API PHP 클라이언트 라이브러리를 사용하여 BigQuery 서비스 객체를 생성합니다. 그런 다음 쿼리 옵션을 설정하고 SQL 문을 통해 데이터를 쿼리하고 쿼리 결과에서 행 데이터를 가져옵니다. 마지막으로 필요에 따라 쿼리 결과에 대한 데이터 처리를 수행할 수 있습니다.

4. 데이터 저장을 위해 Google BigQuery를 사용하세요

Google BigQuery에서는 일괄 삽입, 스트리밍 데이터 삽입, 테이블 가져오기 등 다양한 방법으로 데이터 세트에 데이터를 저장할 수 있습니다. 아래에서는 데이터 저장을 위해 Google BigQuery를 사용하는 방법을 소개하기 위해 일괄 삽입을 예로 들어 보겠습니다.

  1. 데이터세트 및 테이블 생성

Google BigQuery를 데이터 저장용으로 사용하기 전에 Google Cloud Console에서 데이터세트와 테이블을 생성해야 합니다. 데이터 세트와 테이블을 생성하여 저장하려는 데이터의 데이터 유형과 구조를 지정할 수 있습니다.

  1. Google Cloud BigQuery의 PHP 확장 설치

Google BigQuery를 데이터 저장용으로 사용하려면 Google Cloud BigQuery의 PHP 확장 프로그램을 설치해야 하며, 공식 웹사이트나 명령줄에서 설치할 수 있습니다. 설치가 완료되면 PHP 구성 파일에 Google Cloud BigQuery 확장 프로그램을 추가해야 합니다.

  1. PHP 프로그램 작성

다음은 데이터 저장을 위해 Google BigQuery를 사용하는 PHP 프로그램의 예입니다.

<?php
require_once __DIR__ . '/vendor/autoload.php';
putenv('GOOGLE_APPLICATION_CREDENTIALS=' . __DIR__ . '/credentials.json');
$client = new Google_Client();
$client->useApplicationDefaultCredentials();
$client->addScope(Google_Service_Bigquery::BIGQUERY);

// 数据集和表的名称
$datasetName = 'project.dataset';
$tableName = 'table';

// 插入数据
$service = new Google_Service_Bigquery($client);
$rows = [
    ['column1' => 'value1', 'column2' => 123],
    ['column1' => 'value2', 'column3' => 'value3']
];
$service->tabledata->insertAll($projectId, $datasetName, $tableName, new Google_Service_Bigquery_TableDataInsertAllRequest([
    'rows' => $rows
]));
로그인 후 복사

위 예에서는 Google API PHP 클라이언트 라이브러리를 사용하여 BigQuery 서비스 객체를 생성했습니다. 데이터 세트 및 테이블의 이름이고 tabledata->insertAll()方法将数据插入到数据表中。其中,$rows는 삽입할 행 데이터입니다. 데이터의 각 행은 연관 배열입니다(키는 열 이름이고 값은 열 값입니다).

요약

Google BigQuery는 새로운 유형의 클라우드 스토리지 및 컴퓨팅 서비스로 개발자에게 강력한 빅데이터 분석 기능을 제공합니다. PHP 개발에서는 Google API PHP 클라이언트 라이브러리를 통해 Google BigQuery API를 사용하여 효율적인 쿼리 및 데이터 저장을 달성할 수 있습니다. 이 기사가 PHP 개발에 Google BigQuery를 사용하는 데 도움이 되기를 바랍니다.

위 내용은 PHP 개발 시 빅데이터 계산 및 저장을 위해 Google BigQuery를 사용하는 방법의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!

관련 라벨:
원천:php.cn
본 웹사이트의 성명
본 글의 내용은 네티즌들의 자발적인 기여로 작성되었으며, 저작권은 원저작자에게 있습니다. 본 사이트는 이에 상응하는 법적 책임을 지지 않습니다. 표절이나 침해가 의심되는 콘텐츠를 발견한 경우 admin@php.cn으로 문의하세요.
인기 튜토리얼
더>
최신 다운로드
더>
웹 효과
웹사이트 소스 코드
웹사이트 자료
프론트엔드 템플릿