PHP はオープンソースの Storm 分散コンピューティングを実装します

インターネット ビジネスの継続的な拡大に伴い、データ処理の需要はますます高まっており、従来のスタンドアロン コンピューティングでは対応できなくなり、水平方向の拡張性を備えた分散コンピューティングが広く使用されています。 Java 言語に基づく Storm 分散コンピューティング フレームワークは、分散リアルタイム コンピューティングの分野で広く使用されています。ただし、一部の小規模なプロジェクトや個人にとって、Java 環境の展開と使用は比較的複雑です。そのため、この記事では PHP を使用します。オープンソースの Storm 分散コンピューティング。

1. Storm の概要

Storm は、Twitter によって開発され、2013 年 9 月にオープンソース化された、無料のオープンソースの分散型リアルタイム コンピューティング システムです。 Storm には次の利点があります:

(1) フォールト トレランス: Storm のアーキテクチャは、Zookeeper および Nimbus コンポーネントに基づいており、コンポーネントの障害を自動的に検出して再起動できるため、単一点障害によるシステムの問題の可能性が軽減されます。 ;

(2) スケーラビリティ: Storm は計算にフローベースのモデルを使用しており、理論的にはさまざまな規模のコンピューティング ニーズに合わせて無限に拡張できます。;

(3) 効率: Storm は効率的です。リアルタイム コンピューティングのニーズを満たすことができる処理能力と低遅延を実現します。

2. Storm 分散コンピューティングを実装するための PHP の必要性

Storm は強力な機能と優れたパフォーマンスを備えていますが、Storm の展開と使用には Java 環境のサポートが必要です。一部の小規模なプロジェクトや個人では、Java 環境のデプロイと使用に依然として一定のしきい値があり、特定の困難が生じています。

PHP は広く使用されている Web 言語として、導入と使用が比較的簡単で、Web サーバーの構築や Web アプリケーションの開発も容易です。そのため、Storm 分散コンピューティングを PHP 環境に実装できれば、コストを削減できます。開発コストを削減し、開発効率を向上させます。

#PHP で Storm 分散コンピューティングを実装する方法

PHP 環境で Storm 分散コンピューティングを実装するには、次の 2 つの関数を実装する必要があります。

( 1) メッセージ受け渡しメカニズム: Storm はデータ送信にタプルを使用するため、タプル配信メカニズムを実装する必要があります;

(2) 分散コンピューティング: スパウト (データ ソース) およびボルト (データ プロセッサ) コンポーネントが必要です実装される計算ロジック、およびトポロジー (プロセス) の構築と実行。

上記の 2 つの点に対応して、この記事では次の実装計画を提案します。

(1) メッセージ受け渡しのメカニズム

PHP 言語自体はタプル配信をサポートしていません。メカニズムがあるため、一部はサードパーティのコンポーネントを使用して実装されます。現在人気のあるコンポーネントには、ZeroMQ や Apache Thrift などがあります。その中から 1 つを選択してください。

(2) 分散コンピューティング

Spout、Bolt、Topology の計算ロジックは PHP 言語を使用して実装できます。具体的な実装は次のとおりです。

(i) スパウト: Storm のデータ ソースは、外部システムからデータを読み取り、それをタプルにカプセル化する役割を果たします。 PHP を開発に使用し、サードパーティのコンポーネントを通じて外部データ ソースにリクエストを送信してデータを取得し、取得したデータを Tuple にカプセル化して、ZeroMQ や Apache Thrift などのコンポーネントを通じてプロセッサに送信できます。

(ii) ボルト: データ プロセッサは、Storm でデータを処理し、新しいタプルをダウンストリームに発行する責任があります。 PHP を使用して開発し、タプルを受信した後に処理し、処理結果を新しいタプルにカプセル化して、ZeroMQ や Apache Thrift などのコンポーネントを介して次のプロセッサまたは最終プロセッサに送信できます。

(iii) トポロジ: プロセス コントローラーは、Storm でスパウトとボルトを組み立て、データ フローを制御する責任があります。 PHP を開発に使用して、Spout と Bolt のトポロジを実装し、スケジュールされたタプルの発行、タプルのグループ化と並べ替え、障害回復などのプロセス制御を実行できます。

結論

PHP による Storm 分散コンピューティングの実装は、開発コストを削減し、開発効率を向上させることができ、分散リアル コンピューティングを実装する必要がある小規模プロジェクトや個人に方法を提供します。時間計算の新しいオプション。 PHP 言語自体は分散コンピューティングのサポートが比較的弱いですが、サードパーティのコンポーネントを使用することでメッセージ パッシング メカニズムを実装でき、スパウト、ボルト、トポロジの計算ロジックを実装する PHP コードを記述することで、Storm 分散コンピューティングを実現できます。簡単に実装できます。

以上がPHP はオープンソースの Storm 分散コンピューティングを実装しますの詳細内容です。詳細については、PHP 中国語 Web サイトの他の関連記事を参照してください。