ネットワークとHadoop Clusters - ダミー

分散システムと同様に、ネットワークはHadoopクラスタを作成または破棄できます。 「Hadoopクラスタのマスターノードとスレーブノードの間では、クラスタを稼動させるために不可欠なチャットが多く、エンタープライズクラスのスイッチが推奨されています。

クラスタ内のラックごとに、冗長性とパフォーマンスの両立のために、2つのトップ・オブ・ラック（ToR）スイッチが必要です。 ToRスイッチには10GbEを使用します。

<！ - 1 - >

ToRスイッチは、ラック内のすべてのコンピュータを接続するネットワークスイッチです。通常はラックの一番上に表示されます。そのため、人々は「トップラック」と言います。 「代替ネットワーキングのアプローチは、行末（EoR）スイッチを使用することですが、これは非常に頻繁には表示されません。

ToRのアプローチは、成長するクラスタのためのネットワーキングの観点から簡単です。たとえば、スレーブノードと追加のラックの追加は、EoRよりToRスイッチでははるかに簡単です。

<！ - 2 - >

ラックが3つ以上ある場合は、少なくとも2つのコアスイッチが必要です（主に冗長性のために、またパフォーマンスのために）。これらのコアスイッチは大量のトラフィックを処理するため、40GbEが必要です。

複数のラックにまたがるようにクラスタを構築または拡張する場合は、Hadoop、将来の成長計画、および作業負荷に精通したネットワークの専門家に従ってください。悪いネットワーキングはパフォーマンスを著しく阻害する可能性がありますが、将来の成長を苦しくし、高価にする可能性もあります。