個人財務 Hadoopクラスタのサイズ変更 - ダミー

Hadoopクラスタのサイズ変更 - ダミー

ビデオ: TestpassportのCCA 500問題集を利用して、受験の技能を把握できます 2025

ビデオ: TestpassportのCCA 500問題集を利用して、受験の技能を把握できます 2025
Anonim

データ処理システムのサイジングは、 Hadoopでは、リレーショナルデータベースと同じ情報を考慮します。最も重要なことは、データの量を把握し、予想される成長率を見積もり、保持ポリシーを設定する必要があることです

<! - 1 - >

データの量を決定した後で、電話会社を持っていて、コールディテールレコード(CDR)ログファイル用に750TBのストレージスペースが必要であることを確認したとします。 あなたは政府の規制に従うためにこれらの記録を保持しますが、あなたはそれらを分析することもできますo脆弱性のパターンを参照し、ネットワークの状態を監視するなど。必要なストレージスペースと、必要なラックとスレーブノードの数を決定するには、次の点を考慮して計算を実行します。

<!レプリケーション:

HDFSのデータのデフォルトの複製係数は3です。この例のテレコム企業の500テラバイトのCDRデータは1500テラバイトに変わります。

スワップ領域:
  • MapReduceによるデータの分析または処理には、中間結果セットおよび最終結果セットを格納するために、さらに25%のスペースが必要です。 (現在、通信会社は1875テラバイトの記憶容量が必要です。) <! - 3 - >

  • 圧縮: 電気通信会社はCDRを圧縮形式で格納します。平均圧縮率は3:1になると予想されます。現在、625テラバイトが必要です。

    スレーブノードの数:
  • 各スレーブノードにHDFS専用の3TBドライブが12個あると仮定すると、各スレーブノードには36テラバイトのHDFSストレージがあり、18個のスレーブノードが必要です。 ラック数:

  • 各スレーブノードは2RUを使用しており、この例では3つのマスタノード(1RU)と2つのToRスイッチ(1RU)が必要なため、合計41RUが必要です。標準ラックの総容量より1RU少ないため、この配置には1ラックで十分です。 このクラスターの成長には余裕がないので、2番目のラック(および2台のToRスイッチ)を購入し、2つのラック間でスレーブノードを分割することは賢明です。

  • テスト: 本番クラスタの小規模な表現であるテストクラスタを維持することは、標準的な方法です。巨大である必要はありませんが、Hadoopの動作を正確に表現できるように、少なくとも5つのデータノードが必要です。テスト環境と同様に、本番クラスタとは異なるネットワーク上で隔離されている必要があります。

    バックアップと災害復旧:

  • 他の運用システムと同様に、通信会社もバックアップと災害復旧の要件を考慮する必要があります。この会社は、ミラークラスタを作成してシステム全体のホットスタンバイを確保することができます。これは明らかに最も高価なオプションですが、一定の稼働時間が重要な環境に適しています。 テレコム企業は、スペクトルの最も安価な端で(データをまったくバックアップしない)、生産クラスタに格納されているすべてのデータ(データそのもの、アプリケーション、構成ファイル、メタデータなど)を定期的にバックアップできますテープに。テープを使用すると、データにすぐにアクセスすることはできませんが、運用中のHadoopクラスタ全体で障害が発生した場合の惨事復旧作業が可能になります。

  • お使いのパーソナルコンピュータと同様に、メインのハードディスクドライブが空き容量でいっぱいになると、システムはかなり遅くなります。 Hadoopも例外ではありません。また、ハードドライブのパフォーマンスが85〜90%未満であると、パフォーマンスが向上します。この情報を念頭に置いて、パフォーマンスが重要な場合は、スワップスペースの係数を25〜33%にする必要があります。

Hadoopクラスタのサイズ変更 - ダミー

エディタの選択

SketchUpのステータスバー - ダミー

SketchUpのステータスバー - ダミー

SketchUpのステータスバーには、モデリング中に使用するコンテキスト情報が含まれています。モデリングウィンドウの下の狭い情報には、情報の良さが満載されています。コンテキスト固有の指示:ほとんどの場合、ここでは何をしているのかを確認するためにここでチェックします。モディファイアキー(組み合わせて使用​​するキーボードストローク)

スケッチツールにインテリジェントに反応するよう設計されたダミー

スケッチツールにインテリジェントに反応するよう設計されたダミー

ダイナミックコンポーネント(DC) SketchUpが提供する真の魔法に最も近いもの。あなたがそれらを拡大縮小するときに、伸ばしたり歪んだりするのではなく、寸法を変更するはずの部品は、他の部分はしません。

SketchUpの投影テクスチャ曲線にテクスチャを追加する方法 - 複雑な曲線に画像を描くためのダミー

SketchUpの投影テクスチャ曲線にテクスチャを追加する方法 - 複雑な曲線に画像を描くためのダミー

SketchUpのサーフェスには、このメソッドの代わりはありません。地形の塊は、複雑な曲面の良い例です - 凹凸、ねじれ、波紋、多方向。扱っているカーブが単純な押し出しよりも複雑な場合は、この画像マッピングテクニックを使用する必要があります。キー...

エディタの選択

QuickBooks 2013のアイテムリストにSales Tax ItemまたはGroupを追加する方法 - ダミー

QuickBooks 2013のアイテムリストにSales Tax ItemまたはGroupを追加する方法 - ダミー

販売税の対象となる商品を販売する場合、QuickBooks 2013請求書には、これらの売上税を請求して追跡する広告申込情報も含まれます。これを行うには、売上税明細を登録します。販売税項目を登録するには、新規項目ウィンドウを表示し、タイプ...から販売税項目を選択します。

QuickBooks 2012のアイテムリストにサービスアイテムを追加する方法 - ダミー

QuickBooks 2012のアイテムリストにサービスアイテムを追加する方法 - ダミー

QuickBooks 2012でサービスアイテムを使用して、サービスを表すアイテムを購入または請求します。たとえば、CPAは、個人や企業に対して納税申告書を作成します。納税申告書を準備するためにクライアントに請求する場合、納税申告書の請求書に表示される明細はサービス項目です。 ...

QuickBooks 2013のアイテムリストにサービスアイテムを追加する方法 - ダミー

QuickBooks 2013のアイテムリストにサービスアイテムを追加する方法 - ダミー

QuickBooks 2013のサービスアイテムを使用して、サービスを表すアイテムを購入または請求します。たとえば、CPAは、個人や企業に対して納税申告書を作成します。納税申告書を準備するためにクライアントに請求する場合、納税申告書の請求書に表示される明細はサービス項目です。 ...

エディタの選択

WordPressブログのユーザーと著者を管理する方法 - ダミー

WordPressブログのユーザーと著者を管理する方法 - ダミー

WordPressユーザーページには、あなたのブログのすべてのユーザーが表示されます。各ユーザーのユーザー名、名前、電子メールアドレス、ブログの役割、およびブログに投稿された投稿の数が表示されます。フォロワー:このデフォルトロールは、...

WordPress Permalinkをサーバーと連携させる方法 - ダミー

WordPress Permalinkをサーバーと連携させる方法 - ダミー

デフォルト以外のオプションを使用してWordPressサイトのパーマリンクの場合、WordPressは特定のルールまたはディレクティブを.txtファイルに書き込みます。あなたのWebサーバー上のhtaccessファイル。 permalinkによると、htaccessファイルはあなたのWebサーバーと交信して、パーマリンクをどのように提供すべきかを示します。

WordPressブログを修正する方法 - ダミー

WordPressブログを修正する方法 - ダミー

WordPressブログをインストールした後、それがリンクされているウェブサイトに合ったブログ。既存のテーマ(スキン)を変更したり、WordPressをインストールした後に使用できる代替語句を選択することができます。選択したテンプレートがメインWebサイトに似ていることを確認してください。ただし、WordPressは...