個人財務 HBaseの領域

HBaseの領域

ビデオ: Hadoop 影音教學 Day4 : Hive 語法與基本概念介紹(下) 2025

ビデオ: Hadoop 影音教學 Day4 : Hive 語法與基本概念介紹(下) 2025
Anonim

RegionServersは1つですが、個々のリージョンの仕組みも見ておく必要があります。 HBaseでは、テーブルが複数のRegionServersにまたがって広がっているだけでなく、個々のリージョンで構成されています。テーブルが分割されるにつれて、分割は領域になります。リージョンには一連のキーと値のペアが格納され、各リージョンサーバーは設定可能なリージョン数を管理します。

しかし、個々の地域はどのように見えますか? HBaseは列ファミリ指向のデータストアなので、個々の領域は、その列ファミリに属する​​キーと値のペアをどのように格納しますか?次の図は、これらの質問に答えることを開始し、HBaseのアーキテクチャに関する重要な情報を消化するのに役立ちます。

<! - 1 - >

HBaseはJavaで書かれています - Hadoop技術の大部分のようです。 Javaはオブジェクト指向プログラミング言語であり、分散コンピューティングのための洗練された技術です。したがって、HBaseの詳細については、アーキテクチャのすべてのコンポーネントが最終的にJavaオブジェクトであることを忘れないでください。

<!最初に、上の図は、一般的に言えば、どのような領域オブジェクトが実際にどのように見えるかについてかなり良い考えを示しています。また、リージョンがデータを列ファミリに分割し、HFileオブジェクトを使用してHDFSにデータを格納することも明らかになりました。

クライアントがキーと値のペアをシステムに入力すると、キーが処理され、ペアが属する列ファミリに基づいてデータが格納されます。図に示すように、各列ファミリストアオブジェクトには、BlockCacheと呼ばれる読み取りキャッシュとMemStoreという書き込みキャッシュがあります。 BlockCacheは、ランダムな読み取りパフォーマンスに役立ちます。

<! - 3 - >

データはHDFSからブロック単位で読み込まれ、BlockCacheに格納されます。データの後続の読み取り(または近接して保存されたデータ)は、ディスクではなくRAMから読み取られ、全体的なパフォーマンスが向上します。 Write Ahead Log(WAL、略して)は、HBase書き込みが信頼できるものであることを保証します。 RegionServerごとに1つのWALがあります。

分散コンピューティングのアイアンの法則に常に耳を傾けます。失敗は例外ではありません。特に、数百または数千のサーバーをクラスタリングする場合は例外です。 GoogleはBigTableとHBaseの設計にIron法を遵守しました。

HBaseでデータを書き込んだり修正したりすると、データは最初にHDFSに保存されているWALに保存され、その後、データはMemStoreキャ​​ッシュに書き込まれます。設定可能な間隔で、MemStoreに格納されたキーと値のペアがHDFSのHFilesに書き込まれ、その後WALエントリが消去されます。

ディスクへの最後のMemStore書込みの前に、初期WAL書込みが

失敗した後に エラーが発生した場合、データ損失を回避するためにWALを再生することができます。 3つのHFileオブジェクトは1つの列ファミリにあり、2つの列オブジェクトは2つの列ファミリにあります。 HBaseの設計は、MemStoreに格納されているカラムファミリデータをフラッシュごとに1つのHFileにフラッシュすることです。設定可能な間隔で、HFilesはより大きなHFilesに結合されます。この戦略は、HBaseのクリティカルコンパクション操作をキューに入れます。

HBaseの領域

エディタの選択

ワークスペースウィンドウのコンテンツエディタを使用してIOSアプリケーションを開発する方法

ワークスペースウィンドウのコンテンツエディタを使用してIOSアプリケーションを開発する方法

エディタエリアには、特定のIOSアプリのコンテンツを編集するために使用するいくつかのエディタがあります。コンテンツエディタは、編集中のファイルの種類によってコンテキストが決定されるコンテキストベースです。これは、ナビゲータまたはエディタのジャンプバーで選択したものが、そのツールバーに表示される...

IOSアプリケーション開発用のデバッグ領域とデバッグナビゲータの使用方法 - ダミー

IOSアプリケーション開発用のデバッグ領域とデバッグナビゲータの使用方法 - ダミー

IOSアプリのバグのないコードを書くのは難しいことがあります。デバッグ領域は、デバッグバーと、変数ペインと、コンソールペインで構成されています。それぞれのウィンドウには、スコープバーにポップアップメニューがあります。通常は、デバッグ領域とデバッグナビゲータを併用します。アクセスしてください...

エディタの選択

ハムのラジオに飛び込む10の秘密 - ダミー

ハムのラジオに飛び込む10の秘密 - ダミー

この記事では、ランク1の初心者でさえ、ハムのラジオへの最初の挑戦中に車輪を回し続けるのを助けます。これらのヒントを念頭に置いておくと、すぐにベテランのステータスに進むことができます。聞きなさい、聞く、聴くことは、最も強力で重要な方法です...

音質の側面 - オーディオファイルを聞くダミー

音質の側面 - オーディオファイルを聞くダミー

彼らのウーファーからツィーターまでのオーディオシステムの音質について、ワインの品質に関するオイノフィアのように聞こえるかもしれません。このような話を理解するには、まず、音質の4つの基本を理解することから始めます:クラリティダイナミックレンジ周波数応答Tonal ...

Nexus Oneソフトボタン - ダミー

Nexus Oneソフトボタン - ダミー

Nexus One携帯電話はタッチスクリーンの下にある4つのソフトボタンを備えています。これらは、Nexus Oneの携帯電話で最も一般的に使用されるボタンです。名前:戻る一押し:戻る、閉じる、閉じます。押し続ける:何も起こらない名前:メニュー一押し:表示メニュー押し続ける:画面キーボードを表示名前:ホーム一押し:...

エディタの選択

Word 2016でリボンを使用する方法 - ダミー

Word 2016でリボンを使用する方法 - ダミー

Word 2016のインターフェイスの重要な部分はリボンです。 Wordのコマンドの大部分が滞留し、設定が行われる場所です。これらの項目は、ボタン、入力ボックス、およびメニューとして表示されます。ここに示すように、リボンはタブに分割されています。各タブには別々のグループがあります。グループ内では、コマンドボタンがあります。

Word 2016でResearch Taskペインを使用する方法 - Researchタスクペインのおかげでダミー

Word 2016でResearch Taskペインを使用する方法 - Researchタスクペインのおかげでダミー

Word 2016では、以前と同じように混雑する必要はありません。リサーチ作業ウィンドウには、Word(および他のOfficeプログラムも含む)から利用可能な、辞書、外国語辞書、シソーラス、言語翻訳、百科事典、およびインターネット検索が用意されています。ここに示すように、Researchタスクペイン...

Word 2013のページ設定ダイアログボックスの使用方法 - ダミー

Word 2013のページ設定ダイアログボックスの使用方法 - ダミー

Word 2013でページの書式設定を制御するには、[ページ設定]ダイアログボックスが必要です。リボンインターフェイスの曖昧な恩恵から逃げなければなりません。 [ページ設定]ダイアログボックスを呼び出すには、ページレイアウトのページ設定グループの右下隅にあるダイアログボックスランチャーをクリックします。