個人財務 HBaseの領域

HBaseの領域

ビデオ: Hadoop 影音教學 Day4 : Hive 語法與基本概念介紹(下) 2024

ビデオ: Hadoop 影音教學 Day4 : Hive 語法與基本概念介紹(下) 2024
Anonim

RegionServersは1つですが、個々のリージョンの仕組みも見ておく必要があります。 HBaseでは、テーブルが複数のRegionServersにまたがって広がっているだけでなく、個々のリージョンで構成されています。テーブルが分割されるにつれて、分割は領域になります。リージョンには一連のキーと値のペアが格納され、各リージョンサーバーは設定可能なリージョン数を管理します。

しかし、個々の地域はどのように見えますか? HBaseは列ファミリ指向のデータストアなので、個々の領域は、その列ファミリに属する​​キーと値のペアをどのように格納しますか?次の図は、これらの質問に答えることを開始し、HBaseのアーキテクチャに関する重要な情報を消化するのに役立ちます。

<! - 1 - >

HBaseはJavaで書かれています - Hadoop技術の大部分のようです。 Javaはオブジェクト指向プログラミング言語であり、分散コンピューティングのための洗練された技術です。したがって、HBaseの詳細については、アーキテクチャのすべてのコンポーネントが最終的にJavaオブジェクトであることを忘れないでください。

<!最初に、上の図は、一般的に言えば、どのような領域オブジェクトが実際にどのように見えるかについてかなり良い考えを示しています。また、リージョンがデータを列ファミリに分割し、HFileオブジェクトを使用してHDFSにデータを格納することも明らかになりました。

クライアントがキーと値のペアをシステムに入力すると、キーが処理され、ペアが属する列ファミリに基づいてデータが格納されます。図に示すように、各列ファミリストアオブジェクトには、BlockCacheと呼ばれる読み取りキャッシュとMemStoreという書き込みキャッシュがあります。 BlockCacheは、ランダムな読み取りパフォーマンスに役立ちます。

<! - 3 - >

データはHDFSからブロック単位で読み込まれ、BlockCacheに格納されます。データの後続の読み取り(または近接して保存されたデータ)は、ディスクではなくRAMから読み取られ、全体的なパフォーマンスが向上します。 Write Ahead Log(WAL、略して)は、HBase書き込みが信頼できるものであることを保証します。 RegionServerごとに1つのWALがあります。

分散コンピューティングのアイアンの法則に常に耳を傾けます。失敗は例外ではありません。特に、数百または数千のサーバーをクラスタリングする場合は例外です。 GoogleはBigTableとHBaseの設計にIron法を遵守しました。

HBaseでデータを書き込んだり修正したりすると、データは最初にHDFSに保存されているWALに保存され、その後、データはMemStoreキャ​​ッシュに書き込まれます。設定可能な間隔で、MemStoreに格納されたキーと値のペアがHDFSのHFilesに書き込まれ、その後WALエントリが消去されます。

ディスクへの最後のMemStore書込みの前に、初期WAL書込みが

失敗した後に エラーが発生した場合、データ損失を回避するためにWALを再生することができます。 3つのHFileオブジェクトは1つの列ファミリにあり、2つの列オブジェクトは2つの列ファミリにあります。 HBaseの設計は、MemStoreに格納されているカラムファミリデータをフラッシュごとに1つのHFileにフラッシュすることです。設定可能な間隔で、HFilesはより大きなHFilesに結合されます。この戦略は、HBaseのクリティカルコンパクション操作をキューに入れます。

HBaseの領域

エディタの選択

自転車の点検チェックリスト - ダミー

自転車の点検チェックリスト - ダミー

すぐに自転車の点検をするために数分。あなたの自転車を一時的に与えることは、あなたの次の乗り心地の安全性、快適性、そして楽しさを高めることができます。乗車準備の一環として、次の手順に従ってください:車輪のクイックリリースレバーを開閉して、確認します。

必須サイクリング用具 - ダミー

必須サイクリング用具 - ダミー

あなたはバイクの乗り心地をさらに楽しくするために何百万ものものを買うことができます。自転車用に必要なアクセサリーをいくつかご紹介します。ヘルメット:ヘルメットを着用することはオーストラリアとニュージーランドの法律です。

自転車の範囲を閲覧可能 - ダミー

自転車の範囲を閲覧可能 - ダミー

あなたはサイクリングをすることに決めましたが、その重要なキットを欠いている - バイク!あなたが望む自転車のタイプを正確に知っていない限り、良いアドバイスは、あなたの時間を費やして、自転車で何をするのか、どこに乗るのかを本当に考えてみることです。

エディタの選択

アプリとプライバシー - ダミーを特定する

アプリとプライバシー - ダミーを特定する

Spotifyアプリケーションに登録すると、あなたの個人的な詳細の一部にアクセスする。たとえば、Top10アプリを使用してプレイリストを公開するには、既存のFacebookアカウントにリンクする必要があります。このプロセス中、Facebookはあなたに特定の種類の共有を許可するかどうか尋ねます。

モバイル対応携帯電話を識別する - ダミー

モバイル対応携帯電話を識別する - ダミー

SpotifyモバイルはiPhoneで最も人気がありますが、優れたAndroidバージョン(basks Androidマーケットの5つ星評価のうち5つの評価では5位に入っています)が急速に追いついています。

特集 - ダミー

特集 - ダミー

スポットメイキングは、モバイルでも、あらゆる音楽への普遍的な即時アクセスを可能にしますデバイスまたはデスクトップコンピュータ。 Facebookは人々が古い友達と再会して新しい友達を作るのを助け、Spotifyの助けを借りて青春の歌を再発見し、友人や検索を通じて新鮮な音楽を発見しました。

エディタの選択

IOSアプリケーションでオブジェクト指向設計を使用する方法 - ダミー

IOSアプリケーションでオブジェクト指向設計を使用する方法 - ダミー

IOSは、動作がオブジェクトに関連付けられているプログラムを設計するさまざまな方法です。説明するために、紅茶とスープの作り方を検討することを検討してください。しかし、即座に代わりに活動に飛び込んではいけません。探偵が犯罪現場に入るように行動してください。

IOSアプリケーションでハイレベル抽象化を使用してビデオを再生する方法 - ダミー

IOSアプリケーションでハイレベル抽象化を使用してビデオを再生する方法 - ダミー

このセクションでは、MPMoviePlayerViewControllerクラスの高レベル抽象化を使用してiOSアプリケーションでビデオを再生する方法を説明します。 - (IBAction)playVideo:(id)sender {MPMoviePlayerViewController * moviePlayer = [[MPMoviePlayerViewController alloc] initWithContentURL:movieURL];このコードは、ビデオビューコントローラ内のTTTVideoViewControllerファイルからです。 [self presentMoviePlayerViewControllerAnimated:moviePlayer];}シンプルさ自体!必要なのはURLです。

IOSアプリケーションでJavaスクリプトオブジェクト表記を使用する方法 - ダミー

IOSアプリケーションでJavaスクリプトオブジェクト表記を使用する方法 - ダミー

JavaScript Object Notation (JSON)はiOSアプリのデータを表現する上で事実上の標準になっています。 JSONを使用して、Web上でデータを転送したり、長期保存データを保存および取得するためのフォーマットとして使用することができます。 JSONは、人間が読める形式であり、マシンが理解しやすい形式です。 JSONのデータは1つにまとめることができます...