個人財務 Google DremelとHadoop - ダミー

Google DremelとHadoop - ダミー

ビデオ: Google I/O 2012 - Crunching Big Data with BigQuery 2024

ビデオ: Google I/O 2012 - Crunching Big Data with BigQuery 2024
Anonim

ほとんどの人にとって、 Dremel という用語は、家の周りのいろいろな職場でうまく機能する便利な高速、低トルクのツールに気づいています。しかし、GoogleがDremelを作成したことはご存知ですか?しかし、 別のハンドヘルド機械ツールを製作するのではなく、Googleは、大きなデータをインタラクティブに分析するための高速ソフトウェアツールを選択しました。 MapReduce、Google File System(HDFS)、BigTable(HBase参照)など、Hadoopエコシステムの一部にインスパイアされた他のGoogleテクノロジーと同様に、Googleは内部で使用するためにDremelを開発し、目的とデザイン技術の(言い換えれば、DremelはあなたのHadoopクラスタでダウンロードして使用できるものではありません。)

<! Googleは、ウェブクロールされた文書の分析、電子メールスパムの検出、アプリケーションクラッシュレポートの処理など、さまざまな業務にDremelを使用しています。 GoogleのBigQueryサービスは実際にDremelを使用します。

Googleは大量のデータをバッチ処理するためのMapReduce技術を設計しました。彼らのニーズが進展するにつれて、技術も向上しました。Googleは、大きなデータセットに対する対話型クエリのパフォーマンスを向上させるためにDremelを作成することに決めました。

<! MapReduceのアプローチはスケーラビリティとクエリフォールトトレランスを提供しますが、基本的にはバッチベースのシステムなので、小さなクエリ(データセット全体のうちのほんの一部のみを含むクエリ)の応答時間は、ユーザが期待するものではないことが多い。

Googleはインタラクティブクエリ用に設計されたクエリ実行テクノロジを開発しました。これはGoogleファイルシステム(GFS)上の中間サーバーで実行されます。 (GFSは、HadoopのファイルシステムであるApache HDFSのインスピレーションでした。)

<! - 3 - >

Hiveと同様に、DremelはSQLライクな言語(ほとんどのプログラマーにはよく知られています)を使用し、円柱データレイアウトを採用しています。 Dremelは、Apache Hiveにあるスケーラビリティとフォールト・トレランスを維持しながら、高速でインタラクティブなクエリ応答を提供します。 Dremelのホワイトペーパーでは、1兆行を超えるテーブルに対して数秒で集計クエリを実行する方法について説明しています。

Googleには内部で使用されているDremel技術がありますが、Dremel(「Drakkar Noir」にインスパイアされたすべての香水のようなもの)に触発されたすべての技術があります。

Google DremelとHadoop - ダミー

エディタの選択

自転車の点検チェックリスト - ダミー

自転車の点検チェックリスト - ダミー

すぐに自転車の点検をするために数分。あなたの自転車を一時的に与えることは、あなたの次の乗り心地の安全性、快適性、そして楽しさを高めることができます。乗車準備の一環として、次の手順に従ってください:車輪のクイックリリースレバーを開閉して、確認します。

必須サイクリング用具 - ダミー

必須サイクリング用具 - ダミー

あなたはバイクの乗り心地をさらに楽しくするために何百万ものものを買うことができます。自転車用に必要なアクセサリーをいくつかご紹介します。ヘルメット:ヘルメットを着用することはオーストラリアとニュージーランドの法律です。

自転車の範囲を閲覧可能 - ダミー

自転車の範囲を閲覧可能 - ダミー

あなたはサイクリングをすることに決めましたが、その重要なキットを欠いている - バイク!あなたが望む自転車のタイプを正確に知っていない限り、良いアドバイスは、あなたの時間を費やして、自転車で何をするのか、どこに乗るのかを本当に考えてみることです。

エディタの選択

アプリとプライバシー - ダミーを特定する

アプリとプライバシー - ダミーを特定する

Spotifyアプリケーションに登録すると、あなたの個人的な詳細の一部にアクセスする。たとえば、Top10アプリを使用してプレイリストを公開するには、既存のFacebookアカウントにリンクする必要があります。このプロセス中、Facebookはあなたに特定の種類の共有を許可するかどうか尋ねます。

モバイル対応携帯電話を識別する - ダミー

モバイル対応携帯電話を識別する - ダミー

SpotifyモバイルはiPhoneで最も人気がありますが、優れたAndroidバージョン(basks Androidマーケットの5つ星評価のうち5つの評価では5位に入っています)が急速に追いついています。

特集 - ダミー

特集 - ダミー

スポットメイキングは、モバイルでも、あらゆる音楽への普遍的な即時アクセスを可能にしますデバイスまたはデスクトップコンピュータ。 Facebookは人々が古い友達と再会して新しい友達を作るのを助け、Spotifyの助けを借りて青春の歌を再発見し、友人や検索を通じて新鮮な音楽を発見しました。

エディタの選択

IOSアプリケーションでオブジェクト指向設計を使用する方法 - ダミー

IOSアプリケーションでオブジェクト指向設計を使用する方法 - ダミー

IOSは、動作がオブジェクトに関連付けられているプログラムを設計するさまざまな方法です。説明するために、紅茶とスープの作り方を検討することを検討してください。しかし、即座に代わりに活動に飛び込んではいけません。探偵が犯罪現場に入るように行動してください。

IOSアプリケーションでハイレベル抽象化を使用してビデオを再生する方法 - ダミー

IOSアプリケーションでハイレベル抽象化を使用してビデオを再生する方法 - ダミー

このセクションでは、MPMoviePlayerViewControllerクラスの高レベル抽象化を使用してiOSアプリケーションでビデオを再生する方法を説明します。 - (IBAction)playVideo:(id)sender {MPMoviePlayerViewController * moviePlayer = [[MPMoviePlayerViewController alloc] initWithContentURL:movieURL];このコードは、ビデオビューコントローラ内のTTTVideoViewControllerファイルからです。 [self presentMoviePlayerViewControllerAnimated:moviePlayer];}シンプルさ自体!必要なのはURLです。

IOSアプリケーションでJavaスクリプトオブジェクト表記を使用する方法 - ダミー

IOSアプリケーションでJavaスクリプトオブジェクト表記を使用する方法 - ダミー

JavaScript Object Notation (JSON)はiOSアプリのデータを表現する上で事実上の標準になっています。 JSONを使用して、Web上でデータを転送したり、長期保存データを保存および取得するためのフォーマットとして使用することができます。 JSONは、人間が読める形式であり、マシンが理解しやすい形式です。 JSONのデータは1つにまとめることができます...