ビデオ: ビッグデータ 101 ~ AWS で始めるビッグデータパイプラインの設計と実装~ | AWS Summit Tokyo 2016 2024
カスタムおよびサードパーティのアプリケーションは、大きなデータソースを共有して調べる別の方法を提供します。参照アーキテクチャのすべてのレイヤーはそれ自体が重要ですが、このレイヤーは革新性と創造性の大部分が明白である場所です。これらのアプリケーションは、業界特有の問題を解決することを目的としているため、業界全体で共通する問題、または垂直的な問題に対処するという点で、どちらも水平的です。言うまでもありませんが、多くのアプリケーションを選択できます。市販されているビッグデータアプリケーションのカテゴリは、基盤となるテクノロジの採用率よりも高速または高速になると予想されています。
<! - 1 - >
ログデータアプリケーション(Splunk、Loggly)、広告/メディアアプリケーション(Bluefin、DataXu)、およびマーケティングアプリケーション(Bloomreach、Myrrix)がこの執筆時点で最も一般的なカテゴリです。医療機関、製造、輸送管理のためのソリューションも開発されています。他のカスタムアプリケーション開発イニシアチブと同様に、大きなデータアプリケーションの作成には、構造、標準、厳密さ、明確なAPIが必要です。大きなデータを活用したいビジネスアプリケーションの多くは、スタック全体でAPIを購読する必要があります。<! - 2 - >
ローレベル・データ・ストアから生データを処理し、生データとウェアハウスからの合成出力を結合する必要がある場合があります。予想通り、運用期間は
カスタムであり、大規模データの実装に異なるタイプのプレッシャーを作ります。 大きなデータは速く動いて目の瞬きが変わるので、ソフトウェア開発チームは現時点のビジネス課題を解決するのに密接に関連したアプリケーションを迅速に作成できる必要があります。 <! - 3 - >
企業は、需要に応じてアプリケーションを作成して展開することで、ビジネス環境の変化に迅速に対応する開発タイガーチームの創造について考える必要があります。実際、これらのアプリケーションは、実際の低レベルのコーディングよりも多くのアセンブリを必要とするため、「セミカスタム」と考える方が適切かもしれません。
時間の経過と共に、コンポーネントのパレットからソリューションを組み立てることができるエンドユーザーによって、特定のタイプのアプリケーションがコンテキストで作成されます。言うまでもなく、これは構造と標準化が最も必要なところです。ソフトウェア開発者は、一貫した標準化された開発環境を構築し、大規模データアプリケーションの迅速な展開のための新しい開発プラクティスを考案する必要があります。