個人財務 Hadoop - Dummiesによる社会的感情分析

Hadoop - Dummiesによる社会的感情分析

ビデオ: Hadoop Tutorial For Beginners | Hadoop Ecosystem Explained in 20 min! - Frank Kane 2025

ビデオ: Hadoop Tutorial For Beginners | Hadoop Ecosystem Explained in 20 min! - Frank Kane 2025
Anonim

社会感情分析は、世界が常につながり、現在の表現力豊かな人口であることを考えると、Hadoopの使用は驚くべきことではありません。このユースケースは、フォーラム、ブログ、その他のソーシャルメディアリソースのコンテンツを活用して、人々が何をしているのか(例えば、人生の出来事)とその周囲の世界にどのように反応しているかを感覚的に表現します。

<! - 1 - >

テキストベースのデータは自然にリレーショナルデータベースに収まらないため、Hadoopはこのデータを分析して実行する実用的な場所です。

言語は、人間にとっても、特に自分のものとは異なる社会集団の人が書いたテキストを読んでいるときには、解釈するのが難しいです。このグループの人々はあなたの言葉を話しているかもしれませんが、その表現とスタイルは完全に異質なので、彼らが良い経験か悪いことを話しているか分かりません。

<!例えば、映画に関して

爆弾 という言葉が聞こえる場合は、映画が悪いことを意味する可能性があります(または、あなたが若者の一部である場合は良い賛辞として「それは大爆弾だ」と解釈する動き)。もちろん、航空安全ビジネスに携わっているなら、 Bomb という言葉はまったく別の意味を持っています。要点は、言語はさまざまな方法で使用され、常に進化しているということです。 ソーシャルメディアの感情を分析するときは、複数のアプローチから選択できます。基本的な方法は、プログラムによってテキストを解析し、文字列を抽出し、規則を適用します。単純な状況では、このアプローチは妥当です。しかし、要件が進化し、ルールが複雑になるにつれ、コードのメンテナンスの観点から、特にパフォーマンスの最適化のために、手動でコード抽出をすぐに実行することはもはや不可能になります。

<! - 3 - >

テキスト処理に対する文法やルールベースの手法は計算コストが高く、Hadoopでの大規模抽出では重要な考慮事項です。ルール(感情抽出のような複雑な目的には避けられない)が多いほど、必要な処理が増えます。

あるいは、統計に基づくアプローチが、感情分析にますます一般的になってきています。複雑なルールを手動で記述するのではなく、Apache Mahoutで分類指向の機械学習モデルを使用することができます。ここでキャッチするのは、あなたのモデルを肯定的および否定的な感情の例で訓練する必要があるということです。あなたが提供するトレーニングデータが多いほど(例えば、つぶやきのテキストと分類)、結果がより正確になります。

社会感情分析のユースケースは、幅広い業種に適用できます。例えば、食品安全性を考えてみましょう。食物媒介性疾患の発生を可能な限り迅速に予測または特定しようとすることは、保健当局にとって非常に重要です。

次の図は、潜在的な病気に基づいて抽出器を使用してツイートを取り込むHadoopアンカーアプリケーションです:FLUまたはFOOD POISONING。

つぶやきの地理的位置を示すヒートマップが生成されていますか?大きなデータの世界におけるデータの1つの特徴は、その大部分が空間的に豊かであることである:

それは局所性情報(および時間的属性も)を有する。この場合、Twitterプロファイルは公開された場所を参照することによってリバースエンジニアリングされました。 明らかになったように、多くのTwitterアカウントは、公開プロフィールの一部として地理的な場所を持っています(雇用主のための発言ではなく、自分の考えが自分のものであることを明確に示す免責事項)。 インフルエンザや食中毒事件の発生を予測するためのソーシャルメディアの予測エンジンはどれくらい効果的でしょうか?表示された匿名のサンプルデータを考えてみましょう。ソーシャルメディアのシグナルが、夏の終わりおよび早秋に特定の米国郡でインフルエンザの発生を予測するための他のすべての指標を凌駕していることがわかります。

この例は、ソーシャルメディアの分析から得られる別の利点を示しています。これは、あなたに、ポスターのプロフィールの属性情報を見る前例のない機会を提供します。確かに、自分のTwitterプロファイルで人々が言うことは、不完全である(たとえば、場所コードが入力されていない)か、意味がない(場所コードが

cloud nine

と言うことがあります) しかし、あなたが言うことに基づいて、時間の経過とともに人々についてたくさん学ぶことができます。例えば、クライアントは、赤ちゃんの誕生の発表、彼女の最新の絵のInstagramの写真、または彼女がウォルターホワイトの行動を信じることができないことを述べたFacebookの投稿を(999)tweeted 昨晩の

Breaking Bad フィナーレで。 このユビキタスな例では、家族グラフ(新しい子供は個人ベースのマスターデータ管理のプロファイルの貴重なアップデートです)、趣味(絵)、興味の属性を入力するライフイベントを抽出できます(あなたはショー ブレイキングバッド が大好きです)。

このようにソーシャルデータを分析することで、趣味、誕生日、生活イベント、地理的位置(国、州、都市など)、雇用主、性別、婚姻などの情報を使用して個人属性を肉付けする機会がありますステータスなどが含まれます。 あなたが航空会社のCIOであるとしばらくお待ちください。幸せで怒っている頻繁な旅行者の投稿を使用して、感情を確認するだけでなく、ソーシャルメディア情報を使用してお客様のロイヤリティプログラムの顧客プロファイルを作成することもできます。 The Breaking Bad

のシーズン5が今の航空機のメディアシステムで利用可能であることをクライアントに伝える電子メールなど、共有された情報で潜在的な顧客をどのようにターゲットできるかを想像してみてくださいまたは2歳未満の子供が無料で飛行することを発表する。

これはまた、記録システム(例えば、販売データベースやサブスクリプションデータベース)がエンゲージメントシステム(例えば、サポートチャネル)をどのように満たすことができるかの良い例です。ロイヤルティ会員の償還と旅行履歴はリレーショナルデータベースにありますが、エンゲージメントシステムはレコード(たとえば列)を更新することができます。

Hadoop - Dummiesによる社会的感情分析

エディタの選択

怒っているとき自分自身を落ち着かせる:熱いものからないものへ

怒っているとき自分自身を落ち着かせる:熱いものからないものへ

怒っているとき自分を落ち着かせる> 怒っていることは一瞬で起こることはありません。あなたの怒りを管理し、落ち着かせることもできませんが、急激な怒りでさえも疲れてしまいます。怒りの気持ちがどのように蒸発するかを理解することで、怒りの解毒剤として使用できる戦術が得られます。これらはあなたがすでに使っている戦術ですが、目にすることはできません!過去の怒りの思い出を使って、練習しよう。

あなたの気分、睡眠、およびエネルギーレベル - ダミー

あなたの気分、睡眠、およびエネルギーレベル - ダミー

あなたが双極性障害を抱えている場合、あなたの気分、睡眠、およびエネルギーレベルを毎日グラフ化して、気分のエピソード(躁うつ病またはうつ病)の早期の兆候を発見するのに役立つパターンを記録することをお勧めします。さらに、このログは貴方の医師やセラピストを治療決定に導く貴重な情報を提供します。これを印刷する...

エディタの選択

結婚式計画ウェブサイトとアプリケーション - ダミー

結婚式計画ウェブサイトとアプリケーション - ダミー

技術は、結婚式計画の分野で救世主でした。いくつかのウェブサイトやアプリでは、結婚式プランニングのプロセスを無限に少なくすることができます(ただし、実際の生きている実践的な結婚式プランナーをアプリで置き換えることはできません)。 IWedding Deluxe:このアプリは無数の面白い面を持っていますが、最も印象的なのは予算ツールです。ペーパーレスポスト:使用...

結婚VIP

結婚VIP

は最高の人として、結婚式パーティーの他の主要メンバーの役割を知るべきです。ここに覚えておくべきトップ10のVIPがいます。花嫁:彼女を幸せに保ち、他の人は喜んでいるはずです。新郎:もし彼が誰なのか分からなければ、あなたは希望がありません。 ...

あなたの目的地に歓迎するお客様 - 目的の結婚式を持つダミー

あなたの目的地に歓迎するお客様 - 目的の結婚式を持つダミー

は、旅行者を歓迎することを意味します。理想的には、あなたやあなたの結婚式のパーティーからの誰かが、彼らが到着したときに彼らの抱擁を迎えるために挨拶して手助けするべきです。それ以外の場合は、フロントデスクに誰が期待しているかを知らせてください。あなたの友人や家族が部屋にすばやく見えるように頼んでください。 ...

エディタの選択

犬の写真セッションのための梱包 - ダミー

犬の写真セッションのための梱包 - ダミー

犬の写真家のカメラバッグには、あなたの写真セッションをあなたとあなたの犬のためにもっと楽しいものにするために、これらの犬固有のアクセサリーを梱包してください:トリート:あなたの犬が狂っているものは何でも!トリートメントバッグ:これらのうちの1つをベルトに挟んで、掘り出しに行く必要はありません。

マクロ写真用人工光による昼光 - ダミー

マクロ写真用人工光による昼光 - ダミー

ストロボとフラッシュライトは、スタジオ。同じガイドラインに従って屋外で人工光を使うことができます。主な違いは、昼光は通常屋内で利用可能な昼光よりもはるかに明るいことです。マクロとクローズアップの写真撮影では、ライトを被写体の非常に近くに配置するのが一般的です。

HDR写真でノイズリダクションを実行する - Photoshop Elementsでダミー

HDR写真でノイズリダクションを実行する - Photoshop Elementsでダミー

を使用すると、トーンマッピングされたHDRさらに画像。ノイズを減らすことは鮮明に似ています。追加のフィルタを適用する前に、Photoshop ElementsでHDRイメージの背景レイヤーを保持することを忘れないでください。複製レイヤーを作成し、「フィルター」→「ノイズ」→「ノイズ低減」を選択します。図は、Reduce Noiseダイアログボックスが開いている状態を示しています。