個人財務 データ科学で使用される分類アルゴリズム - ダミー

データ科学で使用される分類アルゴリズム - ダミー

ビデオ: 完全オリジナル記事を自動生成する「単語アルゴリズム全知能記事作成ツールKIJIN」 2025

ビデオ: 完全オリジナル記事を自動生成する「単語アルゴリズム全知能記事作成ツールKIJIN」 2025
Anonim

分類アルゴリズムを使用すると、既存のデータセットを使用して、将来のデータポイントの分類に使用するための予測モデルを生成するために、あなたが知っていることを使用してください。将来のデータポイントの分類を予測するためのモデルを構築するために、データセットとその既知のサブセットを使用することが目標の場合は、分類アルゴリズムを使用することをお勧めします。

教師あり分類を実装する場合、データのサブセットを知っている必要があります。これらのサブセットは カテゴリ と呼ばれます。 分類は、データセットの事前定義されたカテゴリにデータがどの程度適しているかを把握するのに役立ち、将来のデータポイントの分類に使用する予測モデルを構築できます。

<! - 1 - >

図は、世銀の所得と教育のデータセットを大陸の分類に従って分類する方法を示しています。

クラスタリング手法で特定できるサブセットは、大陸カテゴリに対応する場合もあれば、そうでない場合もあることがわかります。たとえば、アフリカのデータポイントの中央にあるアジアの国を1つ見てみましょう。それはブータンです。このデータセットのデータを使用して、着信データポイントの大陸カテゴリを予測するモデルを構築することができます。

<!ブータンと同様の統計を示した新しい国のデータポイントを導入した場合、新しい国はアジア大陸かアフリカ大陸のいずれかに分類される可能性がありますモデルの定義方法について説明します。

元のデータにブータンが含まれていない状況を想像し、このモデルを使用してブータンの大陸を新しいデータポイントとして予測します。このシナリオでは、モデルは、ブータンがアフリカ大陸の一部であると間違って予測するだろう。

<!これはモデルがその根底にあるデータセットにあまりにもぴったり合っている状況と、そのデータセットに固有のノイズまたはランダムなエラーの例である。モデルが新しいデータポイントの予測子として機能しないことを示します。

モデルのオーバーフィットを避けるために、データをトレーニングセットとテストセットに分けます。典型的な比率は、データの80%をトレーニングセットに割り当て、残りの20%をテストセットに割り当てることです。トレーニングセットを使用してモデルを構築し、テストセットを使用して、テストセットのデータポイントが不明であるとモデルを評価します。モデルによるこれらのテストセットデータポイントに割り当てられたカテゴリを真のカテゴリと比較することによって、モデルの精度を評価できます。

モデルの過大化も問題となり得る。 過大化(Overgeneralization) はオーバーフィッティングとは逆です。データ科学者がモデルを非常に一般的なものにすることによって、オーバーフィットによる誤分類を回避しようとするときに起こります。あまりにも一般的なモデルは、すべてのカテゴリに低い信頼度を割り当てることになります。

モデルの過大化を説明するために、世界銀行の収入と教育のデータセットを再度検討する。このモデルがブータンの存在を利用して近くの新しいデータ点に疑念を投げかけた場合、近くのすべての点をアフリカンとして扱う確率は低いウィーディーワシモデルになります。このモデルはあまり予測的ではありません。

上着と過大化の優れたメタファは、「アヒルのように歩き、アヒルのように話すならば、それはアヒルです。 「足りないことは、このフレーズを、「私が個人的に歩くと突っ込むためにアヒルを観察したやり方で正確に歩くと突き刺すならば、それはアヒルです。私はオーストラリア産のアヒルが歩く方法を見たことがないので、オーストラリアのアヒルは本当にアヒルではないはずです。対照的に、過体重化は、「2本の足で動き回り、高音、鼻音を発するなら、それはアヒルです。したがって、90年代のアメリカのシトコムでのフラン・フレッシャーのキャラクター、フラン・ファーシャー は、ナニー はアヒルでなければなりません。 "

監視対象の機械学習

- 分類のための派手な用語 - は、次の特性が真である状況で適切です。

分析しているデータセットを理解していること。 あなたのデータセットのサブセット(カテゴリ)は、事前に定義されており、データによって決定されません。 事前定義されたカテゴリ内のデータを関連付けるモデルを作成し、モデルが将来のデータポイントの分類を予測するのに役立つようにします。

分類を実行するときは、次の点に留意してください。 モデルの予測は、モデルの基礎データと同じくらい良好です。

  • 世界銀行のデータの例では、平均余命や1人当たりエネルギー使用量がモデルに追加された場合、その予測力が増加する可能性があります。

  • モデルの予測は、基礎となるデータセットの分類と同じくらい良いです。

  • たとえば、ロシアのように2大陸にまたがる国ではどうしますか?北アフリカとサハラ以南のアフリカを区別していますか?同様の属性を共有する傾向があるので、ヨーロッパで北米を盛り上げていますか?中米は北米や南米の一部であると考えていますか?オーバーフィットと過度の生成の絶え間ない危険があります。両者の間には幸せな媒体が必要です。

データ科学で使用される分類アルゴリズム - ダミー

エディタの選択

怒っているとき自分自身を落ち着かせる:熱いものからないものへ

怒っているとき自分自身を落ち着かせる:熱いものからないものへ

怒っているとき自分を落ち着かせる> 怒っていることは一瞬で起こることはありません。あなたの怒りを管理し、落ち着かせることもできませんが、急激な怒りでさえも疲れてしまいます。怒りの気持ちがどのように蒸発するかを理解することで、怒りの解毒剤として使用できる戦術が得られます。これらはあなたがすでに使っている戦術ですが、目にすることはできません!過去の怒りの思い出を使って、練習しよう。

あなたの気分、睡眠、およびエネルギーレベル - ダミー

あなたの気分、睡眠、およびエネルギーレベル - ダミー

あなたが双極性障害を抱えている場合、あなたの気分、睡眠、およびエネルギーレベルを毎日グラフ化して、気分のエピソード(躁うつ病またはうつ病)の早期の兆候を発見するのに役立つパターンを記録することをお勧めします。さらに、このログは貴方の医師やセラピストを治療決定に導く貴重な情報を提供します。これを印刷する...

エディタの選択

結婚式計画ウェブサイトとアプリケーション - ダミー

結婚式計画ウェブサイトとアプリケーション - ダミー

技術は、結婚式計画の分野で救世主でした。いくつかのウェブサイトやアプリでは、結婚式プランニングのプロセスを無限に少なくすることができます(ただし、実際の生きている実践的な結婚式プランナーをアプリで置き換えることはできません)。 IWedding Deluxe:このアプリは無数の面白い面を持っていますが、最も印象的なのは予算ツールです。ペーパーレスポスト:使用...

結婚VIP

結婚VIP

は最高の人として、結婚式パーティーの他の主要メンバーの役割を知るべきです。ここに覚えておくべきトップ10のVIPがいます。花嫁:彼女を幸せに保ち、他の人は喜んでいるはずです。新郎:もし彼が誰なのか分からなければ、あなたは希望がありません。 ...

あなたの目的地に歓迎するお客様 - 目的の結婚式を持つダミー

あなたの目的地に歓迎するお客様 - 目的の結婚式を持つダミー

は、旅行者を歓迎することを意味します。理想的には、あなたやあなたの結婚式のパーティーからの誰かが、彼らが到着したときに彼らの抱擁を迎えるために挨拶して手助けするべきです。それ以外の場合は、フロントデスクに誰が期待しているかを知らせてください。あなたの友人や家族が部屋にすばやく見えるように頼んでください。 ...

エディタの選択

犬の写真セッションのための梱包 - ダミー

犬の写真セッションのための梱包 - ダミー

犬の写真家のカメラバッグには、あなたの写真セッションをあなたとあなたの犬のためにもっと楽しいものにするために、これらの犬固有のアクセサリーを梱包してください:トリート:あなたの犬が狂っているものは何でも!トリートメントバッグ:これらのうちの1つをベルトに挟んで、掘り出しに行く必要はありません。

マクロ写真用人工光による昼光 - ダミー

マクロ写真用人工光による昼光 - ダミー

ストロボとフラッシュライトは、スタジオ。同じガイドラインに従って屋外で人工光を使うことができます。主な違いは、昼光は通常屋内で利用可能な昼光よりもはるかに明るいことです。マクロとクローズアップの写真撮影では、ライトを被写体の非常に近くに配置するのが一般的です。

HDR写真でノイズリダクションを実行する - Photoshop Elementsでダミー

HDR写真でノイズリダクションを実行する - Photoshop Elementsでダミー

を使用すると、トーンマッピングされたHDRさらに画像。ノイズを減らすことは鮮明に似ています。追加のフィルタを適用する前に、Photoshop ElementsでHDRイメージの背景レイヤーを保持することを忘れないでください。複製レイヤーを作成し、「フィルター」→「ノイズ」→「ノイズ低減」を選択します。図は、Reduce Noiseダイアログボックスが開いている状態を示しています。