科学の箱

科学・IT・登山の話題

機械学習 統計

dataanalysis-002-week5

投稿日:2014年1月21日 更新日:

ANOVA – quantitative

  • 分散分析、数学的に分散分析と重回帰分析は同じ
  • 分散分析では3群以上の平均の差異を検定する
  • ただし非線形では異なる
  • http://oshiete.goo.ne.jp/qa/2859018.html

Binary outcome from regression.

  • 勝ち負け、dead/alive, buy / not buy
  • 線形回帰
  • 線形 vs ロジスティック回帰 <- これでバイナリ出力ができる

カウント数が出力結果出るある場合

  • 補正後の回帰分析は一つのオプション
  • ポワソン分布を使う
  • これを利用すれば確率的に発生する件数、人数がわかるので例えばリソースの割り当てが可能になる。
  • 線形回帰もしくはポワソン・ログ回帰が使える
  • agnostic model
  • 信頼空間

モデルチェック

  • overfitting
  • overtesting
  • biased inference

vcovHC

モデルの選択

  • ドメインの知識
  • Exploratory
  • 統計的選択

統計的選択

  • Step-wise
  • AIC
  • BIC
  • LASSo, Ridge-Regression

mean variance relationship

  • mean variance relationshipがある場合にはロバスト標準誤差を利用する。

メタ情報

inarticle



メタ情報

inarticle



-機械学習, 統計
-,

執筆者:


comment

メールアドレスが公開されることはありません。 * が付いている欄は必須項目です

関連記事

no image

dataanalysis-002-week4

クラスタリング SVDと組み合わせることでよりクラスに分かれているクラスタリングを実行できる。 散布図でクラスタリングする変数を探す クラスタリング SVDを実行する SVDの結果をクラスタリングに取 …

no image

research pipeline

Related posts:データ分析について評価するconjoint分析の資料ラテン方格

no image

線形回帰とリッジ回帰を比較する

リッジ回帰はL2ノルムの正則項を導入することで、過学習を防ぐ。この場合過学習を防ぐとは、重みを0の方向に動かすという意味である。実際に線形回帰とリッジ回帰を比べてみて、どのようにモデルが変わるかを確認 …

no image

ジニ係数(再掲)

ジニ係数について修正した。とりあえずコード。 revenue<-read.csv(file=”data.csv”, head=TRUE) revenue$TotalRevenues_n < …

no image

外れ値の把握

3シグマ法=Hampel Identifier Related posts:vcovHAC分散分析のcase study-2サンプルサイズによる有意の違い

2014年1月
« 12月   2月 »
 12345
6789101112
13141516171819
20212223242526
2728293031  

side bar top



アーカイブ

カテゴリー