科学の箱

科学・IT・登山の話題

機械学習 統計

dataanalysis-002-week5

投稿日:2014年1月21日 更新日:

ANOVA – quantitative

  • 分散分析、数学的に分散分析と重回帰分析は同じ
  • 分散分析では3群以上の平均の差異を検定する
  • ただし非線形では異なる
  • http://oshiete.goo.ne.jp/qa/2859018.html

Binary outcome from regression.

  • 勝ち負け、dead/alive, buy / not buy
  • 線形回帰
  • 線形 vs ロジスティック回帰 <- これでバイナリ出力ができる

カウント数が出力結果出るある場合

  • 補正後の回帰分析は一つのオプション
  • ポワソン分布を使う
  • これを利用すれば確率的に発生する件数、人数がわかるので例えばリソースの割り当てが可能になる。
  • 線形回帰もしくはポワソン・ログ回帰が使える
  • agnostic model
  • 信頼空間

モデルチェック

  • overfitting
  • overtesting
  • biased inference

vcovHC

モデルの選択

  • ドメインの知識
  • Exploratory
  • 統計的選択

統計的選択

  • Step-wise
  • AIC
  • BIC
  • LASSo, Ridge-Regression

mean variance relationship

  • mean variance relationshipがある場合にはロバスト標準誤差を利用する。

メタ情報

inarticle



メタ情報

inarticle



-機械学習, 統計
-,

執筆者:


comment

メールアドレスが公開されることはありません。 * が付いている欄は必須項目です

関連記事

no image

クラスタリング

Rによるクラスタ分析の実行 県別の持家率と自家用車普及率からクラスタ分析を実行し似た県を探してみる。。 データソース 持家と自家用車普及率のデータは下記から取得する 持家普及率のデータはこちらから取得 …

no image

Core Concept in Data Analysis – Week 5

予測の分析 関連性を分析する モデルを明らかにする。 パラメータを推測する。 テストする。 予測が将来になると難しい→環境が変わってしまうため。 correlation structure (質的尺度 …

no image

kaggle Titanic Tutorial – 3

DecitionTreeのパラメータを調整する。 まずはMaxDepthから from sklearn.model_selection import LeaveOneOut from sklearn. …

no image

ウェルチの検定

対応していない2つのグループ間で平均を比べる方法としてはt検定がある。ただしt検定では2つの前提がある。ひとつは正規性、もうひとつは等分散である。正規性の前提では独立変数は正規分布に従っている。等分散 …

no image

pythonでEDAを実施する – 記述統計

データを取り込む data frameに変換する desdribe()メソッドで要約統計量を出力 各項目について残差分析(ここでは各データが平均値からどの程度離れているか、要するに分散の傾向を把握する …

2014年1月
« 12月   2月 »
 12345
6789101112
13141516171819
20212223242526
2728293031  

side bar top



アーカイブ

カテゴリー