機械学習のアレ

機械学習に関する怪しいメモやらあれこれその他メモやら

Restricted Boltzmann Machineの変種(変数表現編)

制限ボルツマンマシンは二値変数を用いることが一般的です。 今回は他の変数表現について紹介していきます。 普通の二値ユニット エネルギー関数 条件付き確率 尤度関数とパラメータの偏微分 ガウシアンユニット エネルギー関数 条件付き確率 尤度関数とパラ…

Restricted Boltzmann Machine for Collaborative Filtering

Restricted Boltzmann Machine for Collaborative Filtering RBMを用いて協調フィルタリングを行うことが出来ます。これはNetflix Prizeなる情報推薦のコンペで好成績を収めたそうです。 要となることはRBMに関して、欠損データに関するノードを除外して用い…

DRBM Revision.(Hidden∈{0, 1})

Discriminative Restricted Boltzmann Machinesの隠れ変数が{0, 1}なときのメモ。 細かい定義やら±1な場合のはこっち参照. Discriminative Restricted Boltzmann Machines(RBM選択モデル)のメモ - ららにく@utool.cc今回の記事は違う部分だけのっける。

Discriminative Restricted Boltzmann Machines(RBM選択モデル)のメモ

細かい説明は省略。モデルの定義と導出のみ。 制限ボルツマンマシン(RBM)の基本的な話は深層学習本(MLP本, 人工知能学会本)などを参照のこと。 あと二値はでなくを使ってる。 シグモイド関数よりのほうがなんかかっこいい。 MNISTだと認識率95%前後らしい ソ…

Restricted Boltzmann Machine(制限ボルツマンマシン)

概要 Restricted Boltzmann Machine(制限ボルツマンマシン) 用途 制限ボルツマンマシンの定義 制限ボルツマンマシンの存在意義 制限ボルツマンマシン学習 細かい話 可視変数と隠れ変数 エネルギー関数 規格化定数 数式いろいろ 規格化定数(もう少し展開) 条…

ToDo

あとで書きたいこと メモ書き(データセット) 情報推薦 パターン認識 ネットワーク分析 画像関係(Lennaなど) セマンティックセグメンテーション 自然言語処理 音声認識 あとで書きたいこと Restricted Boltzmann Machine RBMの学習アルゴリズムあれこれ ギブ…