ノート/Convolutionを逆変換したい？ (2016-08-15)

サイトトップ

ノート
データ処理
├マイニング
├バスケット解析
├バスケット解析をＲで
├図書貸出をＲで
├モデルクラスタリング
└
テキストマイニング
├テキストマイニングTM
├TMとシソーラス
├PubMedをTM
├TMとMeSH
├TMとNLTK
├テキストマイニングとtagger
├医薬品添付文書ＤＢ
├論文の処理1
├剽窃１
├Bing検索
└
分子進化学
├分子進化学
└
Pythonと論文アクセス
├Pythonを使ってみる
├PythonでPubMed
├Pythonで...続き
└
Macメモ
├Script

&ref(): File not found: "favicon_story.txt" at page "ノート/ノート";

自信ないので
├Winのバッチ
│├スクリプト入門
│├バッチファイル
│├SETコマンド
│├自分のメモ
│└
└

メニュー編集

最新の5件

ノート/ノート

訪問者数　1289　　　　　　最終更新　2016-08-15 (月) 16:52:17

Deep Learning/画像generationで、多層段（Convolution）の途中経過を見たい --- 2016/08/15 †

同じことがしたかった人たちの論文 †

• Alexey Dosovitskiy, Thomas Brox: Inverting Visual Representations with Convolutional Networks
  arxiv 1506.02753v4なので、次の論文の改良版　　内容はかなり書き換わっているように思う。

• Alexey Dosovitskiy, Thomas Brox: Inverting Convolutional Networks with Convolutional Networks
  ここにしか残っていないが、arxisv 1506.02753v1なので、上記論文の初期版なのだろう

• 後者（初期版）を元にした、nextremer 古川氏による論文輪講スライド？〜 Inverting Convolutional Networks with Convolutional Networks

• 元論文の中で[5]（v4版では[6]）として再々参照されている論文
  A. Dosovitskiy, J. T. Springenberg, and T. Brox: Learning to Generate Charis with Convolutional Neural Networks

元の論文（まずは初期版）から †

In this paper, we take another step towards understanding CNNs by attempting to invert them. Such inversion allows us to see which information of the input image is preserved in the features. Moreover, applying the inverse of the feature representation to perturbed feature vectors, to interpolations between two feature vectors, or to random feature vectors yields further insight into the structure of the feature space.

CNNに対して逆変換を試みたい。逆変換によって入力画像のどの情報が、（出力の）特徴featureに保存されているかがわかる。　さらに、摂動した（乱した）特徴ベクトルや、２つの特徴ベクトルの内分補間点や、ランダムな特徴ベクトルを、逆変換に与えることによって、特徴空間の構造に関する更なる識見を得ることができる。

ここからは意訳。

逆変換を教師付き学習によって作る。（勾配計算のための）ロス関数はユークリッド距離の自乗を用いる。

この原理を、ImageNetを学習したAlexNet CNNに対して行う。