主要内容

このページの翻訳は最新ではありません。ここをクリックして、英語の最新版を参照してください。

ディープ ネットワーク デザイナーを使用した転移学習

この例では、ディープ ネットワーク デザイナー アプリを使用して転移学習をインタラクティブに実行する方法を説明します。

転移学習は,事前学習済みの深層学習ネットワークを利用して,新しいタスクを学習するように微調整するプロセスです。通常は,転移学習を使用する方が,ネットワークにゼロから学習させるよりも簡単で時間もかかりません。少量のデータを使用して,新しいタスクに学習済みの特徴を高速に転移できます。

ディープ ネットワーク デザイナーでイメージ分類のための転移学習を実行するには、次の手順に従います。

  1. ディープネットワークデザイナーアプリを開いて事前学習済みのネットワークを選択します。

  2. 新しいデータセットをインポートします。

  3. 最後の層を、新しいデータ セットに適応させた新しい層に置き換えます。

  4. 学習率を設定して、新しい層での学習速度を転移層より速くします。

  5. ディープネットワークデザイナーを使用してネットワークに学習させるか,ネットワークをエクスポートしてコマンドラインで学習させます。

データの解凍

ワークスペースで、马修斯水星酒店データセットを解凍します。これは、75個の 数学作品の商品イメージから成る小さなデータセットであり、5.つの異なるクラス (“cap”“立方体”,“打牌”,“螺丝刀”,“火炬”)に属します。

解压(“MerchData.zip”);

事前学習済みのネットワークの選択

ディープ ネットワーク デザイナーを開くには、[アプリ]タブの[機械学習および深層学習]でアプリのアイコンをクリックします。あるいは、コマンド ラインからアプリを開くこともできます。

deepNetworkDesigner

ディープネットワークデザイナーには,広範囲のイメージに適した豊富な特徴表現を学習している,さまざまな事前学習済みのイメージ分類ネットワークが用意されています。転移学習は,使用するイメージが,ネットワークの学習時にもともと使用されたイメージに類似している場合に特に効果を発揮します。使用する学習イメージがImageNetデータベースに含まれるような自然イメージの場合,どの事前学習済みネットワークも適しています。使用可能なネットワークの一覧,およびネットワークを比較する方法については,事前学習済みの深層ニューラルネットワークを参照してください。

使用するデータが 图像网のデータと大きく異なる場合 (たとえば、非常に小さいイメージ、スペクトログラム、またはイメージ以外のデータを使用する場合) は、新しいネットワークに学習させる方が良いこともあります。ネットワークにゼロから学習させる方法を示す例については、ディープ ネットワーク デザイナーを使用したシンプルなシーケンス分類ネットワークの作成およびディープ ネットワーク デザイナーでの簡単なセマンティック セグメンテーション ネットワークの作成を参照してください。

SqueezeNetでは追加のサポートパッケージが必要ありません。その他の事前学習済みネットワークでは,必要なサポートパッケージがインストールされていない場合,[インストール]オプションがアプリに表示されます。

事前学習済みネットワークの一覧から[挤压网]を選択し、[開く]をクリックします。

ネットワークの調査

ディープネットワークデザイナーの[デザイナー]ペインにネットワーク全体が縮小表示されます。

ネットワークのプロットを確認します。マウスでズームインするには,Ctrl键キーを押しながらスクロール ホイールを使用します。移動するには、方向キーを使用するか、スクロール ホイールを押したままでマウスをドラッグします。プロパティを表示する層を選択します。すべての層の選択を解除すると、[プロパティ]ペインにネットワークの概要が表示されます。

データのインポート

ディープネットワークデザイナーにデータを読み込むには,[データ]タブで、[データのインポート][イメージデータのインポート]をクリックします。[イメージ データのインポート] ダイアログ ボックスが開きます。

[データソース]リストの[フォルダー]を選択します。[参照]をクリックし,解凍したMerchDataフォルダーを選択します。

イメージ拡張

学習データにイメージ拡張を適用するよう選択することが可能です。ディープ ネットワーク デザイナー アプリには以下の拡張オプションが用意されています。

  • X軸方向のランダムな反転

  • Y軸方向のランダムな反転

  • ランダムな回転

  • ランダムな再スケーリング

  • ランダムな水平方向の平行移動

  • ランダムな垂直方向の平行移動

ランダム化された "拡張" をデータに適用して、実質的に学習データの量を増やすことができます。拡張では、イメージ データの歪みに対して不変になるようにネットワークに学習させることもできます。たとえば、入力イメージに存在する回転に対してネットワークが不変になるように、入力イメージにランダムな回転を追加できます。

この例では、X軸方向のランダムな反転、[-90,90] 度の範囲のランダムな回転、[1,2] の範囲のランダムな再スケーリングを実行します。

検証データ

検証データを学習データから分割してインポートするか、それとも他のソースからインポートするかを選択することも可能です。検証では、学習データと比較して新しいデータのモデル パフォーマンスが推定され、パフォーマンスの監視や過適合の防止に役立ちます。

この例では、イメージの 30% を検証に使用します。

[インポート]をクリックして、ディープ ネットワーク デザイナーにデータをインポートします。

データの可視化

ディープネットワークデザイナーを使用すると,[データ]ペインにある学習データと検証データの分布を視覚的に検査できます。この例では、データセットにクラスが 5.つあることが確認できます。各クラスからのランダムな観測値も確認できます。

学習用のネットワークの準備

[デザイナー]ペインのネットワークを編集して、データの新しいクラス数を指定します。転移学習用のネットワークを準備するために、最後の学習可能な層と最終分類層を置き換えます。

最後の学習可能な層の置き換え

転移学習に事前学習済みネットワークを使用するには、新しいデータセットに一致するようにクラス数を変更しなければなりません。まず、ネットワークの最後の学習可能な層を見つけます。挤压网の最後の学習可能な層は、最後の畳み込み層“conv10”です。この場合は,その畳み込み層を,クラスの数と同じ数のフィルターを持つ新しい畳み込み層に置き換えます。

新しいconvolution2dLayerをキャンバスにドラッグします。元の畳み込み層と一致させるために,FilterSize1,1に設定します。

NumFiltersプロパティは,分類問題のクラス数を定義します。NumFiltersを新しいデータのクラス数(この例では5.) に変更します。

加权比率因子および双线性学习因子10に設定して学習率を変更し、新しい層での学習速度を転移層より速くします。

最後の 2.次元畳み込み層を削除して、代わりに新しい層を結合します。

出力層の置き換え

転移学習用に,出力層を置き換える必要があります。[層のライブラリ]の最後までスクロールして、新しい分类层をキャンバスにドラッグします。元の分類層を削除して、その位置に新しい層を結合します。

新しい出力層には、输出大小を設定する必要はありません。学習時に、ディープ ネットワーク デザイナーによって層の出力クラスがデータから自動的に設定されます。

ネットワークの確認

ネットワークの学習の準備が整っていることを確認するには,[解析]をクリックします。深層学習ネットワーク アナライザーによって誤差 0が報告されている場合、編集したネットワークの学習の準備が整っています。

ネットワークの学習

ディープネットワークデザイナーでは,アプリにインポートした,あるいはアプリで作成したネットワークに学習させることが可能です。

既定の設定でネットワークに学習させるには,[学習]タブの[学習]をクリックします。既定の学習オプションは大きなデータ セットに適しています。小さなデータ セットの場合は、ミニバッチ サイズを小さくし、検証頻度を減らします。

学習をさらに細かく制御するには、[学習オプション]をクリックして学習の設定を選択します。

  • 初期学習率を小さい値に設定して、転移層での学習速度を下げます。

  • 各エポックで 1.回、検証データに対する精度が計算されるように、検証頻度を指定します。

  • 小さい数のエポックを指定します。エポックとは、学習データセット全体の完全な学習サイクルのことです。転移学習の場合、同じエポック数の学習を行う必要はありません。

  • ミニバッチのサイズ、つまり各反復で使用するイメージの数を指定します。それぞれのエポックで必ずデータセット全体が使用されるように、学習サンプルの数を均等に分割するようミニバッチのサイズを設定します。

この例では、InitialLearnRate0.0001に、验证频率5.に、MaxEpochs8.に設定します。観測値が55個あるため,MiniBatchSize11に設定して学習データを均等に分け,各エポックで必ず学習データセット全体が使用されるようにします。学習オプションの詳細については,trainingOptionsを参照してください。

指定した学習オプションでネットワークを学習させるには、[閉じる]をクリックしてから[学習]をクリックします。

ディープ ネットワーク デザイナーでは、学習の進行状況の可視化と監視が行えます。必要に応じて、学習オプションを編集してネットワークを再学習させることができます。

結果のエクスポートとMATLABコードの生成

学習した重みを含むネットワーク アーキテクチャをエクスポートするには、[学習]タブの[エクスポート][学習済みネットワークと結果のエクスポート]を選択します。ディープ ネットワーク デザイナーによって、学習済みネットワークが変数trainedNetwork_1に、学習情報が変数trainInfoStruct_1にエクスポートされます。

trainInfoStruct_1
trainInfoStruct_1 =结构体字段:TrainingLoss:[1×40双]TrainingAccuracy:[1×40双]ValidationLoss:[4.3374 1.3966 2.4329南南南南南南南南南南南南南南南0.7526 0.6424 0.5940 0.6349南南南南南南南南南南南南南南南南0.5490 0.5179]ValidationAccuracy:[10 15南南南南南南南南南南南70 90 85年南南南南南南南南南南南南85 90年南南南南南南南南95]BaseLearnRate:[1×40双]FinalValidationLoss: 0.5179 FinalValidationAccuracy: 95

使用するネットワークと学習オプションを再作成する MATLABコードを生成することもできます。[学習]タブの[エクスポート][学習用コードの生成]を選択します。MATLABコードを確認して、学習用のデータの準備、ネットワーク アーキテクチャの作成、およびネットワークの学習をプログラムによって行う方法を学びます。

新しいイメージの分類

学習済みネットワークを使用して分類する新しいイメージを読み込みます。

I=imread(“MerchDataTest.jpg”);

イメージ サイズは学習の間、ネットワークの入力サイズに合うようにディープ ネットワーク デザイナーにより変更されます。ネットワークの入力サイズを確認するには、[デザイナー]ペインに移動して图像输入层(最初の層) を選択します。このネットワークの入力サイズは 227 x 227です。

ネットワークの入力サイズに合うようにテスト イメージをサイズ変更します。

I=imresize(I,[227]);

学習済みネットワークを使用してテスト イメージを分類します。

[YPred,probs]=分类(训练网络_1,I);imshow(I)标签=YPred;标题(字符串(标签)+”、“+ num2str(100 *马克斯(聚合氯化铝),3)+"%");

参考

関連するトピック