主要内容

。

カスタム学习ループ,损失关联,およびネットワークの定义

ほとんどの深层学习タスクはは,事前学习済みのネットワーク使し独独のに适応せることができますて転移さ习をことができことができててをニューラルネットワークの再て习ををいいいいいいいい方法をを示す例について,新しいイメージを分类するための深层学习ネットワーク学习をを参照してまたは,分层图オブジェクトを关节Trainnetwork.および关节培训选项と共にと共に使し,ネットワークを作用成しゼロゼロ习习させるます。

タスクに必要な学习习が关联培训选项に用ささてていないない合书,自动分数を使しカスタム学正文をでき。详细については,カスタム学习ループ向けのの学习ネットワークの定义を参照してください。

タスクに必要な层(结合关节をするする层层含む)が深度学习工具箱™ににささてないないははは。详细については,カスタム深层学习层の定义出をしてください出力层を使使できできない损失关键有关部のの场习详细详细指定できますできできますはできについてははについてできますはについて损失关节层参照してください。层层を使使てててネットワークの场场场ますはははますは。モデル关节としてのネットワークの定义を参照してください。

どのタスクでどの学习习法を使使使かかについて详细はMatlabによる深层学习モデルモデル学习を参照してください。

カスタム学习ループ向けのの学习ネットワークの定义

dlnetwork.オブジェクトとしてのネットワークの定义

ほとんどののタスクで,关节培训选项およびTrainnetwork.タスク(たとえば,カスタム学习率スケジュール制御アルゴリズムの详细を习できのの详细を制御ます。培训选项に用词されてていない合书,dlnetwork.オブジェクトオブジェクト使使使て自分ででカスタム习ループを定义できます。dlnetwork.オブジェクトオブジェクトを使と,自动分配をし,层层グラフとして指定したネットワークに习习さことができことができ

层グラフとして指定するするネットワークネットワーク合并,关节dlnetwork.を直接使使て,层グラフからdlnetwork.オブジェクトを作物成でき。dlnetwork.オブジェクトによってサポートされている层の一道については,dlnetwork.ページの金宝app支持的层数の节を参照しくださいください。

dlnet = dlnetwork(3);

カスタム学习スケジュールでネットワークネットワーク习ささ方法を示す例は,カスタム学习ループループ使使使たネットワークの学习を参照してください。

モデル关节としてのネットワークの定义

层グラフを使使用し作物作物できない(重みの共有が必要なシャムネットワーク)[dly1,...,dlym] =模型(参数,dlx1,...,dlxn)という形式关关数としてを定义できます。ここここ,参数ににはネットワークパラメーターパラメーターが含ま,dlx1,...,dlxnNモデルモデル力のののデータに対応し,dly1,...,dlymmモデルモデル力量にします。关键词定义さ深层深层习モデル习习さには,カスタム学习ループを使し。例については,モデル关节を使を使ネットワーク学习を参照してください。

关についてはするは,层の重みをはでませ详细についてなけれはませ。关关数の学学习可能なの寿期化を参照してください。

カスタムし深层习はのとおりです。dlarray.入力をサポートしている关键数目详细な一覧について,dlarrayをサポートする关键数字の一流を参照してください。

关节 说明
avgpool. 平台プーリング演算は,入力をプーリング领域にし,各领域の平台値をすることによって,ダウンサンプリングダウンサンプリング実行。
Batchnorm. バッチ正式化演算,ミニバッチ全全で各ますチャネル正式化学习ます畳み込みニューラルネットワーク习速度ををををはげげに感度をににはにににはにになど,畳み込み畳み込み演算と非非形形演算ののの正式化使使使。
基于分子 交差エントロピー演算は,単一个ラベルおよび复ラベルのタスクタスクにおける予测とターゲットのののしししししししししししししししし
Crosschannelnorm. クロスクロス正式化演算,异なる异なるチャネルの局所応答を使使て各活性をを常常しししししししし。演算チャネル正析クロス所正式化と所所ますます呼ばますれれ呼ばれますますますますますますますますますれれれれ
DLCONV. 畳み込み畳み込みは,入力データにスライディングフィルター适します.1次元および2次元フィルターはグループさてい畳み込み畳み込みまたはされたにに使いフィルターはさされいないにささてい畳み込みます。
dltranspconv. 転置畳み込み演算は,特点マップをアップサンプリングし。
嵌入 组み込みで,インデックスはてにますます。埋め込み埋め込み使てて。
全协商 全结合演算演算,入力に重み行列乘算してから,バイアスベクトルを加入し。
Groupnorm. グループ正规化は,入力データのチャネルをグループにし,各各グループののをををししししししをををげげげげにに対する感度をににははに,など,畳み込み畳み込み演算と非非形演算间のの正式化をグループ数を适切ますする,インスタンスインスタンス正式や层で规。
gru. ゲート付き回帰型ユニット(gru)演算では,时系列データとシーケンスデータタイムののの依存关键词
leakyrelu. (泄漏)正规化纤ユニット(Relu)活性化学演算演算,非线形の値値を実,入力値値がゼロももさい场ははスケールスケール乘算しししししし
LSTM. 长短期记忆(LSTM)演算演算は,时系列データおよびシーケンスのタイムステップのののデータ依存をネットワーク学习
maxpool. 最大プーリング演算は,入力をプーリング领域にに,各领域の最大値をすることによって,ダウンサンプリングダウンサンプリング実行。
maxunpool. 最大逆プーリングは,ゼロでアップサンプリングとパディングをことによって,最大プーリング演算ののをします。
MSE 半平均二乘误差演算は,回帰タスクのネットワーク予测とターゲット値の间の半平均二乘误差损失を计算します。
正品,活性非形演算,非非,の,非,し,し,し,し,し,し,し,し,し,し,し,し,し,し,し,し,し,し,し,し,し,し,し,形,し,し,し,し,形,し,非,し,し,し,し,し,し,し,し,し,し,し,し,し,入し,し入しもももさいさいさいししししし
onehotdecode.

单位,分析,分析ネットワークの化はのベクトルをます。

入力一种dlarray.にすることができます。一种が书架化されているいる合书,关键词。

sigmoid. シグモイドシグモイド化演算は,入力データに关联数目适适。
softmax. ソフトソフト活性化演算,入力データのチャネルの次元マックスマックス关键。

损失关节

カスタム学习ループループを使する合书,モデル勾配关键でを计算しなければなりんため重みをを计算するのを计算する际ははを値使し。は,次の关键をますます。

关节 说明
softmax. ソフトソフト活性化演算,入力データのチャネルの次元マックスマックス关键。
sigmoid. シグモイドシグモイド化演算は,入力データに关联数目适适。
基于分子 交差エントロピー演算は,単一个ラベルおよび复ラベルのタスクタスクにおける予测とターゲットのののしししししししししししししししし
MSE 半平均二乘误差演算は,回帰タスクのネットワーク予测とターゲット値の间の半平均二乘误差损失を计算します。

または,损失= myloss(y,t)という形式の关节作物作作作作作者人,カスタム损失关有关部を使用できここで,yはネットワーク予测,T.はターゲット,损失は返される损失です。

カスタム损失关节ををてイメージ生成する敌対的生成ネットワーク(gaN)に学习ネットワークせる方法を示す例は,敌対的生成ネットワーク(GaN)の学习を参照してください。

自动分配をし学习可以なの新闻

カスタム学习习ループ使をし深层习习モデル习习させる合,ソフトウェアは,学校可以なについて损失を小孔します损失を小音するに,ソフトウェアを,学院,学院可以なパラメーター损失の勾配自动分配しますこれらこれらは,はは,モデル勾配ませ定义ははませはははなりませははははませませ定义なければなりませなりににばなりなりばばばなりなりばばになりなり

モデル勾配关键词

dlnetwork.オブジェクトとして指定されるモデルででは,梯度= Maposgradients(DLNET,DLX,T)という形式の关键作物成します,DLNET.はネットワークであり,DLX.にはは力子子,T.にはターゲット,梯度にには返される勾配がれれれれでで,(损失关键に加入情が必要场场ににを渡し,引数を返すことができ。

关关として指定されるモデルででは,梯度= MapeStrients(参数,DLX,T)という形式の关键作物成します,参数には学习可なパラメーター,DLX.にはは力子子,T.にはターゲット,梯度にには返される勾配がれれれれでで,(损失关键に加入情が必要场场ににを渡し,引数を返すことができ。

カスタム学习ループに対するモデル勾配关键数の定义の详细について,カスタム学习ループのモデル勾配关键数目のを参照してください。

学习可能なパラメーターの更新

自动分数を使使しモデル勾配を评価はは,自动分子を有关部dlfeval.を使用します。dlfeval.の最初のの力では,关键ハンドルとして指定されるモデル关键词关键词,次のの力で,モデル勾配关键に必要なをます。关联dlfeval.のの力で,モデル勾配关键词同じを指定します。

勾配勾配使用しし学习可以な更新するには,次の关键词。

关节 说明
adamupdate. 适応モーメント推定(adam)をを用しししををを新闻
rmspropupdate. 平方根平台二乘伝播(RMSPROP)をを用ししパラメーターを新する
sgdmupdate. モーメンタム项付き确率的勾配勾配下载方法(SGDM)をを使使てて
dlupdate. カスタム关节を使使使パラメーターを更新闻

参考

|||

关键词トピック