2017-07-25 79 views
-1

我想知道,如果我用CNN训练模型(例如Alexnet)进行人脸识别(可能是另一个任务分类),我应该使用我训练过的人脸识别来初始化一个新任务分类?卷积神经网络中的初始权

回答

0

如果你的新任务是第一个任务的专门化,那么如果你在第一个任务中有更多的数据可用,那么使用未完全收敛的CNN的权重作为初始化可能是一个好主意。

如果新任务与第一个任务无关,那么只有第一层的权重是第一层的权重,所以它不会非常有用,因为这些层不难训练。

无论如何,完全收敛的网络的权重通常会更难以训练用于新任务,对于不同的任务,使用像正交矩阵,xavier的init等等的良好随机初始化几乎总是会更好...