Keras-Glorot統一初始化器：輸入和輸出單元？

Question

Keras文檔中有幾件事我不理解

它從-limit, limit內的均勻分布中抽取樣本-limit, limit限制為sqrt(6 / (fan_in + fan_out)) ，其中fan_in是權重張量中的輸入單位數，而fan_out是權重張量中的輸出單位數。

在哪里可以看到模型的fan_in和fan_out ？ 這是我的模型：

 model = Sequential() model.add(Flatten(input_shape=(224,224,3))) model.add(Dense(256, activation='relu')) model.add(Dropout(0.5)) model.add(Dense(1, activation='sigmoid')) 

Answer 1

使用model.summary() ，您將看到每層的input和output形狀，這就是Glorot統一初始化 fan_out分別用於fan_in和fan_out 。

你的例子 ：

_________________________________________________________________
Layer (type)                 Output Shape              Param #   
=================================================================
flatten_1 (Flatten)           (None, 150528)            0         
_________________________________________________________________
dense_1 (Dense)              (None, 256)               38535424  
_________________________________________________________________
dropout_1 (Dropout)          (None, 256)               0         
_________________________________________________________________
dense_2 (Dense)              (None, 1)                 257       
=================================================================

因此dense_1 fan_in等於150528（輸入），而fan_out 256（輸出）。 dense_2在另一方面將具有fan_in 256（從以前的致密層輸入）和fan_out 1（它的輸出形狀）。