projection层
时间: 2023-09-20 09:13:12 浏览: 149
projection层是指在神经网络中,将输入数据映射到另一个空间的一层。在NNLM中,projection层是连接输入层和隐藏层之间的一层,它将通过权重矩阵将输入向量映射到一个更低维度的向量空间中,不像一般的隐藏层层并没有激活函数。在decoder中,每一步生成的隐状态也会通过一个projection层映射到对应的词,通常是一个softmax层,输出一个V维度的向量,其中每个维度表示某个词的概率,通过找出概率最大的词作为预测出的词。在NNLM的结构中,projection层是连接输入层和隐藏层的一部分,起到将输入向量映射到隐藏层维度的功能。<span class="em">1</span><span class="em">2</span><span class="em">3</span>
#### 引用[.reference_title]
- *1* *3* [projection layer 投影层](https://blog.csdn.net/u010087338/article/details/129732981)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}}] [.reference_item style="max-width: 50%"]
- *2* [详解基于Encoder-Decoder的seq2seq](https://blog.csdn.net/qq_38890412/article/details/120664674)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT0_1"}}] [.reference_item style="max-width: 50%"]
[ .reference_list ]
阅读全文