torch.nn.functional.mish

torch.nn.functional.mish(input, inplace=False)

逐元素应用 Mish 函数。

Mish: 自正则化非单调神经网络激活函数。

$$\text{Mish}(x) = x * \text{Tanh}(\text{Softplus}(x))$$

注意

参阅 Mish: 自正则化非单调神经网络激活函数

有关更多详细信息，请参阅 Mish。

返回值类型

张量