torch.nn.functional.softplus

torch.nn.functional.softplus(input, beta=1, threshold=20) → Tensor

逐元素应用函数 $\text{Softplus}(x) = \frac{1}{\beta} * \log(1 + \exp(\beta * x))$.

为了数值稳定性，当 $input \times \beta > threshold$ 时，实现会恢复到线性函数。

有关更多详细信息，请参阅 Softplus。