代码拉取完成,页面将自动刷新
.. py:class:: mindspore.ops.GeLU 高斯误差线性单元激活函数(Gaussian Error Linear Units activation function)。 在 `Gaussian Error Linear Units (GELUs) <https://arxiv.org/abs/1606.08415>`_ 文章中对GeLU函数进行了介绍。 此外,也可以参考 `BERT: Pre-training of Deep Bidirectional Transformers for Language Understanding <https://arxiv.org/abs/1810.04805>`_ 。 GeLU函数定义如下: .. math:: GELU(x_i) = x_i*P(X < x_i) 其中 :math:`P` 是标准高斯分布的累积分布函数, :math:`x_i` 是输入的元素。 输入: - **x** (Tensor) - 激活函数GeLU的输入,数据类型为float16、float32或float64。 输出: Tensor,数据类型和shape与 `x` 的相同。 异常: - **TypeError** - `x` 不是Tensor。 - **TypeError** - `x` 的数据类型不是float16、float32或float64。
此处可能存在不合适展示的内容,页面不予展示。您可通过相关编辑功能自查并修改。
如您确认内容无涉及 不当用语 / 纯广告导流 / 暴力 / 低俗色情 / 侵权 / 盗版 / 虚假 / 无价值内容或违法国家有关法律法规的内容,可点击提交进行申诉,我们将尽快为您处理。