鲲鹏社区首页
中文
注册
我要评分
文档获取效率
文档正确性
内容完整性
文档易理解
在线提单
论坛求助

功能描述

算子功能

层归一化算子。

算子公式

3维情形下的层归一化算子公式为:

均值和方差可通过运行时计算或由用户提供。如果在运行时计算均值和方差,请使用以下公式:

其中,公式中参数描述如表1所示。

表1 公式参数说明

参数

描述

缩放量。

偏移量。

平均差。

方差。

常数,用以提高数值稳定性。