本文介绍高等数学中的ReLU，以及在神经网络中的应用。

函数原型

ReLU(Rectified Linear Unit 修正的线性单元)

f(x)' = \begin{cases}
1, & \text{if } x \geq 0 \
0, & \text{if } x < 0
\end