单选题
3015.下列哪些是常见的激活函数?
A
Sigmoid
B
ReLU(RectifiedLinearUnit)
C
Tanh(HyperbolicTangent)
D
Softmax
答案解析
正确答案:A
解析:
题目:下列哪些是常见的激活函数?
选项:
A: Sigmoid
B: ReLU (Rectified Linear Unit)
C: Tanh (Hyperbolic Tangent)
D: Softmax
参考答案给出为 A,但该答案不完整或存在错误。正确解析如下:
【正确答案】:A、B、C、D 都是常见的激活函数。
【逐项解析】:
A: Sigmoid
Sigmoid 函数定义为:f(x) = 1 / (1 + e^(-x))。
它将输入映射到 (0, 1) 区间,常用于二分类问题的输出层。尽管存在梯度消失问题,但在早期神经网络中广泛应用,是经典的激活函数之一。
B: ReLU (Rectified Linear Unit)
ReLU 函数定义为:f(x) = max(0, x)。
它是目前最常用的激活函数之一,尤其在隐藏层中广泛使用,因其计算简单且能有效缓解梯度消失问题。
C: Tanh (Hyperbolic Tangent)
Tanh 函数定义为:f(x) = (e^x - e^(-x)) / (e^x + e^(-x))。
其输出范围为 (-1, 1),相对于 Sigmoid 具有零中心化的优势,也常用于隐藏层。
D: Softmax
Softmax 函数通常用于多分类问题的输出层,它将向量转换为概率分布,使得所有输出之和为 1。虽然主要用于输出层而非隐藏层,但仍被归类为激活函数的一种。
【核心知识点】:
激活函数是神经网络中的非线性变换模块,用于引入非线性能力,使神经网络能够拟合复杂函数。常见激活函数包括:
- Sigmoid:适用于二分类输出,易导致梯度消失。
- Tanh:输出零中心化,性能优于 Sigmoid。
- ReLU:高效且缓解梯度消失,现代网络首选。
- Softmax:用于多分类输出层,生成概率分布。
【结论】:
本题为多选题性质(题干为“哪些”),应允许多个正确选项。所有四个选项均为常见的激活函数,因此正确答案应为 A、B、C、D。若只能单选,则题目设计存在缺陷。根据标准深度学习知识,A、B、C、D 均正确。
题目纠错
人工智能训练师题库
