Chapter 12. 활성화 함수와 손실 함수

• Chapter 12. 활성화 함수와 손실 함수

• 12.1활성화 함수의 정의와 역할

• 12.2시그모이드(Sigmoid) 함수

• 12.3하이퍼볼릭 탄젠트(Tanh) 함수

• 12.4ReLU(Rectified Linear Unit) 함수

• 12.5Leaky ReLU와 PReLU

• 12.6GELU(Gaussian Error Linear Unit) 함수

• 12.7Swish 함수

• 12.8소프트맥스(Softmax) 함수

• 12.9손실 함수의 정의와 역할

• 12.10평균 제곱 오차(Mean Squared Error)

• 12.11교차 엔트로피 손실(Cross-Entropy Loss)

• 12.12이진 교차 엔트로피 손실(Binary Cross-Entropy Loss)

• 12.13Focal Loss

• 12.14활성화 함수와 손실 함수의 조합 원칙