[math] sigmoid 미분

[math] sigmoid 미분

태그
math
AI
생성 일시
Apr 21, 2024 09:15 AM
최종 편집 일시
Last updated April 22, 2024
Date
블로그 수식 입력 테스트겸, 딥러닝에서 활성화 함수로 초기에 많이 사용되었던 sigmoid 함수를 미분 해본다.
 
시그모이드 함수 는 다음과 같이 정의된다.
분수의 미분법에 따라 의 도함수는 이다. 여기서 이므로
이제 분수의 미분법을 적용하면,
또한, 를 이용해 다음과 같이 표현이 가능하다
이 표현은 시그모이드 함수의 미분이 자기 자신과 그 보수의 곱이라는 성질을 드러낸다.

결론

수식 입력 너무 어려워요 😱
notion image
LaTex의 기반이 되는 TeX를 만든 Doanld Knuth Donald Knuth's 2023 Christmas Lecture: Making the Cells Dance - The New Stack
참고문헌