ReLU

IT위키
인쇄용 판은 더 이상 지원되지 않으며 렌더링 오류가 있을 수 있습니다. 브라우저 북마크를 업데이트해 주시고 기본 브라우저 인쇄 기능을 대신 사용해 주십시오.
ReLU(Rectified Linear Unit), 릴루 또는 렐루라고도 한다.

개요

  • 음수 값은 무시하여 0으로 취하고, 양수 값은 그대로 취하는 활성화 함수
  • y = max(z,0)

종류

Relu.jpg

  • ReLU
  • Leaky ReLU
  • ELU(Exponential linear Unit)
원본 주소 "https://itwiki.kr/index.php?title=ReLU&oldid=6164"