램프 함수
Ramp function
램프 기능은 그래프가 램프 모양을 하고 있는 단일 실제 함수다. 예를 들어 "음극 입력의 경우 0, 비음극 입력의 경우 출력이 입력과 동일"과 같은 수많은 정의로 표현할 수 있다. "램프"라는 용어는 스케일링과 시프트를 통해 얻은 다른 기능에도 사용할 수 있으며, 이 글의 기능은 유닛 램프 기능(슬로프 1, 0부터 시작)이다.
수학에서 램프 기능은 양성 부분으로도 알려져 있다.
머신러닝(machine learning)에서는 일반적으로 전기공학에서 반파 정류와 유사하게 ReLU 활성화 기능[1][2] 또는 정류기로 알려져 있다. 통계량(우도 함수로 사용되는 경우)에서는 이를 토비트 모형이라고 한다.
이 함수는 수학과 공학에서 수많은 응용을 가지고 있으며, 문맥에 따라 다양한 이름으로 통한다.
정의들
램프 함수(R(x) : ℝ → ℝ0+)는 여러 가지 방법으로 분석적으로 정의할 수 있다. 가능한 정의는 다음과 같다.
- 이는 max(a,b)의 다음 정의를 참고함으로써 도출될 수 있다.
- a = x 및 b = 0인 경우
- Hubiside 스텝 함수와 일률 구배 직선을 곱한 값:
- 그 자체로 Hubiside step 함수의 convolution:
- Hubiside 스텝 기능의 통합:[3]
- Macaulay 괄호:
- ID 함수의 긍정적인 부분:
적용들
램프 기능은 디지털 신호 처리 이론과 같이 공학에서 수많은 응용 프로그램을 가지고 있다.

금융에서 콜옵션의 보상은 램프(파업가격으로 변동)이다. 램프를 수평으로 뒤집으면 풋옵션이 생기는 반면, 수직으로 플립(부정)하면 옵션을 팔거나 "짧은" 옵션에 해당한다. 금융에서는 아이스하키 스틱과 모양이 비슷해 '호키 스틱'이라고 널리 불린다.
통계에서 다변량 적응 회귀 스플라인(MARS)의 힌지 함수는 램프로서 회귀 모델을 구축하는 데 사용된다.
분석적 특성
비부정성
전체 영역에서 함수는 음수가 아니므로 절대값은 그 자체, 즉 그 자체다.
그리고
- 증거: 정의 2의 평균에 따르면, 1/4분기에는 음이 아니며, 2/4분기에는 0이 된다. 따라서 어느 곳이나 음이 아니다.
파생상품
그 파생상품은 Hubiside 함수다.
제2차 파생상품
램프 기능은 다음과 같은 미분 방정식을 만족한다.
여기서 Δ(x)는 디락 델타다. 이는 R(x)이 두 번째 파생상품 사업자에 대한 그린의 함수라는 것을 의미한다. 따라서 통합 가능한 두 번째 파생상품인 f f(x)를 가진 모든 함수 f(x)는 다음 방정식을 충족한다.
푸리에 변환
여기서 Δ(x)는 디락 델타(이 공식에서, 그 파생상품이 나타난다).
라플라스 변환
R(x)의 단측 라플라스 변환은 다음과 같이 주어진다.[4]
대수적 특성
반복 불변성
램프 매핑의 모든 반복 기능은 다음과 같다.
- 증명:
참고 항목
참조
- ^ Brownlee, Jason (8 January 2019). "A Gentle Introduction to the Rectified Linear Unit (ReLU)". Machine Learning Mastery. Retrieved 8 April 2021.
- ^ Liu, Danqing (30 November 2017). "A Practical Guide to ReLU". Medium. Retrieved 8 April 2021.
- ^ Weisstein, Eric W. "Ramp Function". MathWorld.
- ^ "The Laplace Transform of Functions". lpsa.swarthmore.edu. Retrieved 2019-04-05.