모수 추론 문제는 주어진 분포 법칙을 가지고 있는 임의변수 X로부터 관측된샘플{ ,… ,을(를) 바탕으로 정확하게 이 매개변수의 적절한 값 계산으로 구성된다.알 수 없는 매개변수로 교체해도 다음 계산에서 큰 손상이 발생하지 않는 경우 추정치가 적합하다.알고리즘 추론에서 추정치의 적합성은 관찰된 샘플과의 적합성 측면에서 읽힌다.
다시 말해, 모수 적합성은 모수가 참조하는 랜덤 변수의 확률 분포에서 도출되는 확률 측정값이다.이러한 방식으로 관찰된 샘플과 호환되는 임의 파라미터 parameter을 식별한다.샘플링 메커니즘=( , ) 에 따라 이 작업의 근거는 Z 시드 분배 법칙을 사용하여 주어진 θ에 대한 X 분배 법칙과 X 표본을 모두 결정하는 데 있다.따라서 표본 공간의 도메인을 relate 지원의 하위 집합과 연관시킬 수 있다면 전자로부터 후자의 분포를 직접 도출할 수 있다.좀 더 추상적인 용어로, 우리는 매개변수의 속성으로 표본의 특성을 비틀어 말하고, 전자를 이 교환에 적합한 통계로 식별하기 때문에, 알려지지 않은 매개변수의 양호한 행동을 나타낸다.운용목표는 누적분포함수 (의 분석표시를 작성하는 것이다.통계S의 관측값 s에 비추어 X 매개변수가 정확히 θ일 때 S 분포법의 함수로서
방법
Given a sampling mechanism for the random variable X, we model to be equal to 관련 통계 = ( ,…, ) 에 초점을 맞추면 마스터 방정식이 ▼에 대해 읽힌다.
s가 매개 변수 w.r.t의 적절한 행동 통계인 경우, s와 and 사이에 각 = { ,에 대해 단조로운 관계가 존재한다고 확신한다.또한 θ은 주어진 s에 Z 의 함수로서, 마스터 방정식은 다른 (숨겨진) 파라미터와 독립적이고 실현 가능한 솔루션을 제공하기 때문에 랜덤 변수라는 것을 확신한다.[1]
The direction of the monotony determines for any a relation between events of the type or vice versa, where s\displaystyle'}이ℓ 을 θ′는 sdiscrete을 소중히 여기를 가정하는 경우에{\displaystyle \theta의}. 첫번째 관계 변화 s≥ s′→ θ ≥ θ′→ s≥ s′+ℓ{\displaystyles\geq s'\rightarrow\theta\geq\theta '\rightarrow s\geq s'+\ell}과 대표 방정식을;0{\displaystyle \ell<>를 사용하여 0일에 계산된다.}은반대 단조로운 추세를 보이는 단조로운 추세를 가진 단조로운 곡물의 크기모든 씨앗에 대해 이러한 관계를 재개하는 것은, 지속적으로 우리는 다음 중 하나를 가지고 있다.
또는
의 경우 F S= s ( ) 디스플레이 F_{\은(는) 0 > 때문에 거짓말을 한다그 논리적인 모든 경쟁은 뒤틀리는 주장이라고 불린다.그것을 실행하는 절차는 다음과 같다.
알고리즘.
비틀림 인수를 통한 매개변수 분포 법칙 생성
임의 변수에서 샘플{ 1,… ,x 이(가) 지정되었으며 매개 변수를 알 수 없음,
매개 변수 θ과 그 소멸화 에 대해 잘 동작하는 통계 S를 식별한다if {\
단조로움 대 단조로움;
계산 ( ) ( 1( F = ( s), 2( F = ( )) 여기서 다음을 수행하십시오.
s가 연속 1= 2 }}:
S가 별개의 경우
q( S( )=( F ( -) 1
q( F ( )=( S( -) s
)= - S }=1-F_{Ss가 θ 및 S)= = 1, 2 {\에 대한 θ과 함께 s가 증가하지 않는 경우S
비고
일부 복잡성은 공동 불평등 관리에서 발생하지만, 매개변수가 벡터일 때 논리가 바뀌지 않는다.대신에 매개변수의 벡터 처리의 어려움은 매개변수의 기준 분포에 대한 피셔 접근방식의 아킬레스건이 되는 것으로 증명되었다(Fisher 1935).또한 같은 목적을 위해 고안된 프레이저의 건설적 확률(Fraser 1966)은 이 점을 완전히 다루지 않는다.
예
specification 및 k 변수에 대한 값이 필요한 규격의 감마 분포에서 된 x 의 경우, 아래 절차를 따라 비틀림 인수를 명시할 수 있다.이러한 매개변수의 의미를 고려할 때 우리는 다음과 같이 알고 있다.
서 = i= λ= x i이는 공동 누적 분포 함수로 이어진다.
Using the first factorization and replacing with in order to have a distribution of that is independent of , we have
with m denoting the sample size, and are the observed statistics (hence with indices denoted by capital letters), the incomplete gamma function and the 적절한 매개변수(예: 모멘트 방법을 통해 추정)를 k와 m 함수로 하여 감마 분포로 다시 근사하게 추정할 수 있는 Fox의 H 함수.
감마 랜덤 변수의 매개변수, ) 의 합동 확률 밀도 함수.
감마 랜덤 변수의 모수 K의 주변 누적 분포 함수.
With a sample size and , you may find the joint p.d.f. of the Gamma parameters K and on the left.K의 한계 분포는 오른쪽 그림에 보고되어 있다.
메모들
^기본적으로 대문자(U, X 등)는 랜덤 변수와 작은 문자(u, x)의 해당 실현을 나타낸다.
Fraser, D. A. S. (1966). "Structural probability and generalization". Biometrika. 53 (1/2): 1–9. doi:10.2307/2334048. JSTOR2334048.
Apolloni, B; Malchiodi, D.; Gaito, S. (2006). Algorithmic Inference in Machine Learning. International Series on Advanced Intelligence. Vol. 5 (2nd ed.). Adelaide: Magill. Advanced Knowledge International