정보 출처(수학)

수학에서 정보원은 유한한 알파벳 Ⅱ에 걸친 변수의 연속이며, 고정된 분포를 가지고 있다.

정보 출처의 불확실성 또는 엔트로피 비율은 다음과 같이 정의된다.

${\displaystyle H\{\mathbf {X} \}=\lim _{n}H(X_{n} X_{0}},X_{1},\dots,X_{n-1}}}}}}$

어디에

${\displaystyle X_{0},X_{1},\dots,X_{n}}$

정보 출처를 정의하는 랜덤 변수의 순서 및

${\displaystyle H(X_{n}X_{0},X_{1},\dots,X_{n-1}}}$

무작위 변수 시퀀스의 조건부 정보 엔트로피다.동등하게, 사람은

${\displaystyle H\{\mathbf {X} \}=\lim _{n\to \inflt }{\frac {H(X_{0},X_{1},\dots,X_{n-1},X_{n}}}}}{n+1}.}$

참고 항목

• 마르코프 정보원
• 점증적 설비 특성

참조

• 로버트 B.애쉬, 정보 이론 (1965) 도버 출판물 ISBN0-486-66521-6

이 통계 관련 기사는 단조롭다.위키피디아를 확장하여 도울 수 있다.

• v
• t