הצגת המקור של הדף "הסתברות/חזאים"

{{הסתברות}}

==חזאי אופטימלי==
{{הגדרה|שם=חזאי אופטימלי|תוכן=החזאי האופטימלי של Y בהינתן X במובן מינימום שגיאה ריבועית הוא פונקציה כלשהי h, כך שלכל פונקציה אחרת g מתקיים: <math>\ \mathbb{E}(Y-h(x))^2\le \mathbb{E}(Y-g(X))^2</math>.}}
חזאי (נקרא גם: משערך) הוא פונקציה אשר נותנת הערכה למשתנה מקרי כלשהו, בהינתן תוצאת דגימה של משתנה מקרי אחר. במילים אחרות: אם X הוא המצוי ו-Y הוא הרצוי אז:
{{משפט|שם=חזאי אופטימלי|תוכן=החזאי האופטימלי של Y בהינתן X מסומן על ידי <math>\ h(X)= \hat{Y}</math> והוא שווה לתוחלת המותנה של Y בהינתן X: <math>\ h(X)= \hat{Y}= \mathbb{E}(Y|X)</math>.<br />'''כללית:''' אם X הוא ו"א n מימדי, ואנו רוצים למצוא על פיו את הערך הטוב ביותר עבור Y, אז <math>\ \hat{Y}=h(\vec{X})</math>.}}

כלומר אנו רוצים למצוא פונציה h כזו, כך שיתקיים: <math>\ \mathbb{E}(Y-h(X)|X)=0</math>.

===תכונות===
* אם X,Y בלתי תלויים, אז <math>\ \hat{Y}=\mathbb{E}Y</math>.

===דוגמאות===
* יהי X מ"מ חיובי, ו-Y מפולג באחידות בין 0 ל-X. כאן <math>\ \hat{Y}={X\over 2}</math> כי התוחלת של Y בהינתן X היא הניחוש הטוב ביותר (הקרוב ביותר) עבור ערכו של Y.

==חזאי לינארי אופטימלי==
כשמו כן הוא: החזאי הלינארי הוא פונקציה של קו ישר כזה, שיתן את הערך הטוב ביותר עבור מ"מ כלשהו, בהינתן מ"מ אחר. ברוב המקרים החזאי האופטימלי טוב יותר מהחזאי הלינארי האופטימלי, אך הוא גם קשה יותר לחישוב. נוח במיוחד להשתמש בחזאי הלינארי כאשר לא יודעים את חוק ההסתברות אלא רק את שני המומנטים הראשונים.
{{הגדרה|שם=חזאי לינארי אופטימלי|תוכן=החזאי הלינארי האופטימלי של Y בהינתן X הוא פונקציה לינארית כלשהי <math>\ \hat{Y}_L= h(X)= aX+b</math>, כך שלכל פונקציה לינארית אחרת g מתקיים: <math>\ \mathbb{E}(Y-h(x))^2\le \mathbb{E}(Y-g(X))^2</math>.}}

{{משפט|שם=חזאי לינארי אופטימלי|תוכן=החזאי הלינארי האופטימלי של Y בהינתן X הוא: <math>\ \hat{Y}_L= {\sigma_{X,Y}\over\sigma_X^2}(X-\mu_X)+ \mu_Y</math>, או בצורה הסימטרית: <math>\ {\hat{Y}_L- \mu_Y\over \sigma_Y}= \rho_{X,Y} {X-\mu_X\over \sigma_X}</math>.}}

===הוכחה===
אנו מחפשים את ערכו של הביטוי <math>\ \min_{a,b} \mathbb{E}(Y-aX-b)^2</math>. לכן נשווה את הנגזרת שלו לפי a ולפי b לאפס:
:<math>\ \mathbb{E}(Y-aX-b)^2= \mathbb{E}Y^2+a^2\mathbb{E}X^2+b^2-2a\mathbb{E}XY-2b\mathbb{E}Y+ 2ab\mathbb{E}X</math>
:<math>\ \Rightarrow\quad \begin{cases} {\partial\over\partial a}= 2a\mathbb{E}X^2-2\mathbb{E}XY+2b\mathbb{E}X=0 \\ {\partial\over\partial b}= 2b-2\mathbb{E}Y+2a\mathbb{E}X=0 \end{cases} \quad\Rightarrow\quad a={\sigma_{X,Y}\over \sigma_X^2}\ ,\ b=\mu_Y-{\sigma_{X,Y}\over \sigma_X^2}\mu_X</math>

===דוגמאות===
{{להשלים}}
[[קטגוריה:הסתברות (לאוניברסיטה)|ח]]
{{הסתברות|מוגבל}}