Tilastollinen päättely II, kevät 2017 Harjoitus 2A

Samankaltaiset tiedostot
l (φ; y) = l(θ(φ); y) Toinen derivaatta saadaan tulon derivaatan laskusäännöllä Uudelleenparametroidun mallin Fisherin informaatio on

Tilastollinen päättömyys, kevät 2017 Harjoitus 6B

2. Uskottavuus ja informaatio

HY / Matematiikan ja tilastotieteen laitos Tilastollinen päättely II, kevät Ratkaisuehdotuksia

Tilastollinen päättely II, kevät 2017 Harjoitus 1A

3.6 Su-estimaattorien asymptotiikka

Tässä luvussa mietimme, kuinka paljon aineistossa on tarpeellista tietoa Sivuamme kysymyksiä:

2. Uskottavuus ja informaatio

Maximum likelihood-estimointi Alkeet

MS-A0502 Todennäköisyyslaskennan ja tilastotieteen peruskurssi

1. Tilastollinen malli??

HY, MTO / Matemaattisten tieteiden kandiohjelma Tilastollinen päättely II, kevät 2018 Harjoitus 8B Ratkaisuehdotuksia.

3 Yleistä estimointiteoriaa. Olemme perehtuneet jo piste-estimointiin su-estimoinnin kautta Tässä luvussa tarkastellaan piste-estimointiin yleisemmin

9. laskuharjoituskierros, vko 12-13, ratkaisut

Tehtäväsarja I Tehtävät 1-5 perustuvat monisteen kappaleisiin ja tehtävä 6 kappaleeseen 2.8.

2 exp( 2u), kun u > 0 f U (u) = v = 3 + u 3v + uv = u. f V (v) dv = f U (u) du du f V (v) = f U (u) dv = f U (h(v)) h (v) = f U 1 v (1 v) 2

Sovellettu todennäköisyyslaskenta B

Tilastollinen päättely II, kevät 2017 Harjoitus 3B

MS-A0501 Todennäköisyyslaskennan ja tilastotieteen peruskurssi

Jos nyt on saatu havaintoarvot Ü ½ Ü Ò niin suurimman uskottavuuden

x 4 e 2x dx Γ(r) = x r 1 e x dx (1)

Satunnaismuuttujien muunnokset ja niiden jakaumat

Odotusarvo. Odotusarvon ominaisuuksia Satunnaismuuttujien ominaisuuksia 61

Todennäköisyyslaskenta IIa, syys lokakuu 2019 / Hytönen 3. laskuharjoitus, ratkaisuehdotukset

,ܾ jaü on annettu niin voidaan hakea funktion

Johdatus todennäköisyyslaskentaan Satunnaismuuttujien muunnokset ja niiden jakaumat. TKK (c) Ilkka Mellin (2004) 1

MS-A0501 Todennäköisyyslaskennan ja tilastotieteen peruskurssi

Sovellettu todennäköisyyslaskenta B

5.7 Uskottavuusfunktioon perustuvia testejä II

Ilkka Mellin Tilastolliset menetelmät Osa 2: Otokset, otosjakaumat ja estimointi Estimointi

3 Yleistä estimointiteoriaa. Olemme perehtuneet jo piste-estimointiin su-estimoinnin kautta Tässä luvussa tarkastellaan piste-estimointiin yleisemmin

Gripenberg. MS-A0502 Todennäköisyyslaskennan ja tilastotieteen peruskurssi Tentti ja välikoeuusinta

Uskottavuuden ominaisuuksia

Sallitut apuvälineet: MAOL-taulukot, kirjoitusvälineet, laskin sekä itse laadittu, A4-kokoinen lunttilappu. f(x, y) = k x y, kun 0 < y < x < 1,

Osa 2: Otokset, otosjakaumat ja estimointi

1. Jatketaan luentojen esimerkkiä 8.3. Oletetaan kuten esimerkissä X Y Bin(Y, θ) Y Poi(λ) λ y. f X (x) (λθ)x

HY, MTO / Matemaattisten tieteiden kandiohjelma Todennäköisyyslaskenta IIa, syksy 2018 Harjoitus 3 Ratkaisuehdotuksia.

P(X = x T (X ) = t, θ) = p(x = x T (X ) = t) ei riipu tuntemattomasta θ:sta. Silloin uskottavuusfunktio faktorisoituu

Estimointi. Estimointi. Estimointi: Mitä opimme? 2/4. Estimointi: Mitä opimme? 1/4. Estimointi: Mitä opimme? 3/4. Estimointi: Mitä opimme?

Kertausluento. Tilastollinen päättely II - 2. kurssikoe

Matematiikan tukikurssi, kurssikerta 3

Tilastollisen päättelyn kurssi

Estimointi. Vilkkumaa / Kuusinen 1

Kertausluento. Tilastollinen päättely II - 1. kurssikoe

Johdatus tilastotieteeseen Estimointi. TKK (c) Ilkka Mellin (2005) 1

Mat Sovellettu todennäköisyyslasku A

1. Kuusisivuista noppaa heitetään, kunnes saadaan silmäluku 5 tai 6. Olkoon X niiden heittojen lukumäärä, joilla tuli 1, 2, 3 tai 4.

0 kun x < 0, 1/3 kun 0 x < 1/4, 7/11 kun 1/4 x < 6/7, 1 kun x 1, 1 kun x 6/7,

Poisson-prosessien ominaisuuksia ja esimerkkilaskuja

Differentiaaliyhtälöt I, kevät 2017 Harjoitus 3

Matematiikan tukikurssi

Mat Tilastollisen analyysin perusteet, kevät 2007

Sovellettu todennäköisyyslaskenta B

Tilastomatematiikka Kevät 2008

Sovellettu todennäköisyyslaskenta B

η i (θ)t i (x) A(θ) + c(x),

k-kantaisen eksponenttifunktion ominaisuuksia

MS-A0501 Todennäköisyyslaskennan ja tilastotieteen peruskurssi

Vastaus: 10. Kertausharjoituksia. 1. Lukujonot lim = lim n + = = n n. Vastaus: suppenee raja-arvona Vastaus:

Matematiikan tukikurssi

MS-A0502 Todennäköisyyslaskennan ja tilastotieteen peruskurssi

Matematiikan tukikurssi

MATEMATIIKAN JA TILASTOTIETEEN LAITOS Analyysi I Harjoitus alkavalle viikolle Ratkaisuehdotuksia (7 sivua) (S.M)

Ilkka Mellin Todennäköisyyslaskenta. Osa 2: Satunnaismuuttujat ja todennäköisyysjakaumat. Momenttiemäfunktio ja karakteristinen funktio

Ratkaisuehdotus 2. kurssikoe

5 Hypoteesien testaaminen

Todennäköisyyslaskun kertaus. Vilkkumaa / Kuusinen 1

MS-A0501 Todennäköisyyslaskennan ja tilastotieteen peruskurssi

Tilastollinen päättömyys, kevät 2017 Harjoitus 5b

Normaalijakaumasta johdettuja jakaumia

Matemaattisten tieteiden kandiohjelma / MTL Todennäköisyyslaskenta IIb Kurssikoe (kesto 2h 30 min)

1.1. YHDISTETTY FUNKTIO

Pelaisitko seuraavaa peliä?

Yhdistetty funktio. Älä sekoita arvo- eli kuvajoukkoa maalijoukkoon! (wikipedian ongelma!)

Tilastollinen testaus. Vilkkumaa / Kuusinen 1

MATP153 Approbatur 1B Ohjaus 2 Keskiviikko torstai

2 Funktion derivaatta

Ratkaisuehdotus 2. kurssikokeeseen

Harjoitus 2: Matlab - Statistical Toolbox

Tilastollinen päättömyys, kevät 2017 Harjoitus 6A

Koska ovat negatiiviset. Keskihajontoja ei pystytä laskemaan mutta pätee ¾.

Kertaus. x x x. K1. a) b) x 5 x 6 = x 5 6 = x 1 = 1 x, x 0. K2. a) a a a a, a > 0

Sovellettu todennäköisyyslaskenta B

Aalto-yliopisto, Matematiikan ja systeemianalyysin laitos /Malmivuori MS-A0502 Todennäköisyyslaskennan ja tilastotieteen peruskurssi,

Lisää Diskreettejä jakaumia Lisää Jatkuvia jakaumia Normaalijakaumasta johdettuja jakaumia

Tilastollisen analyysin perusteet Luento 1: Lokaatio ja hajonta

Sovellettu todennäköisyyslaskenta B

P (X B) = f X (x)dx. xf X (x)dx. g(x)f X (x)dx.

Matematiikan tukikurssi

6.1.2 Luottamusjoukon määritelmä

4.0.2 Kuinka hyvä ennuste on?

Johdatus tn-laskentaan torstai

MS-A0501 Todennäköisyyslaskennan ja tilastotieteen peruskurssi

Oletetaan, että virhetermit eivät korreloi toistensa eikä faktorin f kanssa. Toisin sanoen

5. laskuharjoituskierros, vko 8, ratkaisut

Harjoitus 7: NCSS - Tilastollinen analyysi

HY, MTL / Matemaattisten tieteiden kandiohjelma Todennäköisyyslaskenta IIb, syksy 2017 Harjoitus 1 Ratkaisuehdotuksia

8.1 Ehdolliset jakaumat

Sovellettu todennäköisyyslaskenta B

0 3 y4 dy = 3 y. 15x 2 ydx = 15. f Y (y) = 5y 4 1{0 y 1}.

Transkriptio:

Tilastollinen päättely II, kevät 07 Harjoitus A Heikki Korpela 3. tammikuuta 07 Tehtävä. (Monisteen tehtävä.3 Olkoot Y,..., Y n Exp(λ. Kirjoita vastaava tilastollisen mallin lauseke (ytf. Muodosta sitten aineistoa y (y,..., y n vastaavat uskottavuus- ja loguskottavuusfunktio sekä määritä parametrin λ suurimman uskottavuuden estimaatti ˆλ. Vastaus: Parametriavaruus on (0,. Kiinnitetään n N +. Riippumattomuuden nojalla. f Y (y; λ λ exp( λy i λ n exp( λy i λ n exp( λny, josta L(λ; y λ n exp( λny l(λ; y log (λ n exp( λny log (λ n + log (exp( λny n log λ nλy l (λ n λ ny λ y > 0 λ > y 0 < λ < y ˆλ y y Tehtävä. (Monisteen tehtävä. Olkoot Y,..., Y n Exp(λ. Laske havaittu informaatio j(ˆλ; y, Fisherin informaatio i(λ ja odotusarvo E θ ( l (λ; Y..

Vastaus: j(λ l (λ nλ j(ˆλ l (ˆλ nˆλ n ( y ny i(λ E Y;λ [nλ nλ nλ vakio, kun n, λ kiinnitetty E λ λ, var λ λ var[l (λ; Y E λ (l (λ; Y [E λ (l (λ; Y E λ (l (λ; Y var[l (λ; Y + [E λ (l (λ; Y eksponenttijakauma varianssin laskukaava i(λ + [E λ (l (λ; Y i(λ var[l (λ; Y i(λ + [ Eλ λ ny l (λ; Y n λ ny i(λ + λ ney n, nλ vakioita, kun n, λ kiinnitetty i(λ + λ n E λ λ λ i(λ nλ E λ (l (λ; Y var[l (λ; Y + [E λ (l (λ; Y var λ ny + 0 vaihtoehtoinen tapa [E λ(l (λ; Y 0 kuten yllä var λ ny l (λ; Y n λ ny var [ ny var(c + ax var(ax, kun c n λ vakio var Y var(ax a var(x, kun a vakio var ny var nλ λ X, Z var(x + Z var X + var Z var λ λ Tehtävä 3. (Monisteen tehtävä.3 Tarkastellaan mallia, jossa havaintoja vastaavat satunnaismuuttujat Y,..., Y n ovat riippumattomat. Mallin parametri on yksiulotteinen θ. Totea, että mallin havaittu informaatio ja Fisherin informaatio ovat j(θ; y j (θ; y + + j n (θ; y n ja i(θ i (θ + + i n (θ, 3. jossa j k (θ; y k on pelkästään yhteen havaintoon y k perustuva havaittu informaatio ja i k (θ E(j k (θ; Y k on vastaava Fisherin informaatio. Miten tulkitset tämän tuloksen?

Vastaus: Muodostetaan yhteistiheysfunktio riippumattomuutta käyttäen: f Y (y; θ f Yi (y i ; θ, josta saadaan uskottavuus- ja log-uskottavuusfunktiot: L(θ; y f Yi (y i ; θ l(θ; y log f Yi (y i ; θ log f Yi (y i ; θ log l i (θ; y i Voidaan olettaa, että malli on siinä mielessä järkevästi määritelty, että tiheysfunktio saa nollaa suurempia arvoja vain mahdollisilla tapahtumilla. Toisin sanoen millään havaitulla aineiston yksilöllä y i ei f Yi (y i ; θ saa arvoa nolla. (Jos saataisiin tällaisia havaintoja, olisi mallia varmaankin syytä muokata! Lisäksi, jotta voimme mielekkäästi puhua havaitusta ja Fisherin informaatiosta (määritelmä.4., on oletettava, että yhteistiheysfunktio on kahdesti derivoituva. Alla olevasta nähdään, että tämä pätee jos ja vain jos kunkin satunnaismuuttujan tiheysfunktio on kahdesti derivoituva. Koska lisäksi derivaatta on lineaarinen operaattori, saadaan l (θ; y l (θ; y f Y i (y i ; θ f Yi (y i ; θ f (y i ; θf Yi (y i ; θ f (y i ; θ f Yi (y i ; θ j i (θ; y Edelleen, koska myös odotusarvo on lineaarinen operaattori, [ E [ l f Y (θ; Y E i ( ; θf Yi ( ; θ f Y i ( ; θ f Yi ( ; θ E f ( ; θf Yi ( ; θ f ( ; θ f Yi ( ; θ i i (θ Tulokselle voidaan antaa esimerkiksi seuraava tulkinta: jos satunnaismuuttujat voidaan olettaa riippumattomiksi, yhden satunnaismuuttujan lisääminen malliin (siis lisäaineiston hankkiminen ja mahdollisesti mallin spesifioiminen tuottaa lisäinformaatiota (rajahyötyä tismalleen kyseisen satunnaismuuttujan tuoman lisäinformaation verran. Jos mallin laajentamisesta saatava hyöty voidaan kvantifioida samassa mitassa kuin siitä koituva kustannus, voidaan optimaalinen koeasetelma ratkaista yhtälöstä MC MR, missä MC on rajakustannus ja MR on rajahyöty. Tehtävä 4. Olkoot Y,..., Y n. Kukin noudattaa jakaumaa, jonka tiheysfunktio on f(y; θ θ(θ + y θ ( y, kun 0 < y < ja nolla muutoin. Lisäksi θ > 0. Kyseessä on itse asiassa TN-kurssilta tuttu betajakauma Beta(θ,. a Määritä suurimman uskottavuuden estimaatti parametrille θ. 3

b Laske havaittu informaatio j(θ; y. 4. Vastaus: c Laske Fisherin informaatio i(θ. a Riippumattomuuden nojalla f Y (y; θ l(θ; y log θ(θ + y θ i ( y i θ(θ + y θ i ( y i log ( θ(θ + y θ i ( y i log θ + log(θ + + (θ log y i + log( y i n(log θ + log(θ + + (θ log y i + log( y i, } {{ } nz } {{ } c(y Tästä θ + + θ + z(θ(θ + θ(θ + l (θ; y n θ + n θ + + nz θ + θ + + z > 0 > 0 zθ + (z + θ + > 0 θ(θ + zθ + (z + θ + > 0, θ > 0 Lisäksi huomioimalla jakaumaoletus saadaan logaritmien keskiarvolle negatiivinen etumerkki, eli osoittajaa kuvaava paraabeli aukeaa alaspäin: i : 0 < y i < log y i < 0 z n log y i < 0 Koska lisäksi derivaatan arvo lähestyttäessä nollaa oikealta puolelta kasvaa rajatta ( rajaarvo on plus ääretön, n θ + n θ + + θ 0 + nz n + n n z, voidaan päätellä, että SU-estimaatti löytyy osoittajan oikeanpuolimmaisesta nollakohdasta. Toinen vaihtoehto olisi tarkistaa toisen nollakohdan merkki: z + 4 > 4 z + 4 > 0 z + 4 + z > 0 z + 4 z > 0 z < 0 z z z + 4 z < 0 4

Siis l (θ; y > 0 0 < θ < (z + (z + 4z 0 < θ < z z + 4 0 < θ < ( z z 4 ( z + z + 4 0 < θ < z 4z + 4 z 4 ( z + z + 4 0 < θ < z + 4 z ˆθ θ > 0 Vaihtoehtoinen esitys SU-estimaatille: ˆθ z z + 4 z z z + 4 z z + z + 4 z ( + 4z + z z z b l (θ; y n θ n (θ + j(θ; y l (θ; y n θ + n (θ + c i(θ E θ [j(θ; y E θ θ + n (θ + ( n θ + (θ + vakion odotusarvo Jos hetkeksi ajatellaan informaatiota n:n funktiona, termi ( θ + (θ+ kuvaa vakioista rajahyötyä, joka saadaan kasvattamalla n:ää, kun θ on kiinteä. Havaitaan, että jos θ on nollan ja ykkösen välissä, informaatio kasvaa melko nopeasti n:n kasvaessa (ensimmäinen termi on ykköstä suurempi. Vastaavasti, mitä suurempi θ on, sitä vähemmän lisäinformaatiota saadaan otoskokoa kasvattamalla. 5