stohasticko modeliranje

Embed Size (px)

Citation preview

STOHASTICKOMODELIRANJESADRZAJ1 Principiaktuarskogmodeliranja 8str.2 Stohastickiprocesi 13str.3 Markovljevilanci 12str.4 Markovljeviprocesiskokova 18str.5 Analizamodelavremenskihnizova 49str.6 Brownovogibanjeidifuzije 23str.7 MonteCarlosimulacijastohastickihprocesa 16str.FacultyandInstituteofActuarieszahvaljujesljedecimosobamakojesupo-mogleusastavljanjuovogmaterijala:EmmanuelBuetJohnCaslinAnatolyPatrickPhelimBoyleBrucePorteousJimTindaleHowardWatersDavidWilkie2000 Principiaktuarskogmodeliranja Predmet103POGLAVLJE1-PRINCIPIAKTUARSKOGMODELIRANJANastavniciljevi: (i)Opisatiprincipeaktuarskogmodeliranja.1. Opisatizastoikakosekoristemodeli.2. Objasnitiprednostiiogranicenjamodeliranja.3. Objasniti relativnu prikladnost deterministickih i stohastickih modela.4. Opcenitoopisati kakoodluciti dali jemodel prikladanzaodredenuprimjenu.5. Objasnitirazlikuizmedukratkorocnihidugorocnihsvojstavamodela,tekakotomozebiti relevantnouodluci dali jemodel prikladanzaodredenuprimjenu.6. Opcenito opisati kako analizirati moguce rezultate modela, te objasnitizastojetorelevantnouizborumodela.7. Opisatiprocestestiranjaosjetljivostinapretpostavkeiobjasnitizastojetovazandioprocesamodeliranja.8. Objasniti cimbenikekojetrebauzeti urazmatranjepri priopcavanjurezultatakojislijedeprimjenommodela.1 Modeli1.1 ZastosekoristemodeliModel je imitacija sustava ili procesa stvarnog svijeta. Mogu se razviti mod-eli mnogihaktivnosti, kaonaprimjer, ekonomijazemlje, radljudskogsrca,buduci toknovcabrokerskogdistributivnogkanaladrustvazazivotnoosig-uranje. Pretpostavimodazelimopredvidjetiposljedicekojebi promjeneustvarnomsvijetuimalenaovatrimodela. Unekimslucajevimamoglobibiti previserizicno, ili preskupoili presporoispitati predlozenepromjeneustvarnom svijetu, cak i na osnovu uzorka. Ispitivanje promjena bez prednostimodela moglo bi imati ozbiljnih posljedica. Ekonomija bi mogla dospjeti u re-cesiju stajuci vladu sljedecih izbora, pacijent bi mogao umrijeti, a osigurateljc FacultyandInstituteofActuaries Poglavlje1,stranica1Predmet103 Principiaktuarskogmodeliranja 2000za zivotna osiguranja bi mogao snositi porast posla ali uz izuzetno nepovoljnepremije. Modelomogucavaispitivanjemogucihposljedica. Rezultatiprom-jenenekihulaznihparametaramoguseproucavatiprijedonosenjaodlukeoizvrsenjuplanovaustvarnomsvijetu.Da bi se izgradio model sustava ili procesa, potrebno je razviti skup matematickihi logickih pretpostavki o tome kako sustav radi. Kompleksnost modela odredenaje kompleksnoscu odnosa medu raznimparametrima modela. Na prim-jer, umodeliranjuosigurateljazazivotnaosiguranja, morajuserazmatratitockekao stosuzakonskapravila,oporezivanjeiuvjetiotkazivanja. Buducidogadaji koji utjecu na povrate od ulaganja, inaciju, nove poslove, nistavnaosiguranja,smrtnostitroskovetakoderutjecunateodnose.Dabi sestvoriomodel i odredili prikladni parametri, potrebnojerazma-trati podatkei donijeti sudorelevantnosti opazenihpodatakanabuduceokruzenje. Takvi podaci mogupotjecati odproslihopazanja, odtrenutnihopazanja(kao stojestopainacije)iliodocekivanjaodbuducihpromjena.Kadase smatradasuopazeni podaci prikladni zatvorbuparametarazaodabrani model, moguse upotrebljavati statisticke metode zaprilagodbupodataka.Prije okoncanja izbora modela i parametara, vazno je razmotriti ciljeve stvaranjai upotrebe modela. Na primjer, u mnogim slucajevima necemo htjeti kreiratinajtocniji model, nego umjesto toga kreirati model koji nece umanjiti troskoveilidrugerizikekojimogubitiukljuceni.1.2 KakoseupotrebljavajumodeliDok u stvarnosti proces modeliranja ne prati krutu shemu propisanih koraka,kod uvodenja predmeta korisno je zamisliti skup kljucnih koraka. U praksi seaktuari koji grade i koriste modele krecu naprijed natrag medu tim koracimaneprekidnopoboljsavajucimodel.Kljucnikoraciuprocesumodeliranjamoguseopisatikakoslijedi:1. Razviti dobro deniran skup ciljeva koje treba ispuniti procesom mod-eliranja.2. Planiratiprocesmodeliranja,tekako cemodelbitipotvrden.3. Prikupitiianaliziratipodatkepotrebnezamodel.4. Prvo denirati model uhvativsi bit sustava stvarnog svijeta. Pronjenjerazinedetaljnostimodelamozedociukasnijojfazi.Poglavlje1,stranica2 c FacultyandInstituteofActuaries2000 Principiaktuarskogmodeliranja Predmet1035. Ukljucitistrucnjakezasustavstvarnogsvijetakojegpokusavateimiti-rati, tako da dobijete povratnu informaciju o vrijednosti konceptualnogmodela.6. Odluciti oprikladnosti simulacijskogpaketaili opcegjezikazaimple-mentacijumodela. Odabrati statisticki pouzdangenerator slucajnihbrojevakoji cebitiadekvatanukontekstukompleksnostimodela.7. Napisatiracunalniprogramzamodel.8. Otkloniti greskeuprogramutakodajesigurnodaizvodi zamisljeneoperacijeizdenicijemodela.9. Testiratidalisurezultatimodelarazumni.10. Pregledati i pazljivorazmotriti dali jemodel odgovarajuci usvijetlumalihpromjenauulaznimparametrima.11. Analiziratirezultatemodela.12. Priopcitiidokumentiratirezultatemodela.2 Modeliranje-prednostiiogranicenjaJednaodnajvaznijihprednosti modeliranjauaktuarskomposluje dasesustavi s dugim vremenskim okvirima - kao na primjer djelovanje mirovinskogfonda-moguproucavatiukomprimiranomvremenu.Drugeprednostiukljucuju:kompleksni sustavi sastohastickimelementima, kaostojedjelatnostdrustva za zivotna osiguranja, ne mogu se dovoljno dobro opisati matematickimililogickimmodelomkojijesposobanproizvestirezultatekojiselakointerpretiraju; modeliranjesimulacijejejedannacinproucavanjadje-latnostidrustvaza zivotnoosiguranje;moguseusporediti razlicitebuducepolitikeili moguceakcijetakodasevidikojanajboljepristajepotrebamailiogranicenjimakorisnika;u modelu kompleksnog sustava obicno mozemo bolje kontrolirati eksper-imentalneuvjetei nataj nacinsmanjiti varijancuizlaznihrezultatamodelabezkvarenjanjihovihsrednjihvrijednosti.c FacultyandInstituteofActuaries Poglavlje1,stranica3Predmet103 Principiaktuarskogmodeliranja 2000Medutim, modelinisujednostavnorjesenjezasveaktuarskeprobleme-oniimajunedostatkekojejepotrebnorazumjeti prilikominterpretiranjaizlazaizmodelaipriopcavanjarezultataklijentima.Nedostaciukljucuju:Razvoj modelazahtijevaznacajnoulaganjevremenai strucnosti. Fi-nancijski troskovi razvoja mogu biti prilicno veliki uzevsi u obzir potrebuda se provjeri valjanost pretpostavki modela, racunalni kod, razumnostrezultatainacinkakoobicnimjezikominterpretiratirezultateciljanojpublici.Ustohastickommodelu, zadani skupulazasvakaobradadajesamoprocjene izlaznih rezultata modela. Stoga je nekoliko nezavisnih obradapotrebno za proucavanje izlaza za svaki dani skup ulaza. Opce je prav-ilo da su modeli korisniji za usporedbu rezultata ulaznih varijacija negozaoptimiziranjeizlaza.Modeli moguizgledati impresivnokadaseobradujunaracunalu, testogapostoji opasnost uspavljivanjauprevelikopovjerenjeumodel.Ako model nije prosao testove valjanosti i provjere, njegovi impre-sivni izlazi suslabazamjenazasposobnostimitiranjaodgovarajucegstvarnogsvijeta.Modeli se jako oslanjanju na ulazne podatke. Ako je kvaliteta podatakaslaba ili nevjerodostojna, tada je vjerojatno da ce i izlaz iz modela imatigresku.Vaznojedakorisnici modelarazumijumodel, tezakojepotrebesemoze sa sigurnoscu koristiti. Postoji opasnost od upotrebe modela kaocrnekutijezakojusepretpostavljadadajesamovaljanerezultate,bezrazmatranjadali jeupotrebamodelaodgovarajucazaodredeneulaznepodatkeiocekivaneizlaze.Nemoguce je u model ukljuciti sve buduce dogadaje. Na primjer, prom-jenauzakonodavstvumozerezultatemodelaucinitinevaljalim, alijujenemogucepredvidjetikadasemodelkonstruira.Interpretacijanekihizlaznihrezultatamodelamoze biti teska. Onimogubiti valjani samo relativno, a ne apsolutno. Na primjer, us-poredbarazinarizikaizlazapovezanihsrazlicitimulazima.Poglavlje1,stranica4 c FacultyandInstituteofActuaries2000 Principiaktuarskogmodeliranja Predmet1033 StohastickiideterministickimodeliAkosezeli predstaviti stvarnostcimmogucetocnije, model trebaimitiratislucajnu prirodu varijabli. Stohasticki model je onaj koji prepoznaje slucajnupriroduulaznihkomponenti. Model koji nesadrzi slucajnukomponentujepoprirodideterministicki.Izlazjeudeterministickommodeluodredencimsudeniraniulaziiodnosimedunjima. Suprotnotome, ustohastickommodeluizlaz je poprirodislucajan- istokaoi ulazi koji suslucajnevarijable. Izlazjesamosnimkaili procjenakarakteristikamodelazadani skupulaza. Dabi semoglako-ristitistatistickateorijakaopomocpriproucavanjuimplikacijaskupaulaza,potrebnojenekolikonezavisnihobradazasvakiskupulaza.Deterministicki model jestvarnosamospecijalan(pojednostavljen) slucajstohastickogmodela.Dalizelimokoristitideterministickiilistohastickimodelovisiotomedalismozainteresiranizarezultatejednogjedinogscenarija,ilizadistribucijurezultatamogucihscenarija. Deterministicki model dajerezultate rele-vantnihizracunazajedanscenarij; stohasticki model dajedistribucijerele-vantnih rezultata za distribuciju scenarija. Ako se stohasticki model ispitujekoristenjemMonteCarlosimulacije,totadadajezbirkuodgovarajuceve-likogbrojarazlicitihdeterministickihmodela, svakiodkojihsesmatrajed-nakovjerojatnim.Rezultati zadeterministicki model secestodobijudirektnimracunom, alijeponekadnuznokoristiti numerickeaproksimacije, ili dabi seintegriralefunkcije, ili dabi serijesilediferencijalnejednadzbe; primjeri modelagdjejeposljednjepotrebnodiskutiratceseupoglavlju4(Markovljevi procesiskokova).Ako je stohasticki model dovoljno prilagodljiv, moguce je izvesti zeljene rezul-tateanalitickimmetodama. Akojetomoguce,tomese cestodajeprednost,atakoder jecestoi brzenegoMonteCarlosimulacija; dobijusepreciznirezultatiilakosemoguanaliziratiposljedicepromjenaupretpostavkama.Mnogi prakticni problemi sumedutimprekomplicirani za lako koristenjeanalitickihmetoda, i Monte Carlosimulacijaje izuzetnojakametodazarjesavanjekompliciranihproblema. Ali akosei samodiomodelamozetre-tiratianaliticki,tomozeosiguratiprovjerusimulacijskemetode. Koristenjedeterministickog modela kod kompliciranog problema moguce je za racunanjeocekivane vrijednosti,ili medijana,gdje je distribucija oko tih sredisnjih vri-jednostiprocjenjenasimulacijom.c FacultyandInstituteofActuaries Poglavlje1,stranica5Predmet103 Principiaktuarskogmodeliranja 2000Takoderjepotrebnouzeti naznanjedasimulacijskemetodeopcenitodajustoako? odgovore;stosurezultati uzdanepretpostavke. Mnogojetezekoristiti simulaciju za dobivanje optimalnih rezultata; koji skup pretpostavkimaksimizirailiminimiziraneki zeljenirezultat.Daljnje ogranicenje je da preciznost rezultata ovisi o broju provedenih simu-lacija(vidisekciju6poglavlja7).3.1 DiskretnaineprekidnastanjaivrijemeStanjemodelajeskupvarijablikojeopisujusustavuodredenojtockiuvre-menu uzimajuci u obzir ciljeve naseg proucavanja. Moguce je predstaviti svebuducescenarijekaostanja, sto cebitirazvijenousljedecimpoglavljima.Diskretnastanjaimamokadavarijablepokazujudiskretnepromjeneuvre-menu. Na primjer,iz stanja ziv u mrtav,ili porast broja polica nekog osigu-ratelja.Neprekidnastanjaimamokadasevarijablemijenjajuneprekidnouodnosuna vrijeme. Na primjer, promjena vrijednosti investicija u realnom vremenu.Odluka da li koristiti diskretanili neprekidanmodel za odredeni sustavvisejevodenaciljevimaproucavanja, negodali jeprirodasamogsustavadiskretnailineprekidna. Modeltakodermozepromatrativrijemenadiskre-tan ili neprekidan nacin. To moze odrazavati cinjenicu da su izlazi iz modelapotrebni samo u diskretnim tockama u vremenu, ili moze biti da se zadovoljeciljevimodeliranja.UpraksisenemozekoristitiMonteCarlosimulacijazaproblemsneprekid-nimvremenom; potrebno je diskretizirati vremenski korak. To se mozenapraviti sa zeljenom preciznoscu, ali cim je veca preciznost, tim je dulje vri-jemeprocesiranjaodredenogmodela; tomoze, ali nemorabiti ogranicenjeupraksi. Takoder jepotrebnozapamtiti daseneki rezultati zamodelesneprekidnimvremenomi neprekidnimstanjima(diskutirani uPoglavlju6)nemoguuopcedobiti diskretnimsimulacijama. JedanprimjerjederivacijaBrownovoggibanjakojanijenigdjedenirana; moguseizracunati aproksi-macije konacnim diferencijama koje izgledaju kao derivacije, ali ne konvergi-rajukakosesmanjujevremenskikorak.Poglavlje1,stranica6 c FacultyandInstituteofActuaries2000 Principiaktuarskogmodeliranja Predmet1034 PrikladnostmodelaUustanovljavanjuprikladnostimodelazaodredenizadatakvaznojerazma-tratisljedece:Ciljevezadatkakojisemodelira.Valjanostmodelauodnosunasvrhuzakoju cesekoristiti.Valjanostpodatakakoji ceseupotrijebiti.Mogucegreskepovezanescinjenicomdamodelilikoristeniparametrinepredstavljajusavrsenostvarnusituacijukojasemodelira.Utjecajkorelacijameduslucajnimvarijablamakojetjerajumodel.Stupanjkorelacijameduraznimrezultatimaproizaslimizmodela.Sadasnjiznacajmodelanapisanihikoristenihuproslosti.Vjerodostojnostulaznihpodataka.Vjerodostojnostizlaznihrezultata.Opasnostilaznetocnosti.Lakocukojomsemozeobjasnitimodelipriopcitinjegovirezultati.5 KratkorocnaidugorocnasvojstvamodelaStabilnost odnosaukljucenihumodel nemoradugorocnobiti realisticna.Naprimjer, eksponencijalanrastmozeseciniti linearnimakosepromatrakroz kratak vremenski period. Ukoliko se promjene mogu predvidjeti tada ihsemozeukljucitiumodel,alicestotrebaprihvatitidasudugorocnimodelisumnjivi.Modeli supodeniciji pojednostavljeneverzijestvarnogsvijeta. Oni stogamoguzanemarivatiodnosevisegredakojikratkorocnoimajumaliznacaj,alisedugorocnomoguakumulirati.c FacultyandInstituteofActuaries Poglavlje1,stranica7Predmet103 Principiaktuarskogmodeliranja 20006 AnaliziranjeizlazaizmodelaBuduci dajesimulacijasamoprojekt statistickogskupljanjauzorakapot-pomognut racunalom, zaanalizuizlazaiz modelapotrebne sustatisticketehnike. Uovoj fazi procesamodeliranjaaktuar morabiti vrlopazljividobroprosudivati,buducidasuopazanjamedusobnokorelirana,adistribu-cijeuzastopnihopazanjasemijenjajukrozvrijeme. Potrebnojeizbjegavatibeskorisnoifatalnoprivlacnoiskusenjepretpostavkeonezavisnimijednakodistribuiranimopazanjima. Akopostoji sustavstvarnogsvijetauodnosunakoji semoguraditi usporedbe, potrebnojekoristiti Turingovtest. UTuringovomtestupitasestrucnjakezasustavrealnogsvijetadausporedenekoliko skupova podataka realnog svijeta i modela, bez da im se kaze koji sukoji. Ako ti strucnjaci vide razliku medu podacima realnog svijeta i modela,tehnikekojimatovidemoguseiskoristitizapoboljsanjemodela.7 TestiranjeosjetljivostiUkolikojetomoguce, vaznojetestirati razumnostizlaznihrezultatamod-elauodnosunastvarni svijet. Potrebnojeprovesti ispitivanjeosjetljivostiizlazasobziromnamalepromjeneuulazimaili njihovimstatistickimdis-tribucijama. Tada je potrebno ponovno ispitati prikladnost modela, posebnoako male promjene u ulazima ili njihovim statistickim distribucijama dovodedovelikihpromjenauizlazima. Nataj nacinmogucejeodrediti kljucneulazeiodnosenakojejepotrebnoobratitiposebnupaznjuudizajniranjuikoristenjumodela.Model trebatestirati dizajnirajuci odgovarajucesimulacijskeeksperimente.Modelsekroztajprocesmozeproniti.8 PriopcavanjerezultataZavrsni korak u procesu modeliranja je priopcavanje i dokumentiranje rezul-tatai samogmodeladrugima. Priopcavanje morauzeti uobzir znanje ipogledeciljanepublike. Ovdjejekljucnouvjeritiklijentadaprihvatimodelkao valjan i korisan alat u donosenju odluka. Vazno je da klijent u potpunostiuvidibilokojaogranicenjanaupotebuivaljanostmodela.Poglavlje1,stranica8 c FacultyandInstituteofActuaries2000 Stohastickiprocesi Predmet103POGLAVLJE2-STOHASTICKIPROCESINastavni ciljevi: (ii) Opisati opce principe stohastickihprocesai njihovuklasikacijunarazlicitetipove.1. Opcenitodeniratistohastickiproces.2. Klasiciratistohastickiprocesprematomedali:(a) imadiskretnoilineprekidnovrijeme(b) imaneprekidanilidiskretanprostorstanja(c) jemjesovitogtipaidatiprimjeresvakogtipaprocesa.3. Opisatimoguceprimjenemjesovitihprocesa.4. Objasniti sto znaci Markovljevo svojstvo u kontekstu stohastickog procesa.5. Opisati konceptemartingala, ltracijei vremenazaustavljanjaprim-jenjenihnastohastickeprocese.1 UvodStohasticki proces je model slucajne pojave ovisne o vremenu. Kaostoslucajna varijabla opisuje staticku slucajnu pojavu, tako je stohasticki procesfamilijaslucajnihvarijabli Xt, jednazasvakovrijemetunekomskupuJ.SkupSukojemslucajnevarijableXtpoprimajuvrijednostizoveseprostorstanjaprocesa.Prvi izborskojimsesuocavamouodabirustohastickogprocesakoji mod-elirastvarnizivotjepriroda(diskretnailineprekidna)vremenskogskupaJiprostorastanjaS.Primjer 1.1: Diskretanprostor stanjas diskretnimpromjenamavremenaDrustvozaosiguranjemotornihvozilagodisnjeispitujestatussvojihosig-uranika. Mogucesutri razinepopusta(0, 25%, 40%)ovisnoonesrecamavozaca. Uovomslucajuodgovarajuci prostor stanjajeS= {0, 25, 40}, avremenski skupje J = {0, 1, 2, . . . }gdje svaki interval predstavljajednugodinu. Ovajproblemproucavaseupoglavlju3.c FacultyandInstituteofActuaries Poglavlje2,stranica1Predmet103 Stohastickiprocesi 2000Primjer1.2: DiskretanprostorstanjasneprekidnimvremenskimpromjenamaDrustvo za zivotno osiguranje klasicira svoje osiguranike na Zdrave, Bolesneili Mrtve. Stogaje prostor stanjaS = {Z, B, M}. Kaovremenski skupprirodno je odabrati J= [0, ) buduci da se bolest ili smrt mogu pojaviti ubilo kojem trenutku. S druge strane, moglo bi biti dovoljno brojati vrijeme udanima, te stoga koristiti J= {0, 1, 2, . . . }. Taj problem se detaljno proucavaupoglavlju4.Primjer1.3: NeprekidanprostorstanjaOdstetni zahtjevi nepredvidivih iznosa stizu do osigurateljnog drustva u nepred-vidivavremena. Drustvotrebapredvidjeti kumulativnustetukroz[0, t] zaprocjenurizikadanecemoci ispuniti svojeobaveze. Zaovajproblemstan-dardni jeobicaj koristiti [0, )i zaSi zaJ(vidi 3.8uovompoglavljuipoglavlje6). Medutim,idrugiizborisumoguci: stetenastajuujedinicamaodjednelipei ustvari necinekontinuum. Slicno, vrijemenastankasteteunutarjednogdanajebeznacajno,takodaje {0, 1, 2, . . . }mogucizborzaJi/iliS.Primjer1.4: ProcesimjesovitogtipaCinjenicadasestohastickiprocesdogadauneprekidnomvremenuneznacidanemozepromijeniti vrijednost uunaprijedodredenimdiskretnimvre-menskimtrenucima. Takviprocesizovuseprocesimamjesovitogtipa. Kaoprimjer razmotrimo mirovinsku shemu u kojoj clanovi imaju opciju umirovl-jenjanasvaki rodendanizmedudobi 60i 65. Broj ljudi koji ceodabratiprijevremenoumirovljenjenemozesetocnopredvidjeti, kaoniti vrijemeibroj smrti aktivnihclanova. Stogase broj prinosnikamirovinskoj shemimozemodelirati kaostohasticki procesmjesovitogtipasprostoromstanjaS= {1, 2, 3, . . . }ivremenskimintervalomJ=[0, ). Smanjenjaslucajnihiznosadogoditceseuksnimtrenucimazbogprijevremenogumirovljenja,kaoiuslucajnimtrenucimazbogsmrti.Upravilu,mozeserecidasustohastickiprocesisneprekidnimvremenomineprekidnim prostorom stanja, iako konceptualno tezi nego diskretni procesi,u krajnjoj mjeri eksibilniji (na isti nacin kao sto je jednostavnije izracunatiintegralnegosumiratibeskonacnired).Poglavlje2,stranica2 c FacultyandInstituteofActuaries2000 Stohastickiprocesi Predmet1032 Deniranjestohastickogprocesa2.1 PutoviNakonodabiravremenskogskupai skupastanja, preostajedenirati i samproces {Xt, t J}. To znaci specicirati zajednicku distribuciju od Xt1, Xt2,. . . , Xtnzasvet1, t2, . . . , tnuJisveprirodnebrojeven. Tose ciniuzasnimzadatkom. U praksi, to se skoro uvijek radi indirektno, pomocu jednostavnogprijelaznogpostupka(vidi2.3isekciju3).Zajednickarealizacijaslucajnihvarijabli Xtzasve t uJ zove se put (ilitrajektorija, engl. samplepath)procesa. TojefunkcijaizJuS. Svojstvaputova procesa moraju odgovarati onima uocenim u stvarnom zivotu (baremustatistickomsmislu). Utomslucajumodelsesmatrauspjesnimimozesekoristiti za predvidanje. Bitno je da model reproducira baremsiroka obiljezjaproblemaiz realnogzivota. Najvaznijaodtihrazmatrajuse usljedecimpodsekcijama.2.2 StacionarnostStohasticki proces je stacionaran ako Xt1, Xt2, . . . , Xtn i Xt+t1, Xt+t2, . . . , Xt+tnimaju jednake distribucije za sve t, t1, t2, . . . , tnu Ji za sve prirodne brojeven. Toznaci dastatistickasvojstvaprocesaostajunepromijenjenakakovri-jemeprolazi. Uprimjeru1.2sigurnonebismokoristili stacionaranproces,buducidavjerojatnostbitizivuvremenuod10godinatrebaovisitiodobiosobe.Stacionarnost je strogi zahtjevkoji moze biti teskoprovjeriti ustvarnomzivotu. Zbogtogasetakoder upotrebljavai drugi uvjet poznat kaoslabastacionarnost. Tuse zahtijevadaocekivanje procesam(t) =E[Xt] budekonstantno,tedakovarijancaprocesaC(s, t)= E[XsXt] E[Xs]E[Xt]ovisisamoovremenskojrazlicit s.2.3 PrirastiPrirasti procesa, denirani kao Xt+uXt(u > 0), cesto imaju jednostavnijasvojstvanegosamproces.Primjer2.1:Neka Stoznacava cijenu neke dionice. Razumno je pretpostaviti da distribu-cijapovratakrozperiodtrajanjau, St+u/Stovisi ou, ali neot. Premac FacultyandInstituteofActuaries Poglavlje2,stranica3Predmet103 Stohastickiprocesi 2000tome ce proces logaritama cijena Xt=log Stimati stacionarne prirasteXt+u Xt=log(St+u/St), iakojemalovjerojatnodacesamXtbiti sta-cionaran.KazesedaprocesXtimanezavisneprirasteakosuzasvaki u>0prirastiXt+uXtnezavisniodproslostiprocesa {Xs, 0 s t}.Uprimjeru2.1pretpostavkadaXt=log Stimanezavisneprirasteoblikjehipotezeoekasnomtrzistu. Primjer1.3takodersemozemodeliratiproce-somsastacionarnimprirastima. Mnogiprocesisedenirajupomocusvojihprirasta,vidisekciju3.2.4 MarkovljevosvojstvoVelikojepojednostavljanjeakosebuduci razvoj procesamozepredvidjetisamo pomocu trenutnog stanja, bez pozivanja na proslost. To se zove Markovl-jevosvojstvoipreciznoznacisljedece:P[Xt A| Xs1= x1, Xs2= x2, . . . , Xsn= xn, Xs= x] = P[Xt A| Xs= x]za sva vremena s1< s2< . . . sn< s < t, i sva stanja x1, x2, . . . , xn, x u S i svepodskupove A od S. Primjer 1.2 moze se modelirati Markovljevim svojstvom:akododedopotpunogoporavkaizbolesnogstanjauzdravostanje,povijestbolestinebitrebalaimatiutjecajanabuducezdravstvenostanje.Rezultat1ProcessnezavisnimprirastimaimaMarkovljevosvojstvo.DokazP[Xt A|Xs1= x1, Xs2= x2, . . . , Xsn= xn, Xs= x]= P[XtXs +x A|Xs1= x1, Xs2= x2, . . . , Xsn= xn, Xs= x]= P[XtXs +x A|Xs= x] = P[Xt A|Xs= x]Markovljevproces s diskretnimprostoromstanja i diskretnimvremenomnazivase Markovljevimlancem. Njihcemoproucavati upoglavlju3. Uslucaju diskretnog prostora stanja, ali neprekidnog vremenskog skupa upotre-bljava se pojam Markovljev proces skokova. Njih cemo proucavati u poglavlju4. Konacno, neki Markovljevi procesi s neprekidnim vremenom i neprekidnimskupomstanjarazmatrajuseupoglavlju6.Koristeci pripreme iz ove sekcije nizom primjera mozemo pokazati kako deni-ratistohastickiproces.Poglavlje2,stranica4 c FacultyandInstituteofActuaries2000 Stohastickiprocesi Predmet1033 Primjeri3.1 BijelisumPromotrimo niz nezavisnih slucajnih varijabli X0, X1, . . . , Xn, . . . (sve deni-ranenaistoj vjerojatnosnoj trojci). Tojediskretno-vremenski stohastickiproces. Markovljevo svojstvo je trivijalno zadovoljeno. Proces je stacionaranako sve slucajne varijable Xn imaju istu distribuciju. Takvi nizovi nezavisnihjednakodistribuiranih(ukratkonjd)slucajnihvarijabli seponekadopisujukao diskretno-vremenski bijeli sum(engl. white noise). Uglavnom se upotre-bljavajukaopocetnatockazakonstrukcijuzamrsenijihprocesa.3.2 OpcaslucajnasetnjaZapocnimosnizomnjdslucajnihvarijabli Y1, . . . , Yj, . . . kaogorei deni-rajmoprocesXn=

nj=1YjspocetnimuvjetomX0=0. Tojeprocessastacionarnin nezavisnim prirastima, te stoga Markovljev proces s diskretnimvremenom. Procesnijestacionaran, cakniti slabo. Uspecijalnomslucajukada koraci Yj setnje primaju samo vrijednosti +1 i 1, proces je poznat kaojednostavnaslucajna setnja.3.3 PokretnesredineZapocnimosnizomnjdslucajnihvarijabli Yj, j = p, p + 1, . . . , i p + 1realnihbrojeva0, 1, 2, . . . , p. Pokretnasredinaredap(engl. movingaverageoforderp)sedenirakaoXn=p

j=0jYnj, n 0 .Tojestacionaranproces. OpcenitonijeMarkovljevproces(caknitikadajep = 1).3.4 PoissonovprocesPoissonov proces s parametrom(engl. Poissonprocess withrate ) jeneprekidno-vremenskiprocesNt,t 0,sasljedecimsvojstvima:(i) N0= 0c FacultyandInstituteofActuaries Poglavlje2,stranica5Predmet103 Stohastickiprocesi 2000(ii) Ntimanezavisnepriraste(iii) NtimaPoissonovskidistribuiranestacionarneprirasteP[NtNs= n] =[(t s)]ne(ts)n!, s < t .To je Markovljev proces skokova sa skupom stanja N0= {0, 1, 2, . . . }. Procesnije stacionaran, cak niti slabo. Taj proces ima fundamentalno znacenje kodbrojanjaukupnogbrojapojavljivanjanekogdogadajakroz[0, t],bezobziranaprirodudogadaja(automobilskanesreca,stetazaosigurateljnodrustvo,dolazak musterija na servis, ...). Detaljno proucavanje tog procesa i njegovihprosirenjapredmetjepoglavlja4.3.5 SlozeniPoissonovprocesZapocnimosPoissonovimprocesomNt, t 0, i nizomnjdslucajnihvari-jabli Yj, j 1(svedeniranonaistomvjerojatnosnomprostoru). SlozeniPoissonovproces(engl. compundPoissonprocess)jedenirankaoXt=Nt

j=1Yj, t 0 .Taj proces ima nezavisne priraste, te stoga vrijedi Markovljevo svojstvo. Sluzikaomodelukupnogiznosa stetazaosigurateljnodrustvozavrijemeperioda[0, t]. Ntjeukupanbroj odstetnihzahtjevakrozperiod, aYjjeiznos j-testete. Osnovni problemklasicneteorijerizika jeprocjenavjerojatnostinesolventnosti(u) = P[u +ct Xt< 0 zanekot > 0]zadani pocetni kapital u, stopupremijeci nekuksnudistribucijusteta.Tajproblemseproucavaupoglavlju6.3.6 BrownovogibanjeBrownovogibanje(poznatotakoderi kaoWienerovproces)jeneprekidno-vremenskiprocesBt,t 0,snezavisnimstacionarnimGaussovskimpriras-tima.Poglavlje2,stranica6 c FacultyandInstituteofActuaries2000 Stohastickiprocesi Predmet103Uocite kakoje strukturadenicije povezanas onomzaPoissonovproces.Brownovogibanjeimaspecijalanstatusuteoriji vjerojatnosti. Natemeljucentralnog granicnog teorema, Btje neprekidno-vremenski limes siroke klasediskretno-vremenskihprocesa,vidipoglavlje6.4 MartingaliivremenazaustavljanjaUzMarkovljeveprocese, postoji jos jednaopcaklasapodloznadetaljnomistrazivanju. To su martingali. Njihova uloga u modernoj nancijskoj teorijinemozesepreuvelicati. Ustvari, cijelateorijaodredivanjacijenei zastite(engl. hedging) nancijskihizvedenica(engl. derivative) jeformuliranauterminimamartingala.Jednostavnim rijecima, martingal je stohasticki proces kod kojeg je trenutnavrijednostoptimalniprocjeniteljsvojebuducevrijednosti.Svojstvamartingalaoslanjajusenaprimjenuuvjetnogocekivanja.4.1 UvjetnoocekivanjeUvjetnoocekivanje E[X|Y ] deniranouPredmetu101mozeseprosiriti douvjetovanjapomocunekolikoslucajnihvarijabli dajuci E[X|Y1, Y2, . . . , Yn].ZadrzanojevaznosvojstvoE{E[X|Y1, Y2, . . . , Yn]} = E[X] .Vaznostuvjetnogocekivanjadolaziizsjedecegsvojstva:Rezultat2E[X|Y1, Y2, . . . , Yn] je optimalan procjenitelj od Xzasnovan na Y1, Y2, . . . , YnusmisludazasvakufunkcijuhvrijediE{(X E[X|Y1, Y2, . . . , Yn])2} E{(X h(Y1, Y2, . . . , Yn))2} .KriticankorakudokazutogrezultatajeRezultat3Zasvakufunkcijufvrijedisljedece:E{(X E[X|Y1, Y2, . . . , Yn])f(Y1, Y2, . . . , Yn)} = 0 .Ovadvarezultataimajujednostavnugeometrijskuinterpretaciju: mjerimovelicinuslucajnevarijableZracunajuci E[Z2]. Odgovarajuci skalarni pro-duktodXi Zje E[XZ]. Kadaskalarni produktiscezava, Xi Zmozemoc FacultyandInstituteofActuaries Poglavlje2,stranica7Predmet103 Stohastickiprocesi 2000smatrati ortogonalnima. TimjezikomRezultat3kazedaprocjenitelj imaminimalnugreskutocnokadajegreskaprocjeneX E[X|Y1, Y2, . . . , Yn]or-togonalnanasvaki dopustivi procjenitelj. Taj tiprezultataje poznat izelementarnegeometrije:prostorprocjeniteljadds$$$$$$$$$$$$$$$$$$$$$$$$$$$$$$$$$$$$$$$$$$$$$$$$$$$$$$$$Xgggggggggggggggygg$$#X X E[X|Y1, . . . , Yn]E[X|Y1, . . . , Yn]Dokazrezultata3: UvjetovanjemnaY1, . . . , YndobivamoE{(X E[X|Y1, Y2, . . . , Yn])f(Y1, Y2, . . . , Yn)}= E{E[(X E[X|Y1, Y2, . . . , Yn])f(Y1, Y2, . . . , Yn) | Y1, Y2, . . . , Yn]}= E{f(Y1, Y2, . . . , Yn)(E[X|Y1, . . . , Yn] E[X|Y1, . . . , Yn])} = 0Dokazrezultata2:E[(X h(Y1, Y2, . . . , Yn))2]= E[(X E[X|Y1, . . . , Yn] +E[X|Y1, . . . , Yn] h(Y1, . . . , Yn))2]= E[(X E[X|Y1, . . . , Yn])2] + 2E[(X E[X|Y1, . . . , Yn])(E[X|Y1, . . . , Yn]) h(Y1, . . . , Yn)] +E[(E[X|Y1, . . . , Yn] h(Y1, . . . , Yn))2]Poglavlje2,stranica8 c FacultyandInstituteofActuaries2000 Stohastickiprocesi Predmet103Zakljucakslijediiz cinjenicedadrugi claniscezavapoRezultatu3,azadnjiclanjepozitivan.4.2 MartingalisdiskretnimvremenomDiskretno-vremenski stohasticki proces X0, X1, X2, . . . zove se martingal(engl.martingale),akojeE[|Xn|] < zasvenE[Xn|X0, X1, . . . , Xm] = Xmzasvem < n.Rijecima,sadasnjavrijednostXmmartingalajeoptimalniprocjeniteljsvojebuducevrijednostiXn.Ako je diskontirana cijena nacijske imovine martingal, investicija u tu imov-inuseopisujekaoneutralnapremariziku(engl. riskneutral).Opca slucajna setnja Xn=

nj=1Yjdenirana u 3.2 je martingal ako i samoakoje E[Yj] = 0.Odsvihsvojstavamartingala,najkorisnijejetakoderinajjednostavnije.Rezultat4: Martingal ima konstantno ocekivanje, tj.E[Xn] = E[X0] za sven.Dokaz: E[Xm] =E{E[Xn|X0, X1, . . . , Xm]}=E[Xn] zasvem 1/2 akojep = 1/2Dakle, kada je p 1/2 svako pozitivno stanje l biti ce dohvaceno u konacnomvremenu. Medutim, kada je p = 1/2 potrebno prosjecno vrijeme za bilo kojestanjebiti cebeskonacno.4.4 MartingalisneprekidnimvremenomDenicija martingala dana u 4.2 je preuska za mnoge primjene. Posebno, nijeprikladna za prosirenje na neprekidno vrijeme zbog poteskoca pri uvjetovanjunakontinuumslucajnihvarijabli. Slijediopisopcenitijegpristupauvjetnomocekivanjui martingalima. Sljedecestrukturesuutemeljimasvakogsto-hastickogprocesaXt:prostor elementarnihdogadaja: svaki elementarni dogadaj odredujeputXt().skupdogadaja F: toje familijapodskupovaodkojimase mozepridruzitivjerojatnost.zasvakovrijemet, manjafamilijadogadaja Ft F: tojeskuponihdogadajakojisupoznatiutrenutkut. Drugimrijecima, dogadajAjeu FtakoovisisamooXs,0 s t.c FacultyandInstituteofActuaries Poglavlje2,stranica11Predmet103 Stohastickiprocesi 2000Kakot raste, takorastei Ft: Ft Fu, t u. Uzevsi zajedno, familija(Ft)t0sezoveltracijapridruzenastohastickomprocesuXt, t 0. Onaopisujeinformacijudobivenupromatranjemprocesa.Nekeslucajnevarijablebiticepoznatedotrenutkat: KazemodajeYFt-izmjerivaakodogadaj {Y y}pripada Ftzasvakuvrijednosty.Stohasticki proces Yt, t 0, sezoveadaptiranltraciji Ft, akojeYt Ft-izmjeriva za sve t. Ako je Ftltracija generirana s Xt, tada je svaka funkcijaodXtadaptiranana Ft.Dabismoformulirali nasunovudenicijuuvjetnogocekivanja, jednostavnoinzistiramonakljucnimsvojstvimarezultata2i3:uvjetnoocekivanje E[X|Ft] je po deniciji optimalni procjenitelj od Xmedusvim Ft-izmjerivimslucajnimvarijablamaskonacnimocekivanjem. Ekviva-lentno,E{(X E[X|Ft])Y } = 0zasve Ft-izmjeriveograniceneslucajnevarijableY .Sljedeca kljucna svojstva uvjetnog ocekivanja su relativno jednostavne posljedicegornjegeometrijskedenicije:Rezultat6(i) E{E[X|Ft]} = E[X](ii) AkojeX Ft-izmjeriva,tadaje E[X|Ft] = X(iii) AkojeYFt-izmjerivaiogranicena,tadajeE[XY |Ft] = Y E[X|Ft](iv) AkojeXnezavisnas Ft,tadaje E[X|Ft] = E[X].Uovomokruzju,martingaljestohastickiprocestakavdavrijedi:E[|Xt|] < E[Xt|Fs] = Xszasves < t.Koristeci nezavisnost prirasta, moze se dokazati da je Brownovo gibanje mar-tingal. Takoder, ako je NtPoissonov proces s parametrom , tada je Nttmartingal. Uocite da proces moze biti martingal u odnosu na ltraciju gener-iranudrugimprocesom: naprimjer, akojeBtBrownovogibanje, B2t tjemartingaluodnosunaltracijugeneriranusBt,t 0.Poglavlje2,stranica12 c FacultyandInstituteofActuaries2000 Stohastickiprocesi Predmet103Uovomkontekstu, vrijemezaustavljanjauodnosunaltraciju(Ft)t0jepozitivna slucajna varijabla Ttakva da dogadaj (T t) pripada Ftza svakit 0.c FacultyandInstituteofActuaries Poglavlje2,stranica132000 Markovljevilanci Predmet103POGLAVLJE3-MARKOVLJEVILANCINastavniciljevi: (iii)DeniratiiprimjenitiMarkovljevlanac.1. NavestiosnovnaobiljezjamodelaMarkovljevoglanca.2. NavestirelacijekojepredstavljajuMarkovljevlanac.3. Izracunati stacionarnudistribucijuMarkovljevog lanca unajjednos-tavnijimslucajevima.4. Opisati sustav iskustvenog utvrdivanja premija zasnovanog na frekven-cijamauterminimaMarkovljevoglanca, i opisati drugejednostavneprimjene.1 Chapman-KolmogorovljevejednadzbePrisjetimo se iz poglavlja 2 da je terminMarkovljev lanac rezerviranzadiskretno-vremenski Markovljevprocesskonacnimili prebrojivimskupomstanja S. Prema tome, Markovljev lanac je niz slucajnih varijabli X0, X1, . . . ,Xn, . . . sasljedecimsvojstvom:P[Xn= j|X0= i0, X1= i1, . . . , Xm1= im1, Xm= i] = P[Xn= j|Xm= i](1)zasvacjelobrojnavremenan > misvastanjai0, i1, . . . , im1, i, juS.Markovljevo svojstvo(1) ima sljedecu interpretaciju: uz dano sadasnje stanjeprocesaXm= i,dodatnoznanjeproslostiirelevantnojezaizracunvjerojat-nosnedistribucijebuducihvrijednostiprocesa.Uvjetne vjerojatnosti na desnoj strani od (1) kljucni su objekti za opisMarkovljevoglanca. Zovemoihprijelaznevjerojatnosti ioznacavamoihsP[Xn= j|Xm= i] = p(m,n)ij.Onezadovoljavajusustavjednazbi:Rezultat1:Prijelazne vjerojatnosti Markovljevog lanca s diskretnim vremenom zadovol-javajuChapman-Kolmogorovljevejednadzbe:p(m,n)ij=

kSp(m,l)ikp(l,n)kjc FacultyandInstituteofActuaries Poglavlje3,stranica1Predmet103 Markovljevilanci 2000zasvastanjai, juSisvacjelobrojnavremenam < l < n.Dokaz:ZasnivasenaMarkovljevomsvojstvu(1)i zakonupotpunevjerojatnosti uuvjetnomobliku:akoA1, A2, . . . , Ak, . . . tvorepotpunsustav(disjunktnih)dogadaja,tj.k=1Ak= , Ak Aj= , k = j ,tadazasvakadvadogadajaB,C:P[B|C] =

k=1P[B|C, Ak] P[Ak|C] .StogaP[Xn= j|Xm= i] =

kSP[Xn= j|Xm= i, Xl= k] P[Xl= k|Xm= i]=

kSP[Xn= j|Xl= k] P[Xl= k|Xm= i]koristeciMarkovljevosvojstvo(uocitel > m).Tojetrazenirezultat.Chapman-Kolmogorovljevejednadzbeomogucujunamdaizracunamoopceprijelazne vjerojatnosti pomocu jednokoracnih prijelaznih vjerojatnostip(n,n+1)ij.Zato je distribucija Markovljevog lanca potpuno odrdena cim je speciciranosljedece:Jednokoracneprijelaznevjerojatnostip(n,n+1)ijPocetnavjerojatnosnadistribucijaqj= P[X0= j].Zaista,iztogamozemoizvestidistribucijusvakogputa:P[X0= i0, X1= i1, . . . , Xn= in] = qi0p(0,1)i0i1p(1,2)i1i2 p(n1,n)in1in.Stoga je pogodno, kadgodje moguce, odrediti stanja na nacinda tvoreMarkovljevlanac. Toilustriraprimjer3.2.Poglavlje3,stranica2 c FacultyandInstituteofActuaries2000 Markovljevilanci Predmet1032 VremenskihomogeniMarkovljevilanciDo pojednostavljenja dolazi ako su jednokoracne prijelazne vjerojatnosti neo-visneovremenu:p(n,n+1)ij= pij(2)U tom slucaju kazemo da je Markovljev lanac vremenski homogen. To ce bitistalnapretpostavkaupreostalomdijelupoglavlja.Iz(2)laganoslijedidaopceprijelaznevjerojatnostiovidesamoorazlikamavremena:P[Xl+m= j|Xm= i] = p(l)ij. (3)O(3)govorimokaool-koracnimprijelaznimvjerojatnostima. ZavremenskihomogenMarkovljevlanacChapman-Kolmogorovljevejednadzbeglasep(nm)ij=

kSp(lm)ikp(nl)kjzam < l < nstoimavrlojednostavnuinterpretaciju: denirajmoprijelaznumatricuPpomocuPij= pij .Tadase l-koracne prijelazne vjerojatnosti p(n,n+l)ijmogudobiti racunajuci(i, j)-tomjestol-tepotencijematriceP:p(l)ij= Plij .Prijelazna matrica Pje kvadratna N Nmatrica gdje je Nbroj stanja u S(mogucebeskonacan).Uvjet normalizacije

jS pij=1vrijedi zasvaki i, tj. zbroj elemenatasvakogredaodPmoradatijedan. Opcenitije,

jS p(l)ij= 1zasvei.Cestojekorisnonacrtatiprijelaznigraf Markovljevoglanca: nacrtasestre-licaiziujkadgodjepij> 0, stooznacavadajemogucdirektanprijelazizstanjaiustanjej. Vrijednostodpijmozeseoznacitiiznadstrelice.3 Primjeri3.1 JednostavanmodelsustavabonusaSustavbonusa(engl. NoClaimDiscount system) uosiguranjumotornihvozila, po kojem premija ovisi o vozacevim proslim odstetnim zahtjevima, os-c FacultyandInstituteofActuaries Poglavlje3,stranica3Predmet103 Markovljevilanci 2000novna je primjena Markovljevih lanaca. Izlozit cemo dva jednostavna modelaipredlozitimogucapoboljsanja.Drustvozaosiguranjemotornihvozilasvojimosiguranicimaili nedajepo-pust(stanje0), ilidaje25%popusta(stanje1), ili50%popusta(stanje2).Godina bez odstetnog zahtjeva rezultira prijelazom u vise stanje sljedece go-dine (ili zadrzavanjem maksimalnog bonusa). Slicno, godina s jednim ili viseodstetnih zahtjeva prouzrokuje prijelaz u sljedece nize stanje (ili zadrzavanjestatusabezpopusta).Uztapravila,statuspopustaosiguranikatvoriMarkovljevlanacsaskupomstanja {0, 1, 2}. Akojevjerojatnostgodinebezodstetnihzahtjevajednaka3/4,prijelaznigrafiprijelaznamatricasu&%'$Brrrr1/4E3/40&%'$'1/41&%'$ %rrr r3/4E3/4'1/42P=1/4 3/4 01/4 0 3/40 1/4 3/4.Vjerojatnostmaksimalnogpopustaugodini n + 3akojepoznatodanemanikakvogpopustaugodininjep(3)02= P302= 9/16 .3.2 DrugimodelzasustavbonusaModicirajmoprethodni model nasljedeci nacin: Sadaimamocetiri nivoapopusta;0: bezpopusta1: 25%popusta2: 40%popusta3: 60%popustaPoglavlje3,stranica4 c FacultyandInstituteofActuaries2000 Markovljevilanci Predmet103Pravila za kretanje po ljestvici popusta su kao i prije, ali u slucaju odstetnogzahtjevautekucojgodini, statuspopustakrecesenadoljejedanili dvako-raka,ovisnootomedalije prethodnagodinabilabezodstetnogzahtjevailine.Uztapravila, statuspopustaXnosiguranikanecini MarkovljevlanacnaS= {0, 1, 2, 3},jerP[Xn+1= 0|Xn= 2, Xn1= 1] = 0 ,dokjeP[Xn+1= 0|Xn= 2, Xn1= 3] > 0 .ZakonstrukcijuMarkovljevoglancaYn,n = 0, 1, 2, . . . ,potrebnojeugraditiinformacijuoproteklojgodiniuskupstanja. Ustvari,tojepotrebnosamozastanje2,kojedijelimona:2+: 40%popustaibezodstetnogzahtjevaprethodnegodine2-: 40%popustaiodstetnizahtjevprethodnegodine.Pretpostavljajuci kao i prije da je vjerojatnost godine bez odstetnog zahtjevajednaka 3/4, imamo Markovljev lanac na prostoru stanja S

= {0, 1, 2+, 2, 3}sprijelaznimgrafomiprijelaznommatricom&%'$Brrrr1/4E3/40&%'$'1/41&%'$E3/4 %rrr r3/4E3/4'1/42+&%'$

1/43&%'$21/4T3/4Tc FacultyandInstituteofActuaries Poglavlje3,stranica5Predmet103 Markovljevilanci 2000P=1/4 3/4 0 0 01/4 0 3/4 0 00 1/4 0 0 3/41/4 0 0 0 3/40 0 0 1/4 3/4.Vjerojatnost60%popustaugodinin + 3uzdanpopustod25%ugodininjep(3)13= P313= 27/64 .Ovajosnovnimodeljepodlozanbrojnimpoboljsanjima. Naprimjer,vjero-jatnost nesrecemozeovisiti ostatusupopusta, nataj nacinodrazavajuciutjecajstatusanavjerojatnostnesrece. Takoder,vjerojatnostnesrecemozeovisitiovremenuodrazavajucipromjeneuprometnimuvjetima. Tovodidovremenskinehomogenihlanaca.3.3 JednostavnaslucajnasetnjanaZ = {. . . , 2, 1, 0, 1, 2, . . . }TojedeniranokaoXn=Y1 + Y2 + + YngdjesuslucajnevarijableYj(koraci setnje)nezavisnesazajednickomvjerojatnosnomdistribucijom:P[Yj= 1] = p, P[Yj= 1] = 1 p .VrijediMarkovljevosvojstvo:P[Xn= j|X1= i1, . . . , Xm1= im1, Xm= i]= P[Xm + Ym+1 + + Yn= j|X1= i1, . . . , Xm1= im1, Xm= i]= P[Ym+1 + + Yn= j i] = P[Xn= j|Xm= i]Prijelaznigrafiprijelaznamatricasubeskonacni:. . .&%'$Ep'1 pEp'1 pEp'1 pEp'1 p2&%'$1&%'$0&%'$1&%'$2. . .Poglavlje3,stranica6 c FacultyandInstituteofActuaries2000 Markovljevilanci Predmet103P=......... 0 p1 p 0 p.........1 p 0 p1 p 0.........Prijelaznevjerojatnostizankorakamoguseizracunatikaop(n)ij=

nn+ji2

pn+ji2(1 p)n+ij2akoje0 n + j i 2nin + j iparan0 inaceZa izvod te formule bolje je zakljucivati vjerojatnosno nego racunati Pn: pri-jelaz iz i u j u n koraka ekvivalentan je m+pozitivnih koraka i m negativnihkorakauzm+m= j i, m++ m= n.Uocitedajejednostavnaslucajna setnja,uzto stojevremenskihomogena,takoderiprostornohomogena:p(n)ij= p(n)i+r j+r .3.4 Jednostavnaslucajnasetnjana {0, 1, 2, . . . , b}To je slicno prethodnom primjeru, uz razliku da moramo specicirati granicneuvjete u0i b. Oni ceovisiti ointerpretaciji danoj lancu.Cestokoristenigranicniuvjetiukljucuju:Reektirajucagranica: P[Xn+1= 1|Xn= 0] = 1Apsorbirajucagranica: P[Xn+1= 0|Xn= 0] = 1Mjesovitagranica: P[Xn+1=0|Xn=0]=, P[Xn+1=1|Xn=0]=1 Slucajna setnjasapsorbirajucomgranicomu0i bmozesekoristiti zaopiskockarevog bogatstva: b je njegovo zeljeno bogatstvo, a 0 predstavlja propast.Uobaslucaja,dostizanjegraniceznaciostajanjetamozauvijek.Smjesovitimgranicnimuvjetimaprijelaznigrafjec FacultyandInstituteofActuaries Poglavlje3,stranica7Predmet103 Markovljevilanci 2000

E1 '1 p0Brrr

Ep'1 p1

2. . .

Ep'1 pj 1

Ep'1 pj

j + 1. . .

Ep'1 pb 2

Ep'1 b 1

brrr%aprijelaznamatricaP= 1 1 p 0 p1 p 0 p.........1 p 0 p1 Uvjeti sreektirajucom, odnosnoapsorbirajucom, granicomdobijusekaospecijalni slucajevi uzimajuci i jednakim 0, odnosno 1. Jednostavni mod-elasustavabonusaizprimjera3.1jejosjedanprakticanprimjerograniceneslucajne setnje.3.5 ModelsklonostinesrecamaZa danog vozaca, u svakom periodu jili nema nesrece (Yj= 0), ili se dogodinesreca(Yj=1). Vjerojatnostnesreceusljedecemperioduprocjenjujesekoristeci vozaceve dosadasnje podatke kako slijedi (sve varijable yjsu ili 0 ili1):P[Yn+1= 1|Y1= y1, Y2= y2, . . . , Yn= yn] =f(y1 + y2 + + yn)g(n)gdje su f, gdvije dane rastuce funkcije koje zadovoljavaju 0 f(m) g(m).Naravno,P[Yn+1= 0|Y1= y1, Y2= y2, . . . , Yn= yn] = 1 f(y1 + y2 + + yn)g(n).Ovisnost o dosadasnjim podacima znaci da Y1, Y2, . . . , Yn, . . . nemaMarkovl-jevosvojstvo. Medutim,ukupanbrojvozacevihnesreca,Xn=n

j=1YjPoglavlje3,stranica8 c FacultyandInstituteofActuaries2000 Markovljevilanci Predmet103jeMarkovljevlanacsprostoromstanjaS= {0, 1, 2, . . . }. Tojezato,jerP[Xn+1= 1 + xn|X1= x1, X2= x2, . . . , Xn= xn]= P[Yn+1= 1|Y1= x1, Y2= x2x1, . . . , Yn= xnxn1]=f(xn)g(n)Uocitedajelanacvremenskihomogensamoakojeg(n)konstantno.4 AsimptotskavjerojatnosnadistribucijaMarkovljevoglanca4.1 StacionarnavjerojatnosnadistribucijaKazemo da je j, j S, stacionarna vjerojatnosna distribucijaza MarkovljevlanacsprijelaznommatricomP,akovrijedesljedeciuvjetizasvej S:j=

iSipij(4)j 0

jSj= 1Uocitedase(4)mozezapisati ukompaktnomobliku=Pgdjesenagledakaonavektorredak.Interpretacijaod(4)jedaakouzmemokaonasupocetnuvjerojatnosnudistribuciju, to jest P[X0= i] = i, tada je distribucija u trenutku 1 ponovnodanas:P[X1= j] =

iSP[X1= j|X0= i] P[X0= i] =

iSpiji= j .Istovrijedi zasvavremenan 1, takodajeinvarijantnavjerojatnosnadistribucija. Ustvari,lanacjetadastacionaranprocesusmislupoglavlja2.Opcenito, Markovljevlanacnemoraimati stacionarnudistribuciju, teakoonapostoji nemorabiti jedinstvena. Naprimjer, nepostoji stacionarnadistribucijazaprimjer3.3, dokuprimjeru3.4jedinstvenostovisi ovrijed-nostimai. Kadajeprostorstanjakonacan,situacijajejednostavna.c FacultyandInstituteofActuaries Poglavlje3,stranica9Predmet103 Markovljevilanci 2000Rezultat2:Markovljev lanac s konacnim prostorom stanja ima barem jednu stacionarnudistribuciju.Dokazovogrezultataizlazivanokvirapredavanja.Kao primjer, izracunajmo stacionarnu distribuciju za model bonusa iz prim-jera3.2. Jednadzbe(4)glase:0=140 +141 +1421=340 +142+2+=341(5)2=1433=342+ +342 +343Ovajlinearnisustavnijelinearnonezavisan,buducidazbrajanjemsvihjed-nadzbi dolazimodoidentiteta(tojeopceobiljezjejednadzbi =Pzbogsvojstva

jS pij= 1).Zbogtogamozemoodbacitibilokojuodjednadzbi,recimoposljednju.Uocite takoder daje zboglinearnost svaki umnozakrjesenjaod(5) opetrjesenje. Jedinstvenostproizlaziiznormalizacije

jS j= 1. Zbogtogajedobrapraksanaci rjesenjezakomponenteoduterminimajedneodnjih(recimo1ovdje), okojojcemogovoriti kaooradnoj varijabli. Vrijednostradnevarijableodredujeseuzadnjemkorakuiznormalizacije.Sazmimosadametoduiiskoristimojenagornjemprimjeru.Korak1: Odbacimojednuodjednadzbi. Ovdje su prva ili zadnjaocigledanizbor. Izabiremozadnju.Korak2: Odaberimojedanodj-tova kaoradnuvarijablu.Ovdjesu1, 2+, 2ili3razumniizbori. Izabiremo1.Korak3: Prepisemopreostalejednadzbepomocuradnevari-jable.30 2= 130+ 2+= 412+=34142 3= 0Poglavlje3,stranica10 c FacultyandInstituteofActuaries2000 Markovljevilanci Predmet103Korak4: Rijesimojednadzbepomocuradnevarijable.Opcenito to mozemo uciniti pomocu Gaussovskih eliminacija, ali ovdjesujednadzbetakojednostavnedaserjesenjamoguprocitati akoihgledamoupravomredoslijedu:2+=341, 0=14(4 34) =131212= 1(1 +134) =941, 3= 91.Korak5: Izracunamoradnuvarijablu. = 1(13/12, 1, 3/4, 9/4, 9)

jj=112(13 + 12 + 9 + 27 + 108) =169121= 11=12169Korak 6: Spojimo rezultate zadnja dva koraka i dobijemorjesenje.= (13169,12169,9169,27169, 108169) (6)Korak7: Ukolikozelimo, iskoristimoodbacenujednadzbuzaprovjerurezultata.108 = 3/4 9 + 3/4 27 + 3/4 108ili432 = 27 + 81 + 324(kaosto je prije objasnjeno, normalizacija ne igra nikakvuuloguusustavu(5)).Pitanjejedinstvenosti stacionarnedistribucijejedelikatnije. Mi cemoraz-matrati samoireducibilne lancedeniranesvojstvomdajesvakostanjejdostiznoiznekogdrugogstanjai. Drugimrijecima, lanacjeireducibilan,akozadani parstanjai, jpostojcijeli brojntakavdajep(n)ij>0. Otomsvojstvuseuobicajenomozedati sudvecizprijelaznoggrafa. Markovljevilanci izprimjera3.1, 3.2, 3.3suireducibilni. Takavjei 3.4osimuslucajuc FacultyandInstituteofActuaries Poglavlje3,stranica11Predmet103 Markovljevilanci 2000dajebilokojagranicaapsorbirajuca( = 1ili= 1). Takvaapsorbirajucastanjapojavljujuseumnogimsituacijama(npr. propast).Rezultat3:IreducibilanMarkovljevlanacs konacnimskupomstanjaimajedinstvenustacionarnudistribuciju.Dokazovogrezultataizlazivanokvirapredavanja.UobicajenojedaMarkovljevlanacsbeskonacnimskupomstanjanemasta-cionarnu distribuciju, cak i kada je ireducibilan. To je slucaj kod jednostavneslucajne setnjeuprimjeru3.3.4.2 AsimptotskoponasanjeMarkovljevoglancaPrirodnojeocekivati dadistribucijaMarkovljevoglancatezi premainvari-jantnoj distribuciji zavelikavremena. Tojerazlogzastojestacionarnadistribucijatolikovazna. Akonavedenakonvergencijavrijedi, p(n)ijcebitiblizujzaasimptotskivelikidiovremena.Izvjesni fenomeni doneklekomplicirajugornjusliku. Stanjeijeperiodicnosperiodomd>1akojepovratakui mogucsamoubrojukorakakoji jeumnozakodd(tj. p(n)ij= 0osimzan = mdzanekicijelibrojm). Samozaaperiodicnastanjapostojilimnp(n)ij.Koristeci prijelazni grafmozeseprovjeriti dasuuprimjerima3.1i 3.2svastanjaaperiodicna,dokuprimjeru3.3svastanjaimajuperiod2. Konacno,uprimjeru3.4svasustanjaaperiodicnaosimkadasuiiili0ili1.Vaznoje uociti dazaireducibilanMarkovljevlanac svastanjaimajuistiperiod(ilisusvaaperiodicna).Sadamozemoiznijeti rezultatokonvergenciji premastacionarnoj vjerojat-nosnojdistribuciji.Rezultat4:Neka je p(n)ijn-koracna prijelazna vjerojatnost ireducibilnog aperiodicnogMarkovljevog lanca na konacnom prostoru stanja. Tada je za sve i, j, limnp(n)ij=j,gdjejestacionarnavjerojatnosnadistribucija.Uocite da je gornji limes neovisan od pocetnog stanja i. Dokaz ovog rezultataizlazivanokvirapredavanja.Poglavlje3,stranica12 c FacultyandInstituteofActuaries2000 Markovljeviprocesiskokova Predmet103POGLAVLJE4-MARKOVLJEVIPROCESISKOKOVANastavniciljevi: (iv)DeniratiiprimjenitiMarkovljevproces.1. NavestiosnovnaobiljezjamodelaMarkovljevogprocesa.2. Denirati Poissonov proces, izvesti distribuciju broja dogadaja u danomvremenskom intervalu, izvesti distribuciju vremena izmedu dogadaja, iprimjenititerezultate.3. Izvesti KolmogorovljevejednadzbezaMarkovljevprocessvremenskineovisnim,tevremenskiidobnoovisnimprijelaznimintenzitetima.4. RijesitiKolmogorovljevejednadzbeujednostavnimslucajevima.5. Navesti diferencijske jednazbe koje se mogu koristiti za numericko rjesavanjeKolmogorovljevihjednadzbi.6. Navesti jednostavan numericki algoritam koji se moze koristiti za rjesavanjejednadzbiuslozenijimslucajevima.7. Opisati jednostavanmodel dozivljenja, model bolesti i model brakapomocuMarkovljevihprocesaiopisatidrugejednostavneprimjene.8. Navesti Kolmogorovljeve jednadzbe za model u kojem prijelazni inten-ziteti neovisesamoodobi i vremenu, vectakoderi oduljini boravkaujednomilivisestanja.9. OpisatimodelebolestiibrakapomocuMarkovljevihprocesaovisnihoduljiniboravkaiopisatijednostavneprimjene.1 KolmogorovljevejednadzbeMarkovljevproces Xt, t 0, s neprekidnimvremenomi diskretnim(tj.konacnim ili prebrojivim) skupom stanja S naziva se Markovljev proces skokova.NjegoveprijelaznevjerojatnostiPij(s, t) = P[Xt= j|Xs= i] (s t)c FacultyandInstituteofActuaries Poglavlje4,stranica1Predmet103 Markovljeviprocesiskokova 2000zadovoljavajuChapman-KolmogorovljevejednadzbePij(s, t) =

kSPik(s, u)Pkj(u, t) s < u < t . (1)To je neposredna posljedica Markovljevog svojstva, vidi poglavlje 3. OznacimolisaP(s, t)matricuselementimaPij(s, t),jednadzba(1)semozezapisatiP(s, t) = P(s, u)P(u, t) s < u < t . (2)Ukoliko znamo prijelaznumatricuP(s, t) i pocetnu distribuciju qi= P[X0=i], koristeci Markovljevo svojstvo mozemo naci opcenite vjerojatnosti za pro-cesXt. Naprimjer,za0 < t1< t2< < tnP[X0= i, Xt1= j1, Xt2= j2, . . . , Xtn= jn] = qipij1(0, t1)pj1j2(t1, t2) . . . pjn1jn(tn1, tn)iP[Xt1= j1, Xt2= j2, . . . , Xtn= jn] =

iSqipij1(0, t1)pj1j2(t1, t2) . . . pjn1jn(tn1, tn)Mi cemopretpostaviti dasufunkcije Pij(s, t) neprekidnodiferencijabilne.UocimolidajePij(s, s) = ij=_0 akojei = j1 akojei = j(3)topovlacipostojanjesljedecihfunkcijaij(s) =tPij(s, t)|t=s=limh0Pij(s, s + h) ijh. (4)Ekvivalentno,vrijedesljedecerelacijezah 0(h > 0):Pij(s, s + h) =_hij(s) + o(h) zai = j1 + hii(s) + o(h) zai = j(5)gdjetvrdnjadajef(h) = o(h)zah 0znacilimh0f(h)/h = 0.Interpretacija prvog retka u (5) je jednostavno da je vjerojatnost prijelaza iziujzavrijemekratkogvremenskogintervala[s, s + h]proporcionalnash.Stoga naziv prijelazni intenzitetza ij(s). Prijelazni intenziteti imaju funda-mentalno znacenje, buduci da u potpunosti odreduju distribuciju Markovlje-vihprocesaskokova. Dabismotovidjeli,derivirajmo(1)uodnosunat,testavimou = t:tPij(s, t) =

kSPik(s, t)kj(t) . (6)Poglavlje4,stranica2 c FacultyandInstituteofActuaries2000 Markovljeviprocesiskokova Predmet103To su Kolmogorovljeve jednadzbe unaprijed. One se mogu zapisati u kompak-tnomoblikukaotP(s, t) = P(s, t)A(t) (7)gdjejeA(t)matricaselementimaij(t).Uizvodenju(6)implicitnojepretpostavljenodajeprostorstanjakonacan.U tom slucaju, za sve ksne s, i, (6) je konacanlinearan sustav obicnihdifer-encijalnihjednadzbi (ustvari, varijablasi indeks i pojavljujusesamoupocetnomuvjetu(3)). Prematome, zadaneprijelazneintenziteteij(t),jednadzba(6)imajedinstvenorjesenjekompatibilnos(3). ZbogtograzlogaseMarkovljevi modeli redovitoformulirajujednostavnospeciciranjemnji-hovihprijelaznihintenzitetaij(t).Deriviranjem(2)sobziromnas,anet(istavljajuciu = s),mozemodobitiKolmogorovljevejednadzbeunatrag:sP(s, t) = A(s)P(s, t) . (8)U normalnim okolnostima, sustavi unaprijed i unatrag su ekvivalentni. Tojeposebnotakokadasuprijelazniintenzitetiogranicenisupi,j|ij(t)| < t 0 . (9)Medutim,kada (9) ne vrijedi,sustav unatrag ima fundamentalnije znacenje,vidiprimjer4.4.Uocimokonacnodaiz(5)slijedidajeij(s) 0,i = j,alijeii(s) 0. Ustvari, deriviranje identiteta

jS Pij(s, t) = 1 s obzirom na t u t = s povlaciii(s) =

j=iij(s) . (10)StogasvakiredakmatriceA(s)imazbrojnula.2 PoissonovprocesPromotrajmo Markovljev proces skokova sa skupom stanja S= {0, 1, 2, . . . }iprijelaznimintenzitetima:ij=_ zaj= i + 10 inaceReprezentacijapomocudijagramajec FacultyandInstituteofActuaries Poglavlje4,stranica3Predmet103 Markovljeviprocesiskokova 2000&%'$0

&%'$

1&%'$2. . .&%'$

i&%'$i + 1. . .amatricaAuKolmogorovljevimjednadzbamaje:A =______ 0

0 ______(11)NijenimaloocitodaseprocesdenirangorepodudarasPoissonovimpro-cesomkarakteriziranimupoglavlju2kaoprocessnezavisnimstacionarnimPoissonovski distribuiranimprirastima. Medutim, mozesedokazati dasudvijedenicijeekvivalentne.Poissonovprocesseuglavnomprimjenjujekaobrojeci proces: Xtmodelirabroj pojavljivanjanekogdogadaja(kaonaprimjer, automobilskihnesreca)kroz[0, t].Iz(11)dobivamojednadzbeunaprijed_P

i0(t) = Pi0(t)P

ij(t) = Pi j1(t) Pij(t), j> 0 .(12)Uz pocetan uvjet Pi0(0) = i0, prva jednadzba daje Pi0(t) = i0et. NadaljeracunamoP0j(t)zasvej. JednadzbuP

0j(t) = P0 j1(t) P0j(t) (13)rjesavamo metodomvarijacije konstanti. Buduci da je opce rjesenje ho-mogene jednadzbe P

0j(t) =P0j(t) jednako et, trazimo partikularnorjesenjeod(13)uoblikuj(t)et. Uvrstavanjetogau(13)dajejednadzbu

j(t) =j1(t) kojadopustarjesenje j(t) =(t)jj!. Prematome, opcerjesenjeod(13)jeP0j(t) =(t)jj!et+ et,Poglavlje4,stranica4 c FacultyandInstituteofActuaries2000 Markovljeviprocesiskokova Predmet103apocetniuvjetP0j(0) = 0jdaje = 0. NaistinacinmozesenaciPij(t) =_(t)ji(ji)! etzaj i0 zaj< i .(14)Dokaztogrezultataizlazivanokvirapredavanja.Sadamozemorazmatrati svojstvaprirastaprocesa. Prvastvarkojutrebaprimjetiti je da je proces, uz to sto je vremenski homogen, takoder prostornohomogen: Pij(t) = Pi+l j+l(t). KoristecitoiMarkovljevosvojstvo,imamozasves0< s1< < sn< s < t:P[XtXs= j|Xs0= i0, Xs1= i1, . . . , Xsn= in, Xs= i]= P[Xt= i + j|Xs= i] = Pi i+j(t s) = P0j(t s)=((t s))jj!e(ts).To dokazuje da su prirasti XtXsnezavisni od proslosti procesa (Xu, u s)i imajustacionarnuPoissonovudistribuciju. ZbogtogasenasMarkovljevproces skokova podudara s Poissonovim procesom deniranim u poglavlju 2.Buduci da se Poissonov proces Xtmijenja samo skokovima za jedan na gore,njegovi putovi su u potpunosti karakterizirani vremenima u kojima se skokovidogode. OznacimosT0, T1, T2, . . . uzastopnavremenaizmedudogadaja(ilivremenazadrzavanja).c FacultyandInstituteofActuaries Poglavlje4,stranica5Predmet103 Markovljeviprocesiskokova 2000T0T1T2t`Xt123Uocitedaizabiremo(pokonvenciji)dasuputovi odXtzdesnaneprekidnitakodajeXT0= 1, XT0+T1= 2, . . . .Laganojekarakterizirati vjerojatnosnudistribucijuvremenaTjkojePois-sonovprocesprovedeustanjujP[T0> t|X0= 0] = P[Xt= 0|X0= 0] = et.Prematome,T0imaeksponencijalnudistribucijusparametrom.Stovise,P[T1> t|X0= 0, T0= s] = P[Xt+s= 1|X0= 0, T0= s]= P[Xt+sXs= 0|X0= 0, T0= s] = P[Xt+sXs= 0]= P00(t) = et,gdjetrecajednakost odrazavanezavisnost prirastaXt+s Xsodproslostiprocesa(doi ukljucivsi vrijeme s). Gornji racundokazuje dvarezultataodjednom: T1 je nezavisno od T0 i ima jednaku distribuciju. Slicno, T0, T1, . . . , Tj, . . . ,je niz nezavisnih eksponencijalno distribuiranih slucajnih varijabli s parametrom.Poglavlje4,stranica6 c FacultyandInstituteofActuaries2000 Markovljeviprocesiskokova Predmet1033 StrukturaMarkovljevihprocesaskokovaIako mnoge aktuarske primjene ukljucuju prijelazne intenzitete ovisne o dobi,glavne ideje je najbolje uvesti u jednostavnom slucaju vremenskihomogenogprocesakodkojegjePij(s, t)=Pij(0, t s)=Pij(t s), tesukaorezultattogaprijelazniintenzitetiijneovisniovremenu.3.1 VremenskihomogenslucajEksponencijalni karakter vremena zadrzavanja Poissonovog procesa nije slucajan:svojstvozaboravaP[T> t + u|T> t] = P[T> u] (15)kojekarakteriziraeksponencijalnodistribuiraneslucajnevarijablejenuzanzahtjev za vremena zadrzavanja vremenski homogenog Markovljevog procesa.PromotrimoprvovrijemezadrzavanjaT0= inf{t : Xt = X0}.Rezultat1:Prvo vrijeme zadrzavanja vremenski homogenog Markovljevog procesa skokovas prijelaznim intenzitetima ijje eksponenciajlno distribuirano s parametromi= ii=

j=iij. Drugimrijecima,P[T0> t|X0= i] = eit.Dokaz:Dogadajem {T0> t} = {Xs= X0, 0 s t}jeteskorukovati,jerukljucujekontinuumvremena0 s t. Stoga cemogaaproksimiratidiskretizacijomvremena. DenirajmodogadajeBn= {Xlt/2n= X0, l = 1, 2, . . . , 2n} .SadamozemoracunatiP[Bn|X0= i] =_Pii(t2n)_2n=_1 + iit2n+ o(12n)_2n.AliuocitedajeB1 B2 Bn. . . ,te {T0> t} = m=1Bm,tezatoP[T0> t|X0= i] = P[m=1Bm|X0= i]= limnP[nm=1Bm|X0= i] =limnP[Bn|X0= i]= limn_1 + iit2n+ o(12n)_2n= eiit= eit.c FacultyandInstituteofActuaries Poglavlje4,stranica7Predmet103 Markovljeviprocesiskokova 2000Kod Poissonovog procesa vrijeme skokova je sve, ali opcenito moramo takoderkarakterizirati i stanje u koje proces skace. To je izuzetno jednostavno: skoksedogadaizX0= iuXT0= jsvjerojatnoscuproporcionalnomprijelaznomintenzitetuijistovise, XT0jenezavisnoodvremenazadrzavanjaT0. Dabismotovidjeli,promatrajmozaj = i:P[Xt+h= j, t < T0 t + h|X0= i] = P[Xt+h= j, T0> t|X0= i]= P[Xt+h= j|X0= i, T0> t] P[T0> t|X0= i]= P[Xt+h= j|Xs= i, 0 s t]eit= Pij(h)eit.Sadapodijelimosahi pustimoh 0: zajednickavjerojatnosnadistribu-cija/gustocaodXT0iT0jeuvjetnonaX0= ijednakaijeit.Drugim rijecima, ona je produkt gustoce vremena zadrzavanja ieiti ij/i.To dokazuje dva rezultat odjednom: vjerojatnost skoka iz stanja i u stanje jjeP[XT0= j|X0= i] =iji(j = i)i stovise,XT0jenezavisnosT0.Kao rezultat Markovljevog svojstva, slika je ista za uzastopne skokove: nakonsto je usao u neko stanje j, proces tamo ostaje eksponencijalno distribuiranovrijemesparametromj. Tadaskaceustanjeksvjerojatnoscujkj.Uocite daje srednje vrijeme zadrzavanjaustanjuj jednako1/j. Togasejevaznosjetiti kadaseprijelaznimintenzitetimapridruzujunumerickevrijednosti.3.2 NehomogenslucajPromatrajmosljedeci model dozivljenja: prijelaz iz stanjazivZustanjemrtavMdogadasesintenzitetom(t).&%'$&%'$ Z M(t)Poglavlje4,stranica8 c FacultyandInstituteofActuaries2000 Markovljeviprocesiskokova Predmet103Drugimrijecima,(t)jeintenzitetsmrtnosti.BuducidajeA(t) =_ (t) (t)0 0_,jednadzbeunaprijeddajutPZ Z(s, t) = (t)PZ Z(s, t) .RjesenjekojeodgovarapocetnomuvjetuPZ Z(s, s) = 1jePZ Z(s, t) = e

ts(x) dx. (16)Ekvivalentno, vjerojatnost da ce osoba dobi s prezivjeti daljni period duljinebaremwjewps= PZ Z(s, s + w) = e

s+ws(x) dx= e

w0(s+y) dy. (17)Formula(17) ilustrirapotrebuzavremenski ovisnimintenzitetimausm-rtnosti i mnogimdrugimaktuarskimmodelima: konstantabi doveladovjerojatnostidozivljenjawpsneovisneodobi, stojeapsurdanrezultat.U obliku u kojem je napisana, (17) je svojstvena specicnom modelu dozivljenjakoji promatramo. Medutim, ako se pravilno reinterpretira, to je samo primjeropceformule.Zaopceniti Markovljevproces skokovaXt, denirajmorezidualnovrijemezadrzavanjaRskao(slucajni)iznosvremenaizmedusisljedecegskoka:{Rs> w, Xs= i} = {Xu= i, s u s + w} .Formula (17) daje vjerojatnost da je Rs> w ako je dano stanjeZu trenutkus. Slijedeciistekorakekaoudokazurezultata1,opcenitosemozedokazatidajeP[Rs> w|Xs= i] = e

s+wsi(u) du. (18)Stovise,karakterizacijastanjaX(+)s= Xs+Rsukojeprocesskoci,slicnajehomogenomslucaju:P[X(+)s= j|Xs= i, Rs= w] =ij(s + w)i(s + w). (19)c FacultyandInstituteofActuaries Poglavlje4,stranica9Predmet103 Markovljeviprocesiskokova 2000Gornje nije samo zgodna slika ponasanja Markovljevog procesa skokova: to jetakoder jaki racunski alat. Zaista, uvjetovanjem na Rsi X(+)s, te koristenjemzakonapotpunevjerojatnosti,imamoPij(s, t) = P[Xt= j|Xs= i]=

l=i_ts0P[Xt= j|Xs= i, Rs= w, X(+)s= l]il(s + w)e

s+wsi(u) dudw=

l=i_ts0Plj(s + w, t)il(s + w)e

s+wsi(u) du. (20)To je integriranioblikjednadzbeunatrag, sto se moze provjeriti deriviranjempot. Formulamozeizgledatizastrasujuce,aliodgovaraintuiciji: buducidaje j = i, proces mora u nekom trenutku iskociti iz i. Po (18), prvi skok nakonvremenasdogodiseus + wsvjerojatnosnomgustocomi(s + w)e

s+wsi(u) du.Po(19)proces ceskocitiulkrozvremenskiperiod[s, s + w]svjerojatnostiij(s+w)i(s+w) . Preostajeizvesti prijelazizl uj krozpreostali vremenski period[s + w, t]: .. is s + wltjKada je i = j imamo dodatni clan e

tsi(u) du, jer proces moze ostati u stanjuikrozcijeliperiod[s, t].Akose umjestonaprvi skoknakons fokusiramonazadnji skokprije t,mozemodobitiintuitivniizvodintegriranogoblikajednadzbeunaprijed.Zai = jtoizgledaPij(s, t) =

k=j_ts0Pik(s, t w)kj(t w)e

ttw j(u) dudw. (21)si .. jt w tkPoglavlje4,stranica10 c FacultyandInstituteofActuaries2000 Markovljeviprocesiskokova Predmet103ZapotpunizvodtejednadzbetrebasepozvatinasvojstvatekucegvremenazadrzavanjaCt,naimevremenaizmeduzadnjegskokait:{Ct w, Xt= j} = {Xu= j, t w u t} .4 Primjene4.1 BolestismrtOpisimostanjaosobe kaozdrav, bolestanili mrtav. Zadane vre-menskiovisne (tj. dobno ovisne) prijelazne intenzitete,mozemo konstruiratiMarkovljevprocesskokovasaskupomstanja {Z, B, M}:&%'$M&%'$Z&%'$B

(t) (t)(t)(t)MatricaA(t)uKolmogorovljevimjednadzbamajeA(t) =__(t) (t) (t) (t)(t) (t) (t) (t)0 0 0__Specijalno,Z(t) = (t) + (t),B(t) = (t) + (t),M= 0.Najjednostavnije je izracunati vjerojatnosti zaostati neprekidnozdravilineprekidnobolestankroz[s, t]. Koristeci(18)tevjerojatnostisuP[Rs> t s|Xs= Z] = e

ts((u)+(u)) du(22)c FacultyandInstituteofActuaries Poglavlje4,stranica11Predmet103 Markovljeviprocesiskokova 2000iP[Rs> t s|Xs= B] = e

ts((u)+(u)) du.Prijelaznevjerojatnostimogusepovezatijednasdrugomkaou(20)i(21).NaprimjerPZB(s, t) =_ts0PBB(s + w, t)(s + w)e

s+ws((u)+(u)) dudw. .. Zs s + wBtBLakosemozerukovati dodatnimuvjetimanarezidualnoili tekucevrijemezadrzavanja. Promotrimo, naprimjer, vjerojatnost dajeosobabolesnautrenutkuti dajebilabolesnabaremw, akojedanodajeosobazdravautrenutkus. Tavjerojatnostje:P[Xt= B, Ct> w|Xs= Z] =_ts0PZZ(s, t v)(t v)e

ttv((u)+(u)) dudv .sZ .. Bt v t w tZ4.2 BrakOpisimobracni status neke osobe kaojedanodsljedecih: nezenja(nikadozenjen)(N),ozenjen(O),udovac(U),rastavljen(R),mrtav(). MozemodeniratiMarkovljevprocesskokovakaonaslici:Poglavlje4,stranica12 c FacultyandInstituteofActuaries2000 Markovljeviprocesiskokova Predmet103

N

(t)``````````(t)

R

-

.

U

O

(t)````````(t)`r(t)

(t)d(t)(t)Zbogjednostavnosti smouzeli daintenzitetsmrti (t)neovisi obracnomstatusu. Ovaj model se moze proucavati tocno kao i primjer 4.1. Na primjer,vjerojatnost dajeosobaozenjenautrenutkut i dajebilaozenjenakrozperiod trajanja barem w, ako je dano da je osoba nezenja u trenutku s je (uzpretpostavkuw < t s):P[Xt= O, Ct> w|Xs= N] =_tws(PNN(s, t v)(t v) + PNU(s, t v)r(t v)+ PNR(s, t v)(t v)) e

ttv((u)+(u)+(u)) dudv .sN .. Ot v t w tkgdjejekbilokojeodstanjakojevodidoO,naimeN,UiR.4.3 SklonostnesrecamaPromotrimo sljedeci model za ukupan broj nesreca Xt koje ima neki vozac zavrijemeperioda[0, t]: XtjevremenskihomogenMarkovljevprocesskokovac FacultyandInstituteofActuaries Poglavlje4,stranica13Predmet103 Markovljeviprocesiskokova 2000sprijelaznimintenzitetima(i = j):ij=_ + i akojej= i + 10 inace&%'$0

&%'$

+ 1&%'$2&%'$3

+ 2. . .&%'$

+ ii&%'$i + 1. . .Drugim rijecima, intenzitet nesreca raste linearno s vozacevom povijesti nesreca.PrijelaznamatricaprocesajeA =_____ 0 + 2 + 20......_____ajednadzbeunaprijedzaP0j(t)suP

00(t) = P00(t)P

0j(t) = ( + (j 1))P0 j1(t) ( + j)P0j(t), j> 0 .Te jednadzbe se rjesavajuistokaozaPoissonovproces: trazimorjesenjeuoblikuP0j(t) =j(t)e(+j)t. Slijedi danepoznatefunkcijejtrebajuzadovoljavati

j(t) = j1(t)( + (j 1)))et.Torjesavamorekurzivno,uzevsiuobzirpocetniuvjetj(0) = 0j:0(t) = 1, 1(t) =(et1), 2(t) =( + )22(et1)2, . . . ,j(t) =( + )( + 2) . . . ( + (j 1))j!j(et1)j.PrematomerjesenjejeP0j(t) =( + )( + 2) . . . ( + (j 1))j!jet(1 et)j.Poglavlje4,stranica14 c FacultyandInstituteofActuaries2000 Markovljeviprocesiskokova Predmet103Napomena:Buduci daje i=+i, vremenazadrzavanjaTiimajusvojstvodaje

i=0E[Ti] =

i=01+i= . Da smo izabrali ij= +i2 (j= i+1), imalibismo

i=0E[Ti ] =

i=01+i2< , te stoga P[

i=0Ti< ] = 1. Drugimrijecima, beskonacnomnogoprijelazasedogadaukonacnomvremenu. Tovodi na

j=0Pij(t) < 1 i do nejedinstvenosti rjesenja Kolmogorovljevih jed-nadzbi: zaista, denicijaprocesamorasedopuniti dodavanjemgranicnogstanja(kojesedostizenakonbeskonacnomnogoprijelaza)ispeciciranjemprijelaznogpravilaiznjega. Rezultirajuceprijelaznevjerojatnosticezado-voljavatioriginalnejednadzbeunatrag,alinejednadzbeunaprijed.4.4 BolestismrtovisniotrajanjuUprimjer4.1,MarkovljevosvojstvopovlaciP[Xt= Z|Xs= B, Cs= w] = P[Xt= Z|Xs= B] .Drugim rijecima, trajanje tekuce bolesti nema utjecaja na buduce zdravstveneprognoze. Da bismo uklonili to nezeljeno svojstvo, modiciramo model dopustajucida intenziteti prijelaza iz stanja Bovise o tekucem vremenu zadrzavanja Ct.&%'$M&%'$Z&%'$B

(t) (t)(t)(t, St)Mozeseucinitidanastovodivandometaovogpoglavlja,buducidasevri-jednosti od Ct sada moraju ukljuciti u stanja, tako da prostor stanja prestajebitiprebrojivim. Medutim, okvirsekcije3.2sejosuvijekmozekoristiti, uzuvjetpazljivoguvjetovanjanarelevantnotekucevrijemezadrzavanja.c FacultyandInstituteofActuaries Poglavlje4,stranica15Predmet103 Markovljeviprocesiskokova 2000Ustvari, buduci daprijelazni intenziteti i neoviseoCt, vjerojatnostostajanjaneprekidnozdravkroz[s, t] jekaoi prijedanas (22). Sdrugestrane, za izracunati vjerojatnost da se ostane neprekidno bolestan kroz [s, t]uzdantekuciperiodbolesti[s w, s],trebamoobnavljativrijednostiodikakobolestnapreduje:P[Xt= B, Rs> t s|Xs= B, Cs= w] = e

ts((u,ws+u)+(u,ws+u)) du.s w u s t .. w s + uZBZazavrsni primjer, vjerojatnostbiti zdravutrenutkut akojedanodajeosoba bolesna u trenutku s, sa tekucim trajanjem bolesti wmoze se zapisatikao:PBwZ(s, t) = P[Xt= Z|Xs= B, Cs= w]=_t0e

vs((u,ws+u)+(u,ws+u)) du(v, w s + v)PZZ(v, t) dv .s w u s v .. w s + uZBtZ5 NumerickemetodeOpcenito se linearne obicne diferencijalne jednadzbe s vremenski ovisnim ko-ecijentima ne mogu rijesiti eksplicitno pomocu elementarnih funkcija. Stoganemozemoocekivati dacemonaci rjesenjeKolmogorovljevihjednadzbi uanalitickomobliku,osimuslucajudaprijelazniintenzitetiimajuvrlospeci-jalanoblik (na primjer konstante). Ukratko cemo opisati tri numerickemetode.Ovosusamoprimjerimetoda,dok ceodabirmetodeovisitiookolnostima.Poglavlje4,stranica16 c FacultyandInstituteofActuaries2000 Markovljeviprocesiskokova Predmet1035.1 EulerovametodaMetodasesastoji jednostavnouzamjeni derivacijepot ujednadzabi un-aprijed(7)konacnomdiferencijom. Drugimrijecima, izaberemokorakhiracunamoP(s, s + mh),m = 0, 1, 2, . . . ,pomocusljedecerekurzivnesheme:_P(s, s + (m + 1)h) = P(s, s + mh) + hP(s, s + mh)A(s + mh)P(s, s) = IgdjejeIjedinicnamatricaselementimaij.Tametodavodidogresakaredah,drugimrijecima,polovljenjevelicineko-rakaprepolovitcegresku. Utockamakojenisutockemrezet =s + mh,P(s, t)seprocjenjujelinearnominterpolacijom.5.2 Runge-KuttametodacetvrtogredaTo je znacajno poboljsanje uodnosuna Eulerovumetodu, buduci da jepridruzenagreskasadaredah4(tj. polovljenjevelicinekorakcesmanjitigreskuzafaktor16).Slijedishema:___P(s, s + (m + 1)h) = P(s, s + mh) +h6[C1(s, m) + 2C2(s, m) + 2C3(s, m)+C4(s, m)]P(s, s) = IgdjejeC1(s, m) = P(s, s + mh)A(s + mh)C2(s, m) = [P(s, s + mh) +h2C1(s, m)]A(s + (m +12)h)C3(s, m) = [P(s, s + mh) +h2C2(s, m)]A(s + (m +12)h)C4(s, m) = [P(s, s + mh) + hC3(s, m)]A(s + mh) .5.3 IntegralnioblikDrugi pristupjekrenuti odintegralnogoblikaKolmogorovljevihjednadzbiunaprijed(iliunatrag),vidisekciju3.2:Pik(s, t) = ike

tsi(u) du+

j=k_ts0Pij(s, t w)jk(t w)e

ttw k(u) dudw.c FacultyandInstituteofActuaries Poglavlje4,stranica17Predmet103 Markovljeviprocesiskokova 2000NizuzastopnihaproksimacijaP(n)ij(s, t)denirandoljeimakorisnosvojstvorastapremarjesenjukadan (provjeriteindukcijom):_P(0)ik(s, t) = ike

tsi(u) duP(n+1)ik(s, t) = ike

tsi(u) du+

j=k_ts0P(n)ij(s, t w)jk(t w)e

ttw k(u) dudw.Za numericku implementaciju integrale treba aproksimirati, na primjer koristenjemSimpsonovogslozenogpravila: zanumerickoracunanjeintegrala_baf(x) dx,podijelimointerval[a, b]na2mintervalajednakeduljineh =b a2mikoristimoh3(f(a) + f(b)) +2h3m1

j=1f(a + 2jh) +4h3m

j=1f(a + (2j 1)h)kaoaproksimacijuod_baf(x) dx. Mozeteocekivatigreskuredah4.Tametodamozesekoristitiuprimjeru4.5,teu4.1i4.3.Poglavlje4,stranica18 c FacultyandInstituteofActuaries2000 Analizavremenskihnizova Predmet103POGLAVLJE5-GLAVNIPOJMOVIUOSNOVIANALIZEVREMENSKIHNIZOVANastavni ciljevi: (v) Denirati i primjeniti glavne pojmove nakojimasetemeljianalizamodelavremenskihnizova.1. Objasniti pojam i opca svojstva stacionarnog, I(0), i integriranog, I(1),jednodimenzionalnogvremenskogniza.2. Objasnitipojamstacionarnogslucajnogniza.3. Objasnitipojamlteraprimjenjenognastacionaranslucajanniz.4. Upoznati notaciju za operator pomaka unatrag, operator diferenciranjaunatrag, te pojmove korijena karakteristicne jednadzbe vremenskogniza.5. Objasniti pojmovei osnovnasvojstvaautoregresivnih(AR) vremen-skih nizova, pokretnih sredina (MA), autoregresivnih pokretnih sredina(ARMA)iautoregresivnihintegriranihpokretnihsredina(ARIMA).6. Objasniti pojmove i svojstva diskretnih slucajnihsetnji i slucajnihsetnjisnormalnodistribuiranimprirastima,saibezpomaka.7. Objasniti osnovne pojmove vremenskih nizova u frekvencijskoj domeni.8. Objasnitiosnovnepojmovevisedimenzionalnihvremenskihnizova.9. Objasnitipojamkointegriranogvremenskogniza.10. Pokazati da izvjesni jednodimenzionalni vremenski nizovi imaju Markovl-jevo svojstvo i opisati kako preurediti jednodimenzionalni vremenski nizuvisedimenzionalniMarkovljevmodel.11. Skicirati procesidentikacije, procjenei dijagnozevremenskihnizova,kriterije zaodabir medumodelimai dijagnosticki test koji se mozeprimjenitinaostatkevremenskognizanakonprocjene.12. Objasnitiosnovnepojmovemodelaprijenosnefunkcije.c FacultyandInstituteofActuaries Poglavlje5,stranica1Predmet103 Analizavremenskihnizova 200013. Opisati ukratkodruge nestacionarne, nelinearne modele vremenskihnizova.14. Opisati jednostavneprimjenemodelavremenskihnizova, ukljucujucislucajnusetnju, autoregresivnei kointegriranemodeleprimjenjenenainvesticijskevarijable.1 SvojstvajednodimenzionalnihvremenskihnizovaJednodimenzionalni vremenski niz(engl. univariate time series) je niz opazanja{xn}Nn=1, svako zabiljezeno u pravilnimvremenskimintervalima t0+n,n =1, 2, . . . , N. Na primjer, niz dnevnihzakljucnihcijena dionica, pn,tvori vremenski nizgdjeje jedan(trzisni) dan, at0danprijenegostojezabiljezenoprvoopazanje. Nizmjesecnihiznosainacijetvorivremenskinizgdjeje jedanmjesec. Karakteristicnoobiljezjevremenskognizajetodajeredopazanjavazaninijenebitankaokodslucajnoguzorka. Naprim-jer, listadnevnihpovratanaFTSE100dionicenekogodredenogdananijevremenski niz, i redpodatakaulisti jeirelevantan. Uistovrijeme, listavrijednosti odFTSE100indeksauzetanekogodredenogdanaurazmacinaod jedne minute jeste vremenski niz, i uredaj podataka u listi je od najvecegznacaja.Tocnu vrijednost k-tog opazanja xkje u pravilu tesko predvidjeti u trenutkubiljezenjaprethodnogopazanja. Zbogtograzlogasevremenskinizovimod-elirajuslucajnimprocesimasdiskretnimvremenom{Xn}Nn=1 {X1, X2, . . . , XN}, (1)koji setakodernazivajui nizovimaslucajnihvarijabli. Odredenvremenskiniz(nizopazanja,ilipodataka, {xn}Nn=1)setadainterpretirakaorealizacijaslucajnogprocesa {Xn}Nn=1. Umodernojliteraturi seterminvremenski nizcestokoristiizapodatke,izaproceskojegsutipodacirealizacija.Cesto je pogodno koristiti opcenitije klase slucajnih procesa nego one dane sjednakosti(1). Modeliratcemovremenskiniznizomslucajnihvarijabli. Tomozebitibilokonacannizslucajnihvarijabli{Xn}Tn=S {XS, XS+1, XS+2, . . . , XT} ,Poglavlje5,stranica2 c FacultyandInstituteofActuaries2000 Analizavremenskihnizova Predmet103bilojednostranobeskonacannizslucajnihvarijabli{Xn}n=S {XS, XS+1, XS+2, . . . , } ,bilodvostranobeskonacannizslucajnihvarijabli{Xn}n= {. . . , X2, X1, X0, X1, X2, . . . } .Postoje dva razloga za uvodenje beskonacnih nizova slucajnih varijabli. Prvo,akojedanproizvoljankonacanvremenski niz, mozemokoristiti prikladandiobeskonacnognizakaomodel zataj niz. Nataj nacinmozemokoristitijedanbeskonacannizslucajnihvarijabli zamodeliranjevremenskihnizovabilo koje duljine. Drugi razlog je da se nekim matematickim pojmovima, kaokonvergencijipremaekvilibriju,mozedatipreciznoznacenjesamouslucajubeskonacnognizaslucajnihvarijabli.Stacionarni ili I(0) vremenski nizovi su opisani u sekciji 2. Njihovo dugorocnoponasanjesenemijenja. Akosedrugi nizdobijesumiranjemuzastopnihclanovaI(0) niza, rezultat je integrirani ili I(1) niz. Njegovodugorocnoponasanjeopcenitonijestacionarno, negosemijenjas vremenomkakosedodajevise clanova. Njih cemodiskutiratiusekciji4.2 StacionarnislucajninizoviStacionarni i slabostacionarni slucajni nizovi sudenirani upoglavlju2.Teorijastacionarnihslucajnihprocesaigravaznuuloguuteorijivremenskihnizova, jer sekalibracijamodelavremenskihnizova(tojest, procjenavri-jednosti parametara modela koristenjem povijesnih podataka) moze provestisamo u slucaju stacionarnih vremenskih nizova. Nestacionarni vremenski ni-zovitrebajusetransformiratiustacionarne,prijenego stosemozeprovestikalibracija.Kovarijanca bilo kojeg para elemenata Xri Xsstacionarnog niza {Xn}n=ovisi ori ssamokrozrazlikur s. Zbogtogsvojstvamozemodeniratiautokovarijacijskufunkciju(h)stacionarnogslucajnogprocesa {Xn}n=kakoslijedi(r s) cov(Xs, Xr) = E(XsXr) E(Xs)E(Xr) .Zajednickavarijancaelemenatastacionarnogprocesadanajesa(0) = E(X2r) E(Xr)2.c FacultyandInstituteofActuaries Poglavlje5,stranica3Predmet103 Analizavremenskihnizova 2000Autokorelacijskafunkcijastacionarnogprocesadenirasesan=(n)(0).Primjer. Jednostavna familija slabo stacionarnih procesa su procesi bijelogsuma. Slucajni proces {en}n=je bijeli sum,ako je E(en) = za svaki n,i(h) = cov(en, en+h) =_2akojeh = 00 inaceUslucaju=0, bijeli sum {en}n=sezovecentrirani bijeli sum(engl.zero-mean white noise). Vazan predstavnik procesa bijelog suma je niz neza-visnihjednakodistribuiranihslucajnihvarijablisazajednickimocekivanjemivarijancom2.Pojamnenegativnodenitnefunkcijeigravaznuuloguuteoriji vremenskihnizova. Funkcijaf(k) denirananacjelobrojnimvrijednostimakzovesenenegativno denitna, ako za svaki skup realnih brojeva 1, 2, . . . , n, i bilokojiskupcijelihbrojevak1, k2, . . . , kn,funkcijazadovoljavan

j=1n

l=1jlf(kjkl) 0 .Sljedecasvojstvasuposljedicadenicijeautokovarijacijskefunkcije.Rezultat2.1.Autokovarijacijskafunkcija(n)stacionarnogslucajnogprocesaje:(a) parnafunkcija,tojest,(n) = (n);(b) nenegativnodenitnafunkcija.Dokaz. Buduci da autokovarijacijska funkcija (n) = cov(Xl, Xl+n) ne ovisiol,uocimodaimamo(n) = cov(Xln, Xln+n) = cov(Xln, Xl) = cov(Xl, Xln) = (n) .Stogajeautokovarijacijskafunkcijaparnafunkcija.Zadokazdrugetvrdnjepropozicije, promotrimoproizvoljankonacanskuprealnihbrojeva1, 2, . . . , n, i bilokoji skupcijelihbrojevak1, k2, . . . , kn.Poglavlje5,stranica4 c FacultyandInstituteofActuaries2000 Analizavremenskihnizova Predmet103Oznacimo= E(Xk). Ocekivanavrijednostnenegativneslucajnevarijablejenenegativna. ZatoE____n

l=1l(Xkl)_2___ 0 .SdrugestraneE____n

l=1l(Xkl)_2___= E_n

l=1l(Xkl)n

j=1j(Xkj )_=n

l=1n

j=1ljE[(Xkl)(Xkj )] =n

l=1n

j=1lj(klkj) .Stogajeautokovarijacijskafunkcijazaistanenegativnodenitna.Drugavaznakarakteristikastacionarnogslucajnogprocesajeparcijalnaau-tokorelacijskafunkcija {(k)}k=1deniranasa(k) =detPkdetPk.gdjejePkk kautokorelacijskamatricaPk=_______1 12 k111 1 k2211 k3...............k1k2k3 1_______tojest, Pk= {pi,j}k ki=1,j=1, gdjejepi,j=|ij|, aPkjePkukojoj jezadnjistupaczamijenjensa(1, 2, . . . , k)T. Naprimjer,(1) = 1,i(2) =det_1 112_det_1 111_=2211 21.Analiticko racunanje determinante u deniciji parcijalne autokorelacijske funkcijeje cesto tesko. Unatoc tome, parcijalna autokorelacijska funkcija (k) k,kc FacultyandInstituteofActuaries Poglavlje5,stranica5Predmet103 Analizavremenskihnizova 2000mozeseracunatirekurzivnoizrelacijak,k=_1akojek = 1k

k1n=1 k1,nkn1

k1n=1 k1,nnakojek = 2, 3, . . .,ik,n= k1,nk,kk1,kn,zan = 1, 2, . . . , k 1.Jedan od glavnih problema u teoriji vremenskih nizova je pronaci model kojegje dani vremenski niz {x1, x2, . . . , xn} vjerojatna realizacija. Iako je potpunaspecikacijatakvogmodeladelikatanproblem, nekevaznekarakteristikesemogu procijeniti koristenjemsljedecih standardnih recepata. Zajednickoocekivanje(ilisredina)stacionarnogmodelamozeseprocijenitikoristenjemocekivanjauzorka =1TT

k=1xk .Autokovarijacijskafunkcija(k)mozeseprocijenitikoristenjemautokovari-jacijeuzorka k=1TT

l=k+1(xl )(xlk ) .Autokorelacijskafunkcijakmozeseprocijenitikoristenjemrk= k 0.Parcijalnaautokorelacijskafunkcijamozeseprocijenitikoristenjem(k) =detPkdetPk,gdje suPkiPkiste matrice kao Pki Pkali u kojima su kzamijenjeni svojimprocjeniteljimark.3 FiltriranjevremenskihnizovaOperacije na vremenskom nizu {xn}n=(ulazni vremenski niz) se ponekadzovu ltriranje. Stvaranjenovog vremenskog niza {yn}n= (izlazni vremen-ski niz)koristenjemlinearnihtezinskihsumayn=

k=akxnkjeprim-jenalinearnogltera, gdjesetezine {ak}k=identicirajuslterom. CiljPoglavlje5,stranica6 c FacultyandInstituteofActuaries2000 Analizavremenskihnizova Predmet103ltriranjajemodikacijapodataka(ulaznogniza)dabiseispuniliodredeniciljevi, ili dabi serazotkrilaspecicnaobiljezjapodataka. Vazanpredmetjekonstrukcijalinearnihlterazaspecijalnesvrhekojimoguispunititecil-jeve. Naprimjer,vazanproblemuanaliziekonomskihvremenskihnizovajeotkrivanje,izolacijaiotklanjanjedeterministickogtrenda.Upraksi, ltrirani vremenski nizjekonacanniz {xn}Nn=1, lter {ak}k=sadrzi samokonacan(i relativnomali uusporedbi sN)broj komponenatarazlicitihodnule, ak=0zak>t i k p .ZajednostavneslucajeveodMA(p)mogucejeeksplicitnoizracunati parci-jalnuautokorelacijskufunkciju. Promotrimoslucajni proces MA(1). Au-tokorelacijskafunkcijadanajesk=___1, akojek = 0,11+21, akojek = 1,0, akojek 2 .Prematomesuk kmatricePkiPkdanesPk=__________1 10 0 011 10 00 11...............0 0... 1 10 0 11__________i Pk=_________1 10 0 111 10 00 11............... 10 0 11 00 0 10_________Izracundeterminantedet Pkjedirektandet Pk= (1)k+1k1(1 +21)k.Izracundeterminantedet Pkzahtijevavisetruda. Preskocitcemoracuneisamonapisatirezultat:det Pk=1 2(k+1)1(1 21)(1 + 21)k.StogajeparcijalnaautokorelacijskafunkcijaslucajnogprocesaMA(1)danas(k) = (1)k+1(1 21)k11 2(k+1)1.Poglavlje5,stranica20 c FacultyandInstituteofActuaries2000 Analizavremenskihnizova Predmet103AutoregresivnimodelsostacimapokretnihsredinaDenicija5.4.Centriran autoregresivni proces s ostacima pokretnih sredina je niz slucajnihvarijabli {Xn}n=sdeniranrelacijomXn= 1Xn1 +2Xn2 + +pXnp +en +b1en1 +b2en2 + +bqenq(16)gdje je {en}n=centriran bijeli sum. Notacija ARMA(p, q) se cesto upotre-bljavazatakveslucajneprocese.Koristenjem operatora pomaka unatrag Bgornju deniciju mozemo zapisatiukompaktnomobliku(B)Xn= (B)en,gdjesu(x) = 1 1x 2x2 pxp,i(x) = 1 + b1x + b2x2+ + bqxq,polinomistupnjap,odnosnostupnjaq. ARMA(p, q)modelsocekivanjemdeniranjes(B)(Xn) = (B)en.Analogno kao kod AR(p) modela, za potpunu deniciju ARMA(p, q) modelatrebamospeciciratippocetnihuvjetaXsp, Xsp+1, . . . , Xs1.Najjednostavniji primjer ARMA(p, q) modela je ARMA(1, 1) model denirans_Xn= + (Xn1) + en + ben1Xs1= + x ,(17)gdje je {en}n=s niz nezavisnih normalnih varijabli sa zajednickim ocekivanjemivarijancom2. DokazsljedecepropozicijeanaloganjedokazuRezultata5.1. Dokaztogrezultataizlazivanokvirapredavanja.Rezultat5.4.Nekaje {Xn}n=sARMA(1, 1)procesdeniranjednadzbom(17). TadajeXn= + ns+1x + nsbes1 +_1 +b_ns1

k=0nskes+k + enE(Xn) = + ns+1x + nsbes1,c FacultyandInstituteofActuaries Poglavlje5,stranica21Predmet103 Analizavremenskihnizova 2000iVar(Xn) =21 2_1 + 2b + b2[(b2+ 1) + 2b]2(ns)+1.Zal = 0,cov(Xn, Xn+l) = 2|l|11 2_(1 +b)( + b) [(b2+ 1) + 2b]2(ns+1).ARMA(p, q)modeli nasljedujumnogasvojstvaAR(p)modela. Naprimjer,analognoAR(1) modelu, ARMA(1, 1) model je nestacionaran. Medutim,nestacionarnostjesamoprolaznogtipaakoje || p. To jest, parcijalna autokorelacijska funkcija uzorka(k) trebabitiodrezanaunekojvrijednostik = p.Teorijska autokorelacijska funkcija kMA(q) modela je nula za k > q. Stoga,ako je {zn}Nn=d realizacija MA(q) modela, tada autokorelacijska funkcija uzorkark(izracunata za {zn}Nn=d) treba poprimiti vrijednosti u 95% pouzdanom in-tervalu[1.96r, 1.96r], gdjejer= N1_1 + 2q

l=1r2l_,Poglavlje5,stranica38 c FacultyandInstituteofActuaries2000 Analizavremenskihnizova Predmet103za svaki k >q. To jest, autokorelacijska funkcija uzorka rktreba bitiodrezanaunekojvrijednostik = q.Prema tome, ako je(k) odrezano u nekoj vrijednosti k = p, tada se AR(p)pokusnoidenticirakaomodel za {zn}Nn=d, aARIMA(p, d, 0) sepokusnoidenticira kao model za {xn}Nn=0. S druge strane, ako je rkodrezano u nekojvrijednosti k = q, tada se MA(q) pokusno identicira kao model za {zn}Nn=d,aARIMA(0, d, q)sepokusnoidenticirakaomodelza {xn}Nn=0.Akoni(k) ni rknisuodrezani, tadatrebamotraziti ARMA(p, q) modelsvrijednostimapi qkojenisunula. Potrebnojenacrtati grafoveautoko-relacijske funkcije uzorka rk i parcijalne autokorelacijske funkcije uzorka(k),i vizualno usporediti sa slicnim grafovima teorijskih autokorelacijskih funkcijaki (k) za razne vrijednosti p i q. Treba identicirati one vrijednosti pi qkojedajunajboljuvizualnuprilagodbuteorijskihi uzorackihgrafova. Akonekolikovrijednosti odpi q dajuvizualnoekvivalentne prilagodbe, tadatrebaodabratiminimalnemogucevrijednostipiq(princip stedljivosti).Procjena.Nakonstosuidenticirane vijednosti zapi q, problempostaje procjenavrijednostiparametara1, 2, . . . , pi1, 2, . . . , qzaARMA(p, q)modelZn= 1Zn1+2Zn2+ +pZnp+en+1en1+2en2+ +qenq . (28)Ukolikovrijednostizapiqnisuprevelike,problemprocjeneseuvijekmozerijesiti numericki. Glavnaidejajeprvoizracunati vrijednosti od {en}Nn=dkoristeci {zn}Nn=di relacije (28). Nakon toga trazimo vrijednosti za i kojeminimizirajuvarijancuuzorka 2(1, 2, . . . , p; 1, 2, . . . , q) =1NN

l=de2l.Sljedeciprimjerilustriraglavnekorakerjesavanjaproblemaprocjene.Pretpostavimo da je dan {zn}Nn=d, te da su preliminarno identicirane vrijed-nostiparametarapiqjednakep=q=1. Realizacija {zn}Nn=dARMA(1, 1)procesazadovoljavazn= zn1 + en + en1,gdjeje {en}Nn=d1realizacijabijelogsuma. Koristenjemsljedecegpostupkamozemo izracunati varijancu uzorka (, ) za sve cvorove mreze = 0.9, 0.8, . . . , 0.8, 0.9i= 0.9, 0.8, . . . , 0.8, 0.9. Uzmimoprvipodatakzdkaopocetniuvjet, istavimoed+1= zd+1zd.c FacultyandInstituteofActuaries Poglavlje5,stranica39Predmet103 Analizavremenskihnizova 2000Preostaleekracunamoiterativnokoristeciek= zkzk1ek1.Nademotocku(0, 0)umrezisnajmanjomvrijednostiod 2(, ) =N

k=d+1e2k .Reduciramo korak mreze na 0.01, napravimo novu mrezu oko (0, 0) ipronademoboljuaproksimacijuzai. Ponavljamosvedokprocijeniteljinisupoznatidonatrazenutocnost.Dijagnostickaispitivanja.Najjednostavniji model vremenskog niza je niz nezavisnihi jednako dis-tribuiranih normalnih slucajnih varijabli {Xn}n=0, ARIMA(0, 0, 0) s ocekivanjemi varijancom procijenjenim iz podataka {xn}Nn=0 koristenjem ocekivanja i vari-jance uzorka. Medutim, taj model cesto ne pruza odgovarajuci opis podataka{xn}Nn=0, jerneprolazi doljeopisanedijagnosticketestove. Idejaizamod-eliranja vremenskih nizova je pronaci skup operacija koje transformiraju po-datke {xn}Nn=0uvjerojatnurealizacijunizanezavisnihnormalnihslucajnihvarijabli. Na primjer, AR(1) model Xn= Xn1+en je odgovarajuci opis po-dataka {xn}Nn=0, ako operacija 1B prevodi podatke u takvu realizaciju. Tojest,akoje {xnxn1}Nn=1vjerojatnarealizacijacentriranogbijelog suma.Nakon pokusne identikacije ARIMA(p, d, q) modela i izracuna procjena , , 1, . . . , p,b1, . . . ,bq,trebamonapravitidijagnostickoispitivanje. Ciljdijag-nostickogispitivanjajeustanovitidalijeskupbrojeva {en}Nn=1izracunatizpodataka {xn}Nn=1koristenjemrelacijaxn= 1xn1 + + pxnp + en +b1en1 + +bqenq ,vjerojatnarealizacijanizanezavisnihi jednakodistribuiranih(normalnih)slucajnihvarijabli. Brojevi{en}Nn=1se uobicajeno nazivajuostaci (engl.residuals).Cestosekoristesljedecaispitivanja.Kontrolagrafaod {en}Nn=1.Vizualnakontrolagrafaostataka {en}Nn=1cestopomaze identicirati jakuovisnost velicine uktuacija po n. Tipicni primjeri su trend,ciklicka kompo-nenta, i nekonstantnost varijance. Nije vjerojatno da ce realizacija niza neza-visnih i jednako distribuiranih slucajnih varijabli imati ista od toga. Takoder,Poglavlje5,stranica40 c FacultyandInstituteofActuaries2000 Analizavremenskihnizova Predmet103oko95%ostataka {en}Nn=1bi trebalolezati izmedu 1.96 i 1.96 , akojeidenticiraniARIMA(p, d, q)modelodgovarajucizaopispodataka.Spektralnitest.Spektralnagustocabijelogsumajekonstantaf()=22, vidi Primjer7.2.Tucinjenicumozemoiskoristitizadizajntestanezavisnostiistacionarnostiostataka {en}Nn=1. Procijeniteljzaf()danjesf() =12 0 +1N/2

n=1 n cos(n) ,gdje je n autokovarijanca uzorka od {en}Nn=1, vidi Sekciju 2. Visoki uski siljciuf()oznacavajuprisutnostciklickihkomponenatau {en}Nn=1,naprimjer,sezonskukomponentu.Sirokivrhkodniskefrekvencijeoznacavaprisutnosttrendau {en}Nn=1.Kontrolaautokorelacijskihfunkcijauzorkaod {en}Nn=1.Autokorelacijske funkcije uzorka niza nezavisnih i jednakodistribuiranih slucajnihvarijabliZ1, Z2, . . . , Zn,danesak=

Nkl=1(Zl)(Zl+k)

Nl=1(Zl)2,imajudistribucijukojaje pribliznonormalnazavelike vrijednosti odN,s ocekivanjemnulai varijancomN1. Dakle, oko95%vrijednosti odktrebalezati izmeduograda 1.96/N. Pretpostavimoli dasmopodacima{x1, x2, . . . , xN}prilagodili odgovarajuci ARIMAmodel, isti rezultattrebavrijeditizaautokorelacijskefunkcijeuzorkaostataka {en}Nn=1.Portmanteautest.Umjesto provjere da li svaki kpada unutar 95% -tnog intervala pouzdanosti[1.96/N, 1.96/N], mogucejepromatrati jednustatistikukojaovisi osvimk,k = 1, 2, . . . , M,gdjejeMrecimo20. Testjezasnovanna cinjenicidaslucajnavarijablaQM= NM

k=12kimapriblizno2distribucijusM (p + q)stupnjevaslobode. AdekvatnostmodelasestogaodbijananivouakojeQM> 21(M p q) ,c FacultyandInstituteofActuaries Poglavlje5,stranica41Predmet103 Analizavremenskihnizova 2000gdjeje21(M p q)1 kvantil2distribucijesM p qstupnjevaslobode.Brojanjetocakaokreta.Zanizbrojevay1, y2, . . . , yNkazemodaimatockuokretauvremenuk,akojeili yk1yk+1, ili yk1>yki yk yk1. Oznacimolitajbroj sa S, tada je E(S) =12(N1) i Var(S) =112(N+1) za niz Y1, Y2, . . . , YNnezavisnihslucajnihvarijablisneprekidnomdistribucijom. Stogabiureal-izacijiodY1, Y2, . . . , YNbrojvrijednostiktakvihdajeyk> yk1trebaobitiunutar95%-tnogintervalapouzdanosti_12(N 1) 1.96_N+ 112,12(N 1) + 1.96_N+ 112_.Provjeranormalnosti.Promotrimoniz {en}Nn=1iuredenestatistikee(1)< e(2)< < e(N).Tojest, {e(n)}Nn=1jeniz {en}Nn=1preuredenporastucemuredaju. Akojeniz ostataka e1, e2, . . . , eNrealizacija niza nezavisnih i jednako distribuiranihnormalnihslucajnihvarijabli,tadabigraftocaka_1__k 12_/N_, e(k)_, k = 1, 2, . . . , N,trebaobitipribliznolinearan. Ovdjeje1(x)inverzstandardnenormalnefunkcijedistribucije.Poglavlje5,stranica42 c FacultyandInstituteofActuaries2000 Analizavremenskihnizova Predmet10312 ModeliprijenosnefunkcijeModeliranjepomocuprijenosnefunkcijejespajanjekonvencionalnogmod-eliranjavremenskihnizovai linearne regresije. Model prijenosne funkcijeukljucujejedanizlazniniz {Yn}Nn=1ijedan(ilivise)ulaznihnizova {Xn}Nn=1.Onpredvidabuducevrijednosti izlaznognizanaosnovi proslihvrijednostitognizai proslihvrijednosti ulaznogniza. Opci oblikmodelaprijenosnefunkcijejeYn= +p

k=1kYnk +q

l=1blXnl + Rn,gdjeje {Rn}n=1centriranstacionaranproces(ostaci),nezavisanodulaznogprocesa {Xn}Nn=1. Pretpostavlja se da se istom transformacijom stacionarnostiizlazni, odnosno ulazni proces, mogu prevesti u stacionarne procese {Un}Nn=1,odnosno {Vn}Nn=1.Za izgradnju modela prijenosne funkcije koristimo povijesne podatke {yn}Nn=1(izlazni vremenski niz)i {xn}Nn=1(ulazni vremenski niz). Izgradnjamodelaukljucujetrikoraka.Identiciranjemodelazaopisulaznogvremenskogniza.Identiciranje preliminarnog modela prijenosne funkcije za opis izlaznogvremenskogniza.Identiciranjemodelazaostatke.Korak1.Koristi setransformacijastacionarnosti zaprevodenjeulaznogvremenskogniza {xn}Nn=1uvremenski niz {vn}Nn=1. Koristi seistatransformacijasta-cionarnosti zaprevodenjeizlaznogniza {yn}Nn=1uvremenski niz {un}Nn=1.Koristi se Box-Jenkinsovpristupza identikacijuARMA(k, l) modela za{vn}Nn=1.Korak2.Identicirani model ARMA(k, l) sugerira transformaciju koja prevodi {vn}Nn=1urealizacijubijelogsuma {n}Nn=1. Izracunasevremenski niz {n}Nn=1, ikoristi istatransformacijazapredizbijeljivanjevremenskogniza {un}Nn=1.Oznacimopredizbijeljenivremenskinizs {bn}Nn=1.c FacultyandInstituteofActuaries Poglavlje5,stranica43Predmet103 Analizavremenskihnizova 2000Izracunasekorelacijskafunkcijauzorkaizmedu {n}Nn=1i {bn}Nn=1rk(, b) =

Nn=1(n )(bnb)_

Nn=1(n )2_1/2_

Nn=1(bnb)2_1/2za, recimo, k = 20, 19, . . . , 19, 20, gdje su ib ocekivanjauzorkaod{n}Nn=1 i {bn}Nn=1. Korelacijska funkcija ne bi smjela imati statisticki znacajnevrijednosti razlicite odnule zanegativne k. Tojest, trebali bismoimatirk(, b) [1.96N1/2, 1.96N1/2], na 95%-tnom nivou pouzdanosti, za svakik < 0. U suprotnom, vremenski niz {xn}Nn=1nije vodeci indikator od {yn}Nn=1i ne moze se koristiti za modeliranje pomocu prijenosne funkcije od {yn}Nn=1.Svipozitivnizaostacikojiodgovaraju(znacajnim)vrijednostimaodrk(, b)razlicitimodnuletrebajuseidenticirati i koristiti zaformulacijuprelimi-narnogmodelaprijenosnefunkcije(B)Un=

+ Cw(B)BlVn + n. (29)UgornjojjednadzbiCjeparametarskaliranja,nsuostaci,l - minimalni zaostatak sa statisticki znacajnimvrijednostima korelacijerl(, b)razlicitimodnule,w(B) = 1 w1B w2B2 wrBr,(B) = 1 1B 2B2 sBs.Redovi ri spolinomaw(x)i (x)trebajuseidenticirati tehnikamaBox-Jenkinsovog pristupa. To znacidasetrebajunacrtatikovarijacijske funkcijeuzorka i vizualno usporediti s teorijskim kovarijacijskim funkcijama za raznevrijednosti od r i s. Nakon toga se trebaju procijeniti parametri w1, w2, . . . , wri1, 2, . . . , snumerickimmetodamaprocjeneBox-Jenkinsovogpristupa.Korak3.Izracunaju se vrijednosti ostataka {n}Nn=1u preliminarnommodelu pri-jenosne funkcije. Koristi se Box-Jenkinsov pristup za identiciranje ARMA(p, q)modela(B)n= (B)enzaopis {n}Nn=1.Model prijenosne funkcije za opis izlaznog vremenskog niza {yn}Nn=1dan je s(B)(B)Un= + C(B)w(B)BlVn + (B)en.Poglavlje5,stranica44 c FacultyandInstituteofActuaries2000 Analizavremenskihnizova Predmet10313 Neki specijalni nestacionarni i nelinearnimodelivremenskihnizovaBilinearnimodeli.Opca klasa bilinearnih modela ukljucuje slucajne procese {Xn}n=sdeniranerelacijomXn +p

k=1k(Xnk) = + en +r

k=1ckenk +m

l=1q

k=1blk(Xnl)enk,gdjeje {en}n=bijeli sum. Najjednostavnijipredstavnikklasebilinearnihmodelajeslucajniproces {Xn}n=sdeniranrelacijomXn + (Xn1) = + en + cen1 + b(Xn1)en1.Glavnakvalitativnarazlikaizmedubilinearnihmodelai modelaizARMAklasejetadamnogibilinearnimodelipokazujueksplozivnoponasanje.Autoregresivnimodelispragom.Jednostavanpredstavnikklaseautoregresivnihmodelaspragomjeslucajniproces {Xn}n=sdeniranrelacijomXn= +_(Xn1) + en, akojeXn1 d,b(Xn1) + en, akojeXn1> d .Granicni ciklusi su specicno obiljezje nekih modela iz autoregresivne klase spragom. To cini autoregresivne modele s pragom prikladnim za opis ciklickihfenomena.Autoregresivnimodelisaslucajnimkoecijentima.DrugamodikacijamodelaARklasesuautoregresivni modeli saslucajnimkoecijentima regresije. Jednostavan predstavnik je slucajni proces {Xn}n=sdeniranrelacijomXn= +___a(Xn1) + en, svjerojatnostip1,b(Xn1) + en, svjerojatnostip2,en, svjerojatnosti1 p1p2.Druginacinzapisadenicijeslucajnogprocesa {Xn}n=sjeXn= + n(Xn1) + en,c FacultyandInstituteofActuaries Poglavlje5,stranica45Predmet103 Analizavremenskihnizova 2000gdjeje {n}n=sniznezavisnihdiskretnihslucajnihvarijablisazajednickomdistribucijomP[ = a] = p1, P[ = b] = p2, P[ =