Atbilde 1:

Markova process ir tāds, kurā vērtība, kuru nejaušais mainīgais var iegūt rīt, ir atkarīga no vērtības, kuru šodien ieguvis nejaušais mainīgais, bet nav atkarīga no nevienas no vērtībām, kuras nejaušais mainīgais var būt ieguvis pirms vakardienas.

Pieņemsim, ka es katru dienu veicu vienu USD 10 azartu. Katru dienu es vai nu

  • palielināt savu laimi par 10 USD, ar varbūtību 0,48 ORAtvērt savu laimi par 10 USD, ar varbūtību 0,52.

Mana laime pēc rītdienas azartspēlēm ir atkarīga tikai no tā, cik man ir naudas pēc šodienas azartspēles. Nav nozīmes tam, cik daudz naudas man šodien bija šodien.

Atjaunošanās process, kas pazīstams arī kā dzimšanas process, ir teorētisks modelis kopējam iedzīvotāju skaitam jebkurā laikā. Dzimšanu skaits ir nejaušs mainīgais lielums, un piedzimšanas var notikt nepārtrauktā vai diskrētā laikā. Tas ir viens no Markova procesa veidiem.

Diskrēts imitācijas notikuma process ir jebkura procesa simulācija (iespējams, tā ir mājasdarbu problēma vai uzdevums. Šajā gadījumā jūs simulējat Markova procesu.) Simulācija ir viens no iespējamiem ceļiem, pa kuriem Markova ķēde būtu varējusi ķerties. . Simulācija varētu izskatīties kā viena no 8 zemāk redzamajām azartspēļu paraugiem.