Markova lēmumu process (MDP)

Autors: Laura McKinney
Radīšanas Datums: 5 Aprīlis 2021
Atjaunināšanas Datums: 22 Jūnijs 2024
Anonim
Markova lēmumu process (MDP) - Tehnoloģija
Markova lēmumu process (MDP) - Tehnoloģija

Saturs

Definīcija - ko nozīmē Markova lēmumu process (MDP)?

Markova lēmumu pieņemšanas process (MDP) ir kaut kas tāds, ko speciālisti dēvē par “diskrēta laika stohastiskas kontroles procesu”. Tā pamatā ir matemātika, kuru 19. gadsimta beigās un 20. gadsimta sākumā sāka krievu akadēmiķis Andrejs Markovs.


Ievads Microsoft Azure un Microsoft Cloud | Šajā rokasgrāmatā jūs uzzināsit, kas ir mākonis skaitļošana un kā Microsoft Azure var palīdzēt jums migrēt un vadīt savu biznesu no mākoņa.

Techopedia skaidro Markova lēmumu procesu (MDP)

Viens no veidiem, kā izskaidrot Markova lēmumu pieņemšanas procesu un ar to saistītās Markova ķēdes, ir tas, ka šie ir mūsdienu spēles teorijas elementi, kuru pamatā bija vienkāršāki matemātiski pētījumi, ko pirms dažiem simtiem gadu veica krievu zinātnieks. Markova lēmumu pieņemšanas procesa apraksts ir tāds, ka tajā tiek pētīts scenārijs, kad sistēma atrodas kādā noteiktā stāvokļu kopumā, un tiek virzīts uz citu stāvokli, pamatojoties uz lēmumu pieņēmēja lēmumiem.

Markova ķēde kā modelis parāda notikumu secību, kurā dotā notikuma varbūtība ir atkarīga no iepriekš sasniegtā stāvokļa. Profesionāļi var runāt par “saskaitāmu valsts telpu”, aprakstot Markova lēmumu procesu - daži asociē Markova lēmuma modeļa ideju ar “nejaušas pastaigas” modeli vai citu stohastisku modeli, kura pamatā ir varbūtības (izlases veida gājiena modelis, ko bieži citē Wall Iela, modelē kapitāla kustību uz augšu vai uz leju tirgus varbūtības apstākļos).


Kopumā Markova lēmumu pieņemšanas procesi bieži tiek piemēroti dažām vismodernākajām tehnoloģijām, pie kurām šodien strādā speciālisti, piemēram, robotikā, automatizācijā un pētījumu modeļos.