100% tevredenheidsgarantie Direct beschikbaar na betaling Zowel online als in PDF Je zit nergens aan vast
logo-home
Eerder door jou gezocht
Eerder door jou gezocht
logo
Complete samenvatting Operations Research II (OR2) €3,49
In winkelwagen
Snel navigeren naar
Voorbeeld
  2.  
  3. Vrije Universiteit Amsterdam (VU)
  4.  
  5. Operations Research II (E_EOR2_OR2)

Samenvatting

Complete samenvatting Operations Research II (OR2)
 42 keer bekeken  2 keer verkocht

Een complete samenvatting van het tweede jaars econometrie vak operations research II. De samenvatting neemt per week aan de hand van theorie en voorbeelden de stof door.

Voorbeeld 3 van de 30  pagina's

Document informatie

  • Ja
  • 9 maart 2023
  • 30
  • 2021/2022
  • Samenvatting

Onderwerpen

Gekoppeld boek

book image

Titel boek:

Auteur(s):

  • Uitgave:
  • ISBN:
  • Druk:

Meer samenvattingen voor studieboek

Alles voor dit studieboek (2)

Geschreven voor

Alle documenten voor dit vak (1)

Verkoper

avatar-seller
victorvanderwel

Ontvangen beoordelingen

Voorbeeld van de inhoud

Summary operations research
II part I

,Contents

1 Discrete-time Markov Chains 3
1.1 Modeling with states, state space, transition probabilities . . . 3
1.2 Computing n-step transition probabilities; chapman-kolmogorov 4
1.3 Concepts of the state classification and statespace . . . . . . . 4
1.4 Limit theorems for ergodic Markov chains; equilibrium (sta-
tionary, steady-state) distribution; equilibrium equations . . . 5
1.5 First-passage time probabilities . . . . . . . . . . . . . . . . . 6
1.6 Absorbing Markov chains . . . . . . . . . . . . . . . . . . . . . 6

2 Continuous-time Markov Chains 7
2.1 Modelling with states, state space, transition rates . . . . . . . 7
2.2 Interpretation of transition rates and their construction . . . . 8

3 Poisson processes 10
3.1 Merging and Splitting . . . . . . . . . . . . . . . . . . . . . . 10

4 Queueing systems 11
4.1 balance equations . . . . . . . . . . . . . . . . . . . . . . . . . 11
4.2 steady-state performance measures and how to compute these 11
4.3 effective arrival rate; Little . . . . . . . . . . . . . . . . . . . . 12
4.4 Poisson-exponential queues . . . . . . . . . . . . . . . . . . . . 12

5 Standard exam questions 14
5.1 Discret-time Markov chains . . . . . . . . . . . . . . . . . . . 14
5.2 Continuous-time Markov Chains . . . . . . . . . . . . . . . . . 14
5.3 Poisson process . . . . . . . . . . . . . . . . . . . . . . . . . . 17
5.4 Queueing theory . . . . . . . . . . . . . . . . . . . . . . . . . 18

6 Dynamic programming 21
6.1 Deterministic dynamic programming . . . . . . . . . . . . . . 21
6.2 Stochastic dynamic programming . . . . . . . . . . . . . . . . 22

7 Markov Decision Process 24
7.1 Infinite horizon . . . . . . . . . . . . . . . . . . . . . . . . . . 24
7.2 Policy iteration for the discounted cost criterion . . . . . . . . 25
7.2.1 Policy iteration for the long-run average cost criterion . 25
7.3 Value iteration for discounted criterion . . . . . . . . . . . . . 26
7.3.1 Stopping criterion . . . . . . . . . . . . . . . . . . . . . 26
7.3.2 Value iteration for the long-run average criterion . . . . 26

1

, 8 Q-Learning for the total discounted criterion 28
8.1 Ingredients . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 28
8.2 Q-learning algorithm . . . . . . . . . . . . . . . . . . . . . . . 29




2

Voordelen van het kopen van samenvattingen bij Stuvia op een rij:

Verzekerd van kwaliteit door reviews

Verzekerd van kwaliteit door reviews

Stuvia-klanten hebben meer dan 700.000 samenvattingen beoordeeld. Zo weet je zeker dat je de beste documenten koopt!

Snel en makkelijk kopen

Snel en makkelijk kopen

Je betaalt supersnel en eenmalig met iDeal, creditcard of Stuvia-tegoed voor de samenvatting. Zonder lidmaatschap.

Focus op de essentie

Focus op de essentie

Samenvattingen worden geschreven voor en door anderen. Daarom zijn de samenvattingen altijd betrouwbaar en actueel. Zo kom je snel tot de kern!

Veelgestelde vragen

Wat krijg ik als ik dit document koop?

Je krijgt een PDF, die direct beschikbaar is na je aankoop. Het gekochte document is altijd, overal en oneindig toegankelijk via je profiel.

Tevredenheidsgarantie: hoe werkt dat?

Onze tevredenheidsgarantie zorgt ervoor dat je altijd een studiedocument vindt dat goed bij je past. Je vult een formulier in en onze klantenservice regelt de rest.

Van wie koop ik deze samenvatting?

Stuvia is een marktplaats, je koop dit document dus niet van ons, maar van verkoper victorvanderwel. Stuvia faciliteert de betaling aan de verkoper.

Zit ik meteen vast aan een abonnement?

Nee, je koopt alleen deze samenvatting voor €3,49. Je zit daarna nergens aan vast.

Is Stuvia te vertrouwen?

4,6 sterren op Google & Trustpilot (+1000 reviews)

Afgelopen 30 dagen zijn er 50843 samenvattingen verkocht

Opgericht in 2010, al 14 jaar dé plek om samenvattingen te kopen

Start met verkopen
€3,49  2x  verkocht
  • (0)
In winkelwagen
Toegevoegd