Het paper is interessant, maar ik had het een beetje moeilijk met de totale beloningsformule. Voor iedereen zoals ik, hier is een geannoteerde versie met alle variabelen op hetzelfde scherm, zonder dat je heen en weer hoeft te bladeren over pagina's (waarom doen mensen dit niet? Misschien zonder kleuren, maar gewoon de legenda):