where \(n(s_t,\ell )\)  denotes the number of times the state-action pair \((s_t,\ell )\)  was visited until iteration \(n\) , and \(\gamma \)  is a positive parameter \(\in [0.5,1]\)[1]}.
<FIGURE>
где \(n(s_t,\ell )\) обозначает число посещений пары состояние-действие \((s_t,\ell )\) до итерации \(n\), а \(\gamma \) является положительным параметром \(\in [0.5,1]\)[1].