А вообще, «крайний раз» в контексте того предложения, ни что иное как мысли героя. Есть указатель «я». Если бы речь шла о предложении «думал он, когда навещал друга…», тогда «последний». А тут, все же, именно герой и его манера.