Может он просто хотел выяснить таким образом, не обидел ли вас отказом и сгладить как-то сгладить момент? Ну, просто повод для начала осторожного разговора.