По описанию выглядит, как какая-то коммуникационная неудача. В смысле, то ли ваш супруг не понял, что вам важно провести время вдвоём, то ли вы не поняли, почему вашему супругу важно его волонтёрство именно в данный момент времени. Возможно, если спокойно разъяснить свою позицию и выслушать позицию вашего мужа, проблему удастся решить без скандала?

Не может ли быть проблемой тот факт, что вы (судя по этому тексту) сами определяете, как распоряжаться личным временем другому человеку? Я примеряю такую ситуацию на себя и прихожу к выводу, что я бы предпочёл услышать что-то в духе "мне хочется провести время с тобой, давай вместе отправимся в поход", чем "тебе не нужно тратить 90% личного времени на волонтёрство, а нужно проводить время со мной". Потому что во втором варианте у меня складывается стойкое ощущение, что меня пытаются ограничить в моём праве самостоятельно распоряжаться своим временем, а в первом – просто предлагают альтернативу.