Вариант — никак не обходить
Дамбигад все узнает, но Гарри ему нужен зачем-то, и он не может его просто убить. Наложить империус тоже нельзя (Гарри упрямый и канон).

До поры до времени Гарри приходится выполнять приказы дамбигада, пока он сам не прокачивается немного в окллюменции и не придумывает хитрый план. Ему приходится накладывать на себя заклятие забвения и оставлять самому себе подсказки. И в конце ему удается сбежать и победить Дамби.