В шахматах, максимум, что грозило - сотрясение мозга.
Застрять на шахматах грозило вообще катастрофой - Гарри не встретился бы с разлагающимся профессором с Волдемортом в голове и лишился бы и очередной возможности умереть, и опыта сжигания человека голыми руками.