Не обязательно. Можно считать, что все возможные изменения прошлого уже произошли. Это нарушение принципа причинности (причина не может быть позже следствия), но принцип причинности - лишь гипотеза, пусть и общепринятая.
Более того - вспомните первый опыт Гарри с маховиком. Там тоже было нарушение причинности.