Идея от Матемага, как бороться с баном айпи от Рефери:
Сделай умнее. Напиши приложение к браузеру и запили на серваке координатор. Получится что-то вроде ботнета. Скорость сканирования повысится. Думаю, дополнение такое много ко согласится поставить.
Просто ситуация идеальна для распараллеливания.
Впрочем, пока проще остановиться на простом варианте =-)