Alexej На сколько я знаю - не должен. В любом случае , особого выбора у тебя нет
Хотя 500 К адресов - это не так уж и много, непонятно почему другие обламываются. Посмотри внимательно настройки, если есть что-то вроде "построить карту сайта перед скачиванием" - убери. Также следи чтобы со сторонних серверов не качало.