Инновации, которые мы заслужили.
А отключать слив краулеру посещенных адресов все так же нельзя