Краулер - это вроде не самый простой такой алгоритм. Вы хотите сказать, что написали его самостоятельно? Сомневаюсь в том, что внутри получилось действительно мощное наполнение.
Павел, а вы не сомневайтесь, а пойдите потестируйте. У нас бесплатный 7-дневный тест. Уже говорил, для нас скраулить 200 млн. страниц - это не проблема. И это не стоит всех денег мира, что уже не тривиально. Поэтому не буду сильно сыпать словами. Тест - это всегда самый справедливый ответ на ваш вопрос.
Краулер - это вроде не самый простой такой алгоритм. Вы хотите сказать, что написали его самостоятельно? Сомневаюсь в том, что внутри получилось действительно мощное наполнение.
Павел, а вы не сомневайтесь, а пойдите потестируйте. У нас бесплатный 7-дневный тест. Уже говорил, для нас скраулить 200 млн. страниц - это не проблема. И это не стоит всех денег мира, что уже не тривиально. Поэтому не буду сильно сыпать словами. Тест - это всегда самый справедливый ответ на ваш вопрос.