Существует ли ограничение по количеству индексированных страниц с конкретного сайта в Rambler, Yandex и Google? Или поисковики проиндексируют все страницы сайта?
Теоретически, ограничений на число индексируемых страниц сайта сейчас нет ни у одной из поисковых машин.
На практике полная индексация больших сайтов (более 2 тыс. страниц) затруднена.
Индексирующие роботы обрабатывают огромное кол-во страниц в единицу времени, свои мощьности они равномерно распределяют по всем индексируемым сайтам как для того, чтобы не вызывать на тех сайтах перенагрузку, так и для того, чтобы иметь возможность максимально быстро обновлять индексную базу. Проиндексированные страницы через некоторое время требуют перепроверки роботом на предмет повторной индексации. В случае больших сайтов часто момент переиндексации уже известных страниц наступает до того, как будут проиндексированы все страницы сайта. Появляется заколдованный круг. И чем больше страниц на сайте, тем больше времени индексирующий робот тратит на переиндексацию известных страниц. Теоретически возможна ситуация, когда робот будет заниматься только известными страницами, игнорируя новые.
Для выхода из этого "заколдованного круга" рекомендуется большие сайты разделять на более мелкие. При этом для пользователя визуально все может выглядеть как единый сайт.