Should I block duplicate pages using robots.txt?
12 228
140.6
Google Webmasters627 тыс
Следующее
11.03.10 – 18 7210:09Популярные
18 дней – 2 8840:42
01.02.23 – 8 03525:06Опубликовано 10 марта 2010, 19:25
Halfdeck from Davis, CA asks: "If Google crawls 1,000 pages/day, Googlebot crawling many dupe content pages may slow down indexing of a large site. In that scenario, do you recommend blocking dupes using robots.txt or is using META ROBOTS NOINDEX,NOFOLLOW a better alternative?"
Short answer: No, don't block them using robots.txt. Learn more about duplicate content here: google.com/support/webmasters/...
Short answer: No, don't block them using robots.txt. Learn more about duplicate content here: google.com/support/webmasters/...
Свежие видео
2 дня – 1 04311:45
2 дня – 3 17410:08
5 дней – 1871:04:15
8 дней – 1690:13Случайные видео
21 день – 40 5570:33
81 день – 121 7162:25
23.10.22 – 9 3835:19
16.07.22 – 250 8621:10
12.11.21 – 14 4766:44
30.05.07 – 16 35037:47
1 день – 2 724 85211:33
2 дня – 2810:46
3 дня – 2 7347:10
3 дня – 1081:48
3 дня – 1464:30
4 дня – 7380:40