Google wyjaśnia, jak przejść na CDN bez szkody dla SEO. Gary Illyes i Cherry Prommawin tłumaczą, że szybsze odpowiedzi serwera po migracji sygnalizują Googlebotowi, że infrastruktura wytrzyma więcej żądań, więc stopniowo zwiększa on tempo crawlowania. Problem w tym, że cache CDN jest na starcie pusty: pierwsze żądanie każdego URL trafia do serwera origin, a dopiero kolejne obsługuje CDN. Illyes ujął to tak: CDN „zdejmują zawór z węża”, więc crawlery „piją z hydrantu”. Prommawin nazwała to pułapką, bo roboty rozpędzają się, widząc szybkie odpowiedzi. Drugie zagrożenie to panika administratorów, którzy widząc skok ruchu, włączają w panelu CDN (np. Cloudflare) blokadę botów. Googlebot trafia wtedy na CAPTCHA, której nie przejdzie, a przy dłuższej blokadzie Google zaczyna usuwać strony z indeksu. Google zaleca skonfigurowanie CDN tak, by przepuszczał znane, zaufane crawlery (whitelisting), oraz rate limiting Googlebota na poziomie CDN, jeśli origin zaczyna padać. Illyes radzi też „pre-warming”: programowe pobranie najważniejszych URL-i przez CDN, zanim otworzy się go dla wyszukiwarek. Google opublikował nową dokumentację dotyczącą CDN oraz odcinek podcastu na ten temat.
Źródło: Search Engine Journal — oryginalny artykuł ↗
Chcesz wiedzieć, jak ta zmiana wpłynie na Twoją stronę?
Nasz zespół analizuje każdą aktualizację Google w 48h i przekłada ją na konkretne działania dla klientów.
Bezpłatna analiza wpływu