Crawl error czyli błąd crawlowania występuje, kiedy wyszukiwarka internetowa próbuje dotrzeć do jakiejś podstrony witryny internetowej ale nie jest w stanie tego dokonać. Błędy crawlowania crawl error dzieli się na dwa typy
1. Site errors. Są to błędy crawlowania polegające na braku dostępu dla robotów indeksujących wyszukiwarek internetowych, jak na przykład robotów Google do całej zawartości witryny. Site errors są błędami krytycznymi wymagającymi natychmiastowej poprawy. Mogą wynikać na przykład z umieszczenia tagu No-Index na stronie.
2. URL errors. Błędy te polegają na braku dostępu dla robotów wyszukiwarek do wybranych zasobów strony, które są przez nas pożądane do crawlowania i indeksowania. URL errors mogą również wystąpić w narzędziach analitycznych w przypadku celowego stosowania blokady dostępu np. do podstron koszyk, zamówienie, konto użytkownika w sklepach internetowych.
