Ein Google-Webcrawler ist ein von Google entwickeltes, weitgehend automatisch agierendes Programm, das auch unter dem Begriff ,Googlebot‘ bekannt ist. Google programmierte eigens einen Searchbot, also einen Suchroboter, der dazu dient, das Internet zu durchsuchen, wobei man den eigentlichen Prozess der Ermittlung von Webinhalten als ,crawling‘ bezeichnet. Das Programm analysiert Internetseiten und meldet Google die Ergebnisse, welche im Suchindex hinterlegt werden. Stellt jemand eine Google-Suchanfrage, wird das passendste Ergebnis aus eben diesem Suchindex ermittelt.
Die Auswertung von Websites hat einen entscheidenden Einfluss auf deren Platzierung in den Google-Suchergebnisseiten. Im Rahmen der professionellen Suchmaschinenoptimierung werden Webseiten so gestaltet und inhaltlich optimiert, dass diese möglichst einfach vom Webcrawler ausgelesen und analysiert werden können.