وقتی که ما یک عبارت را در گوگل سرچ میکنیم در واقع مجال متعددی موردنیاز میباشد تا گوگل وب سایت های آموزش سئو مشمول این عبارت را از میان میلیون ها تارنما غیر وابسته کرده و به ما نماد دهد؛ ولی می‌بینیم که در دوران معدود خیس از یک ثانیه، حاصل را به ما آرم می‌دهد؛ این جاست که گفت و گو ربات های خزنده گوگل به در بین میاید.
گوگل هیچ موقع هنگام سرچ مطالب بوسیله یوزرها، وبسایت ها را تحقیق نمی نماید بلکه موتور های کاوشگر گوگل تا قبل از این به وسیله ربات های خزنده وبسایت های گوناگون را پژوهش کرده و مطالبشان را گروه بندی و در دیتا بیس خویش ذخیره می نمایند. ده ها میلیون ورقه در گوگل ایندکس گردیده اند و در واقع به مانند مغز گوگل فعالیت می نمایند.
به این ترتیب وقتی که یوزرها و مخاطبان گوگل عبارت های خویش را کاوش می نمایند، به مکان پژوهش دوباره تارنما ها به دیتا بیس خویش مراجعه می نماید و صفحه ها مشتمل بر لغات مربوط را به استفاده کننده نماد میدهند؛ این دستور باعث سرعت کارایی گوگل و بازدهی خوب در اکران حاصل عبارت های کاوش گردیده میشود.
ربات های خزنده گوگل برای استارت به شغل خویش آغاز به نشانی های اینترنت (URL) نیاز دارا‌هستند؛ هنگامی که‌این نشانی ها را پردازش می نمایند، لیست نشانی هایی که در آن وبسایت مو جود میباشد و همینطور لینک و پیوند ها را گردآوری کرده و به داده ها اول خویش میافزایند.