Crawling
Crawling: जब आप Google पर कोई सवाल सर्च करते हैं तो Google सबसे पहले ये चेक करता है कि वेब पेजेज पर क्या उपलब्ध है। इसके लिए Google पेजेज को क्रॉल करता है और नए पेज इंडेक्स में जोड़ता रहता है। इस प्रोसेस को Crawling कहा जाता है। इसके लिए Web Crawlers के Google bot का इस्तेमाल किया जाता है। बता दें कि Google bot एक Web Crawlers सॉफ्टवेयर है। ये Crawlers वेबपेजेज को ढूंढते हैं। इन वेब पेजेज को ढूंढकर Crawlers उन पर मौजूद लिंक्स को फॉलो करते हैं। ये Crawlers एक लिंक से दूसरे लिंक पर जाकर डाटा इकट्ठा करते हैं और इन्हें Google के सर्वर पर लाते हैं।