A web robot in a web crawler is

A Web Crawler is a program that automatically visits and reads web pages on the Internet. It collects information about websites and sends it to a search engine, which stores the data in its database (index) for faster search results. A Web Bot (Web Robot) is the automated software used by a web crawler to perform this task.
वेब क्रॉलर (Web Crawler) एक प्रोग्राम होता है, जो इंटरनेट पर मौजूद वेब पेजों को स्वतः पढ़ता (Crawl) है। यह वेबसाइटों की जानकारी एकत्र करके सर्च इंजन को भेजता है, ताकि सर्च इंजन उन्हें अपने डेटाबेस (इंडेक्स) में जोड़ सके। वेब बॉट (Web Bot) या वेब रोबोट वह स्वचालित सॉफ़्टवेयर होता है, जो वेब क्रॉलर के रूप में यह कार्य करता है।