در وادي برنامه نويسي وب , روبوت نرم افزاري است که بطور اتوماتيک به خواندن و کاوش درون ديگر صفحات وب ميپردازد.يک روبوت کارش را از يک page يا صفحه نمونه شروع کرده و بطور بازگشتي يا recursive به خواندن محتواي تمامي link هاي داخل صفحات ميپردازد.بيشترين کاربرد روبوتها در موارد زير ميباشد:

Indexing
Link Validation
"What's New " monitoring
HTML validation
Mirroring

اگر ميخواهيد بيشتر در مورد روبوتها بدانيد بد نيست که سري به يکي از صفحات FAQ در مورد روبوتها بزنيد و مطمين باشيد که اگر داراي web page ي هستيد , به احتمال زياد روبوتهاي عزيز موتورهاي جستجوي معروف مثل goggle و يا yahoo بارها صفحاتتان را سرچ کرده و کلمات و Link هاي مهم آنرا در بانک اطلاعاتيشان ثبت کرده اند.توجه داشته باشيد که بتدريچ و با گذشت زمان هر چه که بيشتر فارسي نويسي در اينترنت گسترش مي يابد ضرورت جستجوي کلمات فارسي بيشتر خواهد شد و در آينده اي نه چندان دور خلايق قادر به جستجو در ميان مثلا وب لاگهاي فارسي خواهند شد و آخرين نکته اينکه اگر نمي خواهيد که روبوتها سايتتان را زيرورو!!! کنند راه حل را اينجا خواهيد يافت.
... و اما روبوتها در وادي زندگي واقعي:
اين موجودات بسيار سخت گير هستند , کم حرف , بدون احساس و خيلي جدي هستند , در ميان رنگها فقط سياه و سفيد را ميشناسند , همه قضايا را ديجيتالي( 0 يا 1) بررسي ميکنند احساس! ميکنند خيلي منطقي اند و اغلب تنها و منزويند.... طفلکها بيشتر رشته هاي فني, رياضي و يا کامپيوتر خوانده اند!!! البته ناگفته نماند که مثل روبوتهاي وب کارشان را درست انجام ميدهند ,غالبا آدمهاي خوبي هستند و احتمال ابتلايشان به وبلاگ نويسي زياد است.
.... اميدوارم که من يک روبوت نباشم!!!

- اگر در صفحه about us اين سايت دقت کنيد ، عمداّ آدرسهاي ايميل را درست ننوشته اند و از "dot" و "at" به جاي . و @ استفاده کرده اند ، چرا؟ جواب به همان روبوتهاي موذي برميگردد!!. يکي از کارهائي که روبوتها انجام ميدهند يافتن آدرسهاي ايميل از درون صفحات HTML و سپس فروش اين ليستها به شرکتها و اشخاص براي بازاريابي و امثالهم ميباشد و به همين دليل مسئولين سايت جهت جلوگيري از يافته شدن آدرسهاي ايميلشان توسط روبوتها از "dot" و "at" به جاي . و @ استفاده کرده اند. (اگر شما هم هر روز مثل من دهها ايميل بي ربط دريافت ميکنيد، شايد کار همين روبوتها باشد، مثلاّ کافي است جائي guestbook ي را امضا کرده و آدرس ايميلتان را وارد کرده باشيد و ...)

  برگرفته از : www.download2.ir