اخبار
برنامه نویسی
دسته بندی نشده
سیستم عامل
شبکه
متفرقه
وبسایت
وب کراولر یا خزنده وب یک ربات اینترنتی است که معمولا توسط موتورهای جستجو، وب جهانی را به منظور ایندکس کردن صفحات وب مرور میکنند.