... به این نرم افزار خزنده (crawler) یا عنکبوت نیز گفته می شود و وظیفه آن پیمایش اینترنت و ارسال اطلاعات صفحات برای نرم افزار دیگری است که وظیفه اش طبقه بندی و مرتب سازی اطلاعات است ... هر کدام از آنها برای تکمیل فهرست خود از روش های متفاوتی استفاده می کنند، البته لازم به ذکر است که گونه ای جدید از موتورهای جست وجوگر تحت عنوان «ابر جست وجوگر» (meta search engines) نیز وجود دارد که در ادامه به توضیح هر یک از این موارد خواهیم پرداخت:- موتورهای جست وجوی پیمایشی: موتورهای جست وجوی پیمایشی (crawler-based search engines) مانند گوگل فهرست خود را به صورت خودکار تشکیل می دهند ...  

منبع : دنیای اقتصاد    تاریخ : 10   اسفند   1388   شاخه : اینترنت   

... acunetix web vulnerability scanner: این نرم افزار شامل یک اسکنر امنیتی تحت وب، crawler یا یک ابزار تحلیلگر ویژه، قابلیت تحلیل گزارش های پایگاه داده حاوی اطلاعات و بررسی های امنیتی است که با تمامی پلتفورم های وب سرور سازگاری دارد ...  

منبع : روزنامه خراسان    تاریخ : 13   مرداد   1388   شاخه : شبکه   

... عملکرد موتورهای جست وجو به شرح زیر است:تحلیل میدان عمل برای تحلیل وب، موتورهای جست وجو از برنامه هایی با عنوان "پیمایشگر" (crawler) استفاده می کنند ...  

منبع : روزنامه خراسان    تاریخ : 28   خرداد   1388   شاخه : وب   

... در خصوص بخش های یک موتور جست وجو باید گفت شامل قسمت هایی همچون spider یا عنکبوت، crawler یا خزنده، indexer یا بایگانی کننده، database یا پایگاه داده، ranker یا سیستم رتبه بندی و ...  

منبع : بازیاب    تاریخ : 20   خرداد   1388   شاخه : اینترنت   

... اگر شما در سایتتان از جاوا اسکریپت، کوکی ها، اشیاء session، frame یا فلش یا هر چیزی که جلوی دید برنامه های خزنده (crawler) را بگیرد استفاده کرده باشید ممکن است این جست وجوگر ها نتوانند صفحات سایت شما را بخوبی ببینند و index کنند ...  

منبع : بازیاب    تاریخ : 22   مرداد   1387   شاخه : وب   

... سایت های یاهو و بایدو به دلیل این که در داخل چین میزبانی می شوند ابراز پویشگر وب crawler آن ها نمی تواند محتوای چینی را بدون دخالت فایروال بزرگ فهرست بندی کند و با این حال کاربران خارج از چین با نتایج جست وجوی خود را فیلتر شده خواهند یافت اما در مورد گوگل و مایکروسافت وضعیت برعکس است ...  

منبع : ایسنا - خبرگزاری دانشجویان ایران    تاریخ : 16   تیر   1387   شاخه : وب   

... مقدمهموتور جست و جوی وب از سه بخش تشکیل می شود : (1) یک دنبالگرد crawler که صفحات وب را پیدا می کند تا داخل مجموعه صفحات وب آن موتور قرار گیرد، (2) یک شاخص گذار indexer که شاخص معکوس inverted index ( نیز موسوم به شاخصindex ) را که ساختمان اصلی داده های مورد استفاده ی آن موتور جست وجو است و صفحات وب دنبال گشته crawled را ارائه می کند ، (3) یک پاسخ دهنده که پرس و جو های کاربر را با استفاده از شاخصها پاسخ می دهد ...  

منبع : شبکه فن آوری اطلاعات ایران    تاریخ : 16   اردیبهشت   1384   شاخه : وب   

... طبق آمار سرویسهای crawler هم اکنون بیش از20271 وبلاگ فارسی فعال روی سرویس دهنده پرشین بلاگ persianblog ...  

منبع : اولین پایگاه اطلاع رسانی تخصصی فناوری اطلاعات    تاریخ : 15   آبان   1381   شاخه : اینترنت