برنامج زاحف الويب

برامج الزحف Web Crawlers أو عناكب الزحف Spiders، هي نوع من الروبوتات التي يتم تشغيلها عادةً بواسطة محركات البحث مثل Google و Bing. الغرض منها هو فهرسة محتوى مواقع الويب عبر الإنترنت بحيث تظهر تلك المواقع في نتائج محرك البحث. ما هو برنامج الزحف؟ يقوم زاحف الويب أو العنكبوت أو روبوت محرك البحث بتنزيل وفهرسة…