Motoarele de căutare, cum ar fi Google, colectează paginile web ale rețelei folosind programe cunoscute sub numele despider. Acestea se conectează la site-urile internet ale rețelei, salvează conținutul și leagă următoarele site-uri web.
Pentru a crește clasarea pe Google, multe site-uri web care oferă conținut plătit (pornind de la site-uri pornografice pentru a ajunge la informații) își deschid secțiunile plătite către păianjenii motoarelor de căutare și, în special, Google: în acest fel, Google va indexa materialul care va apărea în rezultatele căutării, chiar dacă utilizatorii, odată ce au făcut clic pentru a deschide site-ul, vor fi direcționați către pagina unde se solicită o plată pentru a accesa conținutul.
Unii dezvoltatori de extensii pentru Mozilla Firefox s-au gândit totuși cum să acceseze gratuit aceste site-uri web plătite: introduceți-vă doar ca un păianjen Google. Pentru a face acest lucru, trebuie să instalați extensia extensieiUser-Agent Switcher estensione în Mozilla Firefox.Odată ce extensia este instalată, treceți la meniulTools
, apoi laUser Agent Switcherși în cele din urmă la opțiunileși, din nou, la opțiunile.... În acest moment, în partea stângă, faceți clic peAgent utilizatorși pe butonul Add. În câmpul Descrierescrie Googlebot și 2.1
Agent de utilizare, cu toate acestea,Googlebot / 2.1 (+ //www.google.com/bot.html). Salvați totul cu două clicuri peOK. Du-te înapoi laInstrumente / User Agent Switcherși selectațiGooglebot 2.1. Navigare bună ... Google!(prin bufferOverflow)
