Kuinka löytää verkkosivuston aliverkkotunnukset | Löydä kaikki verkkotunnuksen aliverkkotunnukset SEOBOTSilla [TUTORIAL]

jos haluan suodattaa pois kaikki hakukoneiden robotit, esimerkiksi komentosarjalle, joka laskee verkossa olevat käyttäjät, onko olemassa verkkosivustoa tai luetteloa, joka on aina ajan tasalla ja sisältää kaikkien bottien IP-osoitteet? Koska jos laitan ne käsikirjoitukseeni manuaalisesti, minun on vaihdettava se joka päivä, koska uusia ips on tulossa.

Kiitos avusta!

Suodata hakukoneet etsimällä käyttäjäagentteja, ei IP: n perusteella.

  • Valitettavasti jotkut palvelinlokit eivät sisällä käyttäjäagenttitietoja.

John Conden vastauksesta kysymykseeni katso IP-luettelot. Kyseinen sivusto luetteloi tunnetut IP-osoitteet, joita kukin hakukone käyttää.

Suodatus käyttäjäagentin mukaan ei ole luotettavaa koska se voidaan väärentää erittäin helposti. Google ehdottaa, että tarkastellaan käyttäjäagenttia ja tehdään sitten DNS-haku. Tällä tavalla, jos he lisäävät uusia IP-osoitteita, suodatus ei hajoa. Sinun on tietysti päivitettävä DNS-validointikoodisi, kun uusia hakukoneita tai botteja ilmestyy, se ei ole liian usein.

työskennellyt sinulle: Charles Robertson | Haluatko yhteyttä?

hyödyllistä tietoa