Käyttäjäagentti on lausunto, ei todiste henkilöllisyydestä. Ennen kuin myönnät poikkeuksen tai tulkitset toiminnon, kuten moottorin, tarkista kysely käyttäjän menetelmien mukaisesti. Pidä tulokset ja ota huomioon verkon välittäjät.
tietystä kyselystä
Huomaa aika, pyydetty polku, tila ja osoite, joka havaitaan infrastruktuurin oikealla tasolla. Jos välityspalvelin tai CDN on palvelimen edessä, tarkista, kuinka alkuperäinen osoite välitetään ja mitkä lähteet ovat luotettavia. Asiakkaan antama otsikko ei saa riittää tunnistamaan kone. Käsittele muutama tapaus ennen kuin yleistät kaikkiin sanomalehtiin.
Käytä virallista menetelmää
Google dokumentoi vahvistuksen osoiteluetteloillaan ja DNS-menetelmällä. DNS-tarkistusta varten sinun on tarkistettava saatu nimi ja vahvistettava sitten, että sen suora resoluutio vastaa alkuperäistä osoitetta, ja luokan pääte odotetaan. Älä vahvista nimeä vain siksi, että se sisältää sanan google. Katso viralliset tiedot toteutuksen aikana.
linkitä havaittu osoite oikeaan robottiluokkaan
Googlen dokumentaatiossa on useita robottien ja palautustyökalujen luokkia. Osoitteita ja nimimalleja ei tule tulkita tästä kategoriasta. Ennen kuin päätät, että kysely tulee Googlebotista, käytä asianmukaista virallista menetelmää ja osoitetta, joka todella havaitaan infrastruktuurisi luotettavalla rajalla. Pyynnön lähettävä asiakas voi valita vahvistamattomasta otsikosta kopioidun osoitteen.
| Askel | Hallita | pikakuvake välttää |
|---|---|---|
| aloitusosoite | Tunnista luotettava lähde lokeista | Luota kaikkiin saatuihin otsikkoihin |
| käänteinen resoluutio | Hanki osoitteeseen liittyvä nimi | Hyväksy nimi, joka sisältää vain sanan Google |
| Nimi ja luokka | Tarkista odotettu verkkotunnus dokumentaation mukaan | Nykyisen käyttäjän ja robotin käynnistämä hämmentävä työkalu |
| suora pääte | Etsi alkuperäinen osoite saamastasi nimestä | Stop at reverse resolution |
| Lupa | Käytä aiottua pääsykehää | avaa yksityinen alue, koska identiteetti tunnistetaan |
Pääte tulee tarkistaa toimialueen rajalla, ei yksinkertaisella tekstihaulla. Nimi, kuten googlebot.com.example.net, ei kuulu Googlebot.com-verkkotunnukseen. Pelkästään nimen vertailu ei kuitenkaan riitä: pidä suoran resoluution tarkistus tai käytä julkaistuja osoiteluetteloita valitun menetelmän mukaisesti.
erillinen identiteetti ja valtuutus
Tunnistetun robotin tulee käyttää vain sille tarkoitettuja resursseja. Julkisella sivulla ja hallintaliittymällä ei ole samaa laajuutta. Dokumentoi palomuurin poikkeukset ja niiden tarkoitus. Tunnistaminen auttaa analysoimaan kuormitusta ja virheitä; Se ei korvaa pääsykäytäntöä, asianmukaisia arkaluonteisten toimintojen rajoituksia ja suojaa.
kuvitteellinen esimerkki: kyselyjen lisääntyminen
Sivusto näkee monia moottorin nimeä sisältäviä kulkuyhteyksiä, joissa on epätavallisia polkuja. Tiimi tarkistaa näytteen ja huomaa, että jotkin osoitteet eivät vastaa julkaistuja validointimenetelmiä. Sitten se erottaa vahvistetun liikenteen ja ilmoitetun liikenteen ymmärtääkseen kuorman. Se ei päättele, että virallinen moottori käynnisti tämän toiminnan pelkästään sanamuodon perusteella.
Suorita pistetarkastus ja seuraa
Aloita Windows-kehotteesta NSLookup-työkalulla, jonka tarkastat kyselyn osoitteesta ja kysy sitten tosiasiallisesti saatua nimeä. Alla olevat kaksi riviä ovat malleja, jotka on vaihdettava, eivät ohjaustulos. Älä julkaise raakalehtiäsi tai asetuksiasi, jotka saattavat sisältää arkaluontoisia tietoja artikkelin havainnollistamiseksi.
nslookup ADRESSE_IP_OBSERVEE
nslookup NOM_RETOURNE_PAR_LA_PREMIERE_REQUETE- Huomaa aloituspyyntö, päivämäärä ja infrastruktuurin taso, johon osoite kerättiin. Jos välityspalvelin puuttuu asiaan, dokumentoi kokoonpano, joka tekee tästä osoitteesta luotettavan.
- kohdata ratkaiseminen nimi ja tulokset Viralliset Google-menetelmätJos vaihe ei ole käytettävissä tai se on epäselvä, säilytä tila tarkistaaksesi sen sijaan, että vahvistaisit sen oletuksena.
- Valmistele suurelle volyymille sopiva automaattinen vahvistus päivitys- ja virheenhallintakäytännöllä. Vältä hidasta tai estävää riippuvuutta jokaisesta julkisesta pyynnöstä.
- Analysoi sitten pääsy ja lataa erikseen. Todennettu henkilöllisyys ei todista onnistunutta indeksointia eikä vastauksen laatua.
Hyödyllinen tulos on jäljitettävä luokittelu: henkilöllisyys varmennettu tällaisen menetelmän mukaan, vahvistamaton identiteetti tai epätäydellinen todentaminen. Linkitä nämä tiedot CDN ja palomuuridiagnostiikka Ymmärtääksesi pääsyn kieltäytymisen sekoittamatta robotin julistusta infrastruktuurisi päätökseen.
tehdä hallinnasta huoltoa
Suunnittele päivittää listoja, hallita tilapäisiä vikoja ja kirjata rajoitettu tarvittaviin kohteisiin. Vältä DNS-hakujen estämistä jokaisessa julkisessa kyselyssä; Valitse sopiva arkkitehtuuri teknisen tiimisi kanssa. Tarkista korjauksen jälkeen virheet ja hyödyllinen käyttö. Mukana CDN-tukosten diagnosointi Erottaa identiteettiongelma vastausongelmasta.