This post is also available in: Eesti Norsk bokmål (Kirjanorja) Svenska (Ruotsi)
Sivu voi olla kauniisti suunniteltu, täynnä hyödyllistä sisältöä ja rakennettu konversioita varten, mutta se ei voi tuottaa orgaanista liikennettä, jos hakukoneet eivät pääse siihen luotettavasti käsiksi. Indeksointirobottien virheet eivät ole pelkkää teknistä ylläpitoa. Ne voivat estää arvokkaiden tuote-, palvelu- ja sijaintisivujen löytymisen, indeksoinnin ja sijoittumisen hakutuloksissa.
Sen ymmärtäminen, miten indeksointirobottien virheet korjataan, tarkoittaa todellisten SEO-riskien erottamista verkkosivuston normaalista kohinasta. Kaikki 404-virheet eivät tarvitse uudelleenohjausta. Kaikki pois jätetyt URL-osoitteet eivät ole rikki. Tavoitteena on varmistaa, että Google pääsee käsiksi liiketoimintasi kannalta tärkeisiin sivuihin, ymmärtää niiden tarkoituksen ja käyttää indeksointiresurssejaan tehokkaasti.
Mitä indeksointirobottien virheet todella tarkoittavat
Googlebot indeksoi sivustoa seuraamalla sisäisiä linkkejä, lukemalla XML-sivustokarttaa ja palaamalla URL-osoitteisiin, jotka se jo tuntee. Indeksointivirhe syntyy, kun se pyytää URL-osoitetta eikä pysty avaamaan tai käsittelemään sivua odotetulla tavalla. Ongelma voi olla tilapäinen, pysyvä, tarkoituksellinen tai liiketoiminnan kannalta merkittävä.
Google Search Console ei enää näytä yhtä laajaa ”Crawl Errors” -raporttia kuten aiemmin. Sen sijaan ongelmat näkyvät Page Indexing-, Crawl Stats-, URL Inspection- ja Core Web Vitals -raporteissa. Tämä muutos on tärkeä, koska oikea toimenpide riippuu Googlen ilmoittamasta tarkasta tilasta.
404-virhe lopetetulla kampanjasivulla voi olla täysin oikea ratkaisu. 404-virhe parhaiten konvertoivalla palvelusivullasi on puolestaan tulonmenetysongelma. Estetty sivu voi olla tarkoituksellinen sisäisen hakutuloksen tapauksessa, mutta vakava virhe, jos kyseessä on tärkeä kategoriasivu. Konteksti ratkaisee oikean toimenpiteen.
Aloita URL-osoitteista, jotka vaikuttavat tuloihin
Älä aloita yrittämällä poistaa jokaista Search Consolen varoitusta. Selvitä ensin, mitkä ongelmalliset URL-osoitteet on tarkoitettu sijoittumaan hakutuloksissa, tuomaan laadukasta liikennettä tai tukemaan konversiopolkuja.
Vie ongelmalliset URL-osoitteet Search Consolesta ja vertaa niitä XML-sivustokarttaasi, analytiikan laskeutumissivutietoihin, sisäisiin linkkeihin ja tärkeimpiin avainsanasivuihin. Ryhmittele löydökset sitten sivutyypin mukaan: palvelut, tuotteet, blogisisältö, kategoriasivut, vanhat kampanjat, suodattimet, asiakastilialueet ja hyötysivut.
Näin syntyy käytännöllinen priorisointijärjestelmä. Korjaa ensin sivut, joilla on jo liikennettä, ulkoisia linkkejä, konversioita tai strategista sijoituspotentiaalia. Vanhentuneiden suodattimien tai vanhojen seurantaparametrien luomat vähäarvoiset URL-osoitteet voidaan usein jättää rauhaan, poistaa sisäisistä linkeistä tai käsitellä selkeällä teknisellä säännöllä.
Varmista ongelma ennen muutosten tekemistä
Käytä URL Inspection -työkalua nähdäksesi, pääseekö Google käyttämään aktiivista sivua ja voiko sen indeksoida. Testaa sen jälkeen URL selaimessa, tarkista palvelinlokit mahdollisuuksien mukaan ja tarkista sivun lähdekoodi tahattomien direktiivien varalta.
Tämä vaihe estää kalliita ylireagointeja. URL voi esimerkiksi näyttää Search Consolessa vanhan 404-tilan, vaikka se latautuu nyt oikein. Google tarvitsee aikaa sivun uudelleenindeksointiin ja tilan päivittämiseen. Toimivan sivun uudelleenohjaaminen viivästyneen raportoinnin vuoksi luo uuden ongelman sen sijaan, että vanha korjattaisiin.
Miten indeksointirobottien virheet korjataan tyypeittäin
Useimmat indeksointiongelmat kuuluvat muutamaan pääluokkaan. Teknisen toimenpiteen tulee vastata ongelman syytä, ei pelkästään virheen nimeä.
Korjaa 404- ja 410-virheet tarkoituksenmukaisesti
404 tarkoittaa, että pyydettyä sivua ei löydy. 410 tarkoittaa, että se on poistettu pysyvästi. Molemmat voivat olla täysin oikeita vastauksia, jos sisältö on tarkoituksella poistettu eikä sille ole sopivaa korvaavaa sivua.
Jos poistetulla URL-osoitteella on ulkoisia linkkejä, aiempaa liikennettä tai läheinen korvaava sivu, käytä 301-uudelleenohjausta kaikkein relevantimpaan aktiiviseen sivuun. Vanhan palvelusivun ohjaaminen etusivulle on yleensä heikko ratkaisu. Se tarjoaa käyttäjille ja Googlelle vain vähän temaattista jatkuvuutta ja voi näyttää soft redirect -mallilta.
Jos sopivaa korvaavaa sivua ei ole, pidä 404- tai 410-tila, poista URL sivustokartasta ja korjaa kaikki siihen osoittavat sisäiset linkit. Hyödyllinen mukautettu 404-sivu voi auttaa kävijöitä jatkamaan eteenpäin, mutta se ei korvaa kunnollista URL-siistimistä.
Korjaa palvelinvirheet ennen kuin ne johtavat indeksoinnin menetykseen
Palvelinpuolen virheet, yleensä 5xx-tilakoodit, kertovat Googlelle, ettei palvelin pystynyt käsittelemään kelvollista pyyntöä. Yksittäinen käyttökatko on harvoin katastrofaalinen. Toistuvat 500-, 502-, 503- tai 504-virheet tärkeillä sivuilla voivat vähentää indeksointia ja lopulta johtaa sivujen poistumiseen indeksistä.
Tutki hosting-kapasiteettia, lisäosien ristiriitoja, sovellusvirheitä, tietokantaongelmia, CDN-asetuksia, palomuurisääntöjä ja aikakatkaisurajoja. WordPress-sivustot kärsivät usein näistä ongelmista lisäosan päivityksen, ylikuormitetun jaetun hosting-ympäristön tai huonosti määritetyn välimuistikerroksen jälkeen.
Suunnitellun huollon aikana palauta 503-tila ja kohtuullinen uudelleenyritysohje yleisen 200-sivun tai pysyvän virheen sijaan. Tämä kertoo Googlelle, että käyttökatko on tilapäinen. Pitkän aikavälin kasvua varten käytettävyyden seurannan tulisi olla osa sivuston ylläpitoa, ei vain hätätilanteissa käytettävä toimenpide.
Poista vahingossa tehdyt robots.txt-estot
Robots.txt hallitsee indeksointirobottien pääsyä, ei itse indeksointia. Tärkeän hakemiston tai URL-mallin estäminen voi estää Googlebotia käyttämästä arvokasta sisältöä, skriptejä, kuvia tai sivuresursseja. Se voi myös vaikeuttaa ongelman diagnosointia, koska Google ei näe eston takana olevaa sisältöä.
Tarkista robots.txt-tiedosto uudelleensuunnittelun, alustamigraation, testausympäristön käyttöönoton tai CMS-muutoksen jälkeen. Yleisiä virheitä ovat kehitysvaiheesta jäänyt koko sivuston estävä disallow-sääntö, tuote- tai kategoriohakemistojen estäminen tai tärkeiden JavaScript- ja CSS-resurssien lataamisen estäminen Googlelta.
Älä käytä robots.txt-tiedostoa sellaisten sivujen piilottamiseen, joiden ei pitäisi näkyä Googlen hakutuloksissa. Jos sivun pitää olla käyttäjien saavutettavissa mutta sitä ei pidä indeksoida, käytä asianmukaista noindex-direktiiviä ja anna Googlen indeksointirobotin käyttää sivua. Jos sisältö on yksityistä, suojaa se kirjautumisella robots.txt-tiedoston sijaan.
Korjaa noindex- ja canonical-ristiriidat
Sivu voidaan indeksoida teknisesti onnistuneesti, mutta se ei silti välttämättä sijoitu, jos siinä on noindex tai canonical osoittaa toiseen URL-osoitteeseen. Nämä asetukset ovat hyödyllisiä tarkoituksellisesti käytettyinä, erityisesti verkkokaupan päällekkäisissä suodattimissa, tagiarkistoissa, tulostussivuilla ja lähes identtisissä varianteissa. Ne muuttuvat haitallisiksi, jos niitä käytetään tärkeillä sivuilla.
Tarkista SEO-lisäosien, mallisääntöjen tai migraatioasetusten lisäämät noindex-tagit. Tarkista sitten canonical-tagit. Jokaisella indeksoitavalla sivulla pitäisi yleensä olla itseensä viittaava canonical, ellei ole selkeää ensisijaista vaihtoehtoa.
Canonicalisointi on signaali, ei ehdoton käsky. Jos sisäiset linkit, sivustokartta, canonical-tagi ja sivun sisältö antavat ristiriitaisia signaaleja, Google voi valita eri URL-osoitteen kuin olit tarkoittanut. Yhdenmukaista nämä signaalit, jotta tärkeillä sivuilla on paremmat mahdollisuudet pysyä johdonmukaisesti indeksoituina.
Poista uudelleenohjausketjut ja -silmukat
Uudelleenohjaus on usein oikea ratkaisu sisällön yhdistämisen tai URL-muutosten jälkeen. Ongelma alkaa, kun uudelleenohjauksia kertyy ketjuksi: URL A ohjaa B:hen, B ohjaa C:hen ja C ohjaa vielä eteenpäin. Jokainen vaihe hidastaa käyttökokemusta, kuluttaa indeksointiresursseja ja lisää virheriskiä.
Päivitä sisäiset linkit osoittamaan suoraan lopulliseen kohteeseen. Korvaa vanhat sivustokartan URL-osoitteet, korjaa canonical-tagit ja yhdistä uudelleenohjaussääntöjä mahdollisuuksien mukaan. Uudelleenohjaussilmukat vaativat välitöntä huomiota, koska käyttäjät ja indeksointirobotit eivät pääse lopulliselle sivulle.
Tämä on erityisen yleistä useiden uudelleensuunnittelujen, HTTP:stä HTTPS:ään siirtymisen, verkkotunnuksen vaihdosten ja verkkokauppa-alustojen migraatioiden jälkeen. Selkeä migraatiokartta suojaa kertynyttä auktoriteettia. Sotkuinen migraatio synnyttää vuosiksi teknistä velkaa.
Paranna indeksointitehokkuutta yksittäisten virheiden lisäksi
Yksittäisten URL-osoitteiden korjaaminen on välttämätöntä, mutta skaalautuva SEO edellyttää myös sivustorakennetta, jossa Google pystyy navigoimaan helposti. Tärkeiden sivujen pitäisi olla saavutettavissa loogisten sisäisten linkkien kautta, eikä niitä pitäisi haudata hakulomakkeiden, loputtomien suodattimien tai orpojen navigointipolkujen taakse.
Pidä XML-sivustokartta keskittyneenä canonical- ja indeksoitaviin URL-osoitteisiin, jotka palauttavat 200-tilakoodin. Älä sisällytä uudelleenohjauksia, 404-sivuja, noindex-sivuja tai runsaasti parametreja sisältäviä duplikaatteja. Sivustokartta ei ole sijoitustyökalu, mutta se ilmaisee selvästi, mitkä sivut haluat Googlen indeksoivan.
Suuret verkkokauppa- ja sisältösivustot vaativat lisäkurinalaisuutta. Fasettinavigointi voi luoda tuhansia vähäarvoisia URL-versioita. Sivutus, lajittelu, istuntotunnukset ja sisäiset hakusivut voivat kasvattaa indeksointitarvetta lisäämättä hakuarvoa. Näissä tapauksissa ratkaisu voi sisältää canonical-sääntöjä, noindex-direktiivejä, parametrien hallintaa tai muutoksia linkkien renderöintiin. Oikea ratkaisu riippuu siitä, miten käyttäjät selaavat sivustoa ja millä kategoriayhdistelmillä on todellista hakukysyntää.
Seuraa JavaScript-renderöintiä ja sivun suorituskykyä
Nykyaikaiset verkkosivustot käyttävät usein JavaScriptiä sisällön, navigoinnin ja tuotetietojen renderöintiin. Google pystyy käsittelemään JavaScriptiä, mutta se voi kestää kauemmin ja on vähemmän anteeksiantavaa, jos olennainen sisältö näkyy vasta monimutkaisten selainpuolen toimintojen jälkeen.
Varmista, että keskeinen teksti, otsikot, sisäiset linkit, tuotetiedot ja metatiedot ovat luotettavasti saatavilla. Palvelinpuolen renderöinti tai esirenderöinti voi olla hyödyllistä JavaScript-painotteisilla sivustoilla, mutta oikea toteutus riippuu alustasta ja kehitysprosessista.
Hitaat ja epävakaat sivut eivät aina kuulu indeksointivirheisiin, mutta ne voivat heikentää indeksoinnin tehokkuutta ja orgaanista suorituskykyä. Teknisen SEO:n, suorituskyvyn optimoinnin ja konversio-optimoinnin tulisi toimia yhtenä kokonaisuutena. Nopeampi sivusto tarjoaa Googlelle puhtaamman pääsyn ja antaa kävijöille vähemmän syitä poistua ennen konversiota.
Rakenna indeksoinnin terveys osaksi jatkuvaa verkkosivuston kasvua
Indeksointivirheet palaavat usein, koska verkkosivustot muuttuvat. Uusia tuotteita julkaistaan, sivuja yhdistetään, lisäosia päivitetään, kampanjat päättyvät ja kehittäjät muuttavat malleja. Jos indeksoinnin terveyttä käsitellään vain kertaluonteisena siivouksena, seurauksena on lyhytaikainen parannus ja sen jälkeen asteittainen heikkeneminen.
Luo kuukausittainen prosessi Search Consolen indeksointitrendien, indeksointitilastojen, palvelinvirheiden, sivustokartan toimivuuden, uudelleenohjausten ja tärkeiden sivujen indeksoitavuuden tarkistamiseen. Seuraa, pysyvätkö tärkeät palvelu- ja tuote-URL-osoitteet indeksissä, äläkä tarkastele vain indeksoitujen sivujen kokonaismäärän kasvua. Suurempi määrä indeksoituja URL-osoitteita ei ole automaattisesti parempi, jos kasvu tulee duplikaateista tai vähäarvoisista sivuista.
Yrityksille, jotka käyttävät verkkosivustoaan tulonlähteenä, tämän työn pitäisi olla osa hallittua kasvujärjestelmää. 3Q Studiossa tekniset korjaukset yhdistetään sisältöprioriteetteihin, konversiopolkuihin, analytiikkaan ja kaupallisiin tavoitteisiin, koska hakunäkyvyydellä on merkitystä vain silloin, kun se auttaa houkuttelemaan, konvertoimaan ja kasvattamaan liiketoimintaa.
Käytännön standardi on yksinkertainen: tee arvokkaimmista sivuistasi Googlen kannalta helposti löydettäviä, helposti ymmärrettäviä ja jatkuvasti saavutettavia. Kun tämä perusta pysyy kunnossa, jokaisella uudella sisältökokonaisuudella, sisäisellä linkillä ja auktoriteettia kasvattavalla toimenpiteellä on paremmat mahdollisuudet kasvattaa liikennettä, liidejä ja tuloja ajan myötä.