Julkaisin SEO-kurssini, ja muutamaa viikkoa myöhemmin huomasin Search Consolessa, että sivustokarttaani (sitemap) oli ilmestynyt kymmeniä sivuja, joiden ei kuulunut olla siellä. Kiitos-sivuja, oppituntisivuja, aihesivuja. Kaikki kurssialustan automaattisesti luomia, eikä yhdenkään niistä pitäisi näkyä Googlessa.
Tämä on kuvaus siitä, miten löysin ongelman, miksi se on ongelma, ja miten korjasin sen yhdellä napilla. Kyseessä on pieni tekninen juttu, mutta juuri tällaiset pienet jutut kertyvät, ja ne löytyvät vain jos niitä osaa etsiä oikeasta paikasta.
Mitä sivustokarttaan kuuluu ja mitä ei
XML-sivustokartta, eli sitemap, on lista niistä osoitteista, jotka haluat Googlen indeksoivan. Se ei ole lista kaikista sivustosi sivuista.
Tämä on se kohta, joka menee useimmilla sekaisin. Sivustokartta on toive, ei inventaario. Kun laitat sinne osoitteen, sanot Googlelle: tämä sivu kannattaa käydä läpi ja ottaa hakemistoon.
Sivustokarttaan kuuluvat sivut, jotka palauttavat tilakoodin 200, ovat indeksoitavia, ja joilla on jotain arvoa hakijalle.
Sivustokarttaan eivät kuulu:
- kiitos- ja vahvistussivut
- kirjautumis- ja ostoskorisivut
- sivut, joilla on noindex-merkintä
- uudelleenohjatut vanhat osoitteet
- 404-sivut
- sisäisten hakujen tulossivut
- kurssialustan, verkkokauppa-alustan tai muun lisäosan automaattisesti generoimat aputoimintosivut
Viimeinen kohta on se, johon itse kompastuin.
Miten huomasin ongelman
Löysin tämän Search Consolen Sivut-raportista, en työkalulla enkä sattumalta. Käyn tämän raportin läpi jokaisessa projektissa, ja suosittelen samaa kaikille.
Menin Search Consolessa kohtaan Indeksointi ja Sivut. Siellä on kaksi näkymää, ja ero niiden välillä on tärkeä:
- Kaikki tunnetut sivut näyttää jokaisen osoitteen, jonka Google on koskaan löytänyt sivustoltasi.
- Kaikki lähetetyt sivut näyttää vain ne, jotka ovat sivustokartassa.
Se toinen näkymä on se, joka kertoo totuuden sivustokartastasi. Siinä näet käytännössä listan siitä, mitä olet pyytänyt Googlea indeksoimaan.
Kun avasin syyt sille, miksi osa sivuista ei ollut indeksoitunut, kohdan Duplikaatti alta paljastui joukko oppituntisivuja. Google oli käynyt niillä, tunnistanut ne kaksoiskappaleiksi, eikä ollut indeksoinut niitä.
Google teki siis oikein. Ongelma ei ollut siinä, etteivät ne indeksoituneet. Ongelma oli siinä, että olin pyytänyt Googlea indeksoimaan ne.
Miksi turhat sivut sivustokartassa maksavat
Jokainen turha osoite sivustokartassa on käynti, joka on pois oikeilta sivuilta.
Googlella on rajallinen budjetti sille, kuinka paljon se käy sivustoasi läpi. Kun ohjaat sen kymmenille oppituntisivuille, joita ei koskaan indeksoida, se aika on pois niiltä sivuilta, joiden haluaisit näkyvän. Isolla sivustolla tämä on iso asia. Pienelläkin se on turhaa.
Tämä koskee myös tekoälyhakuja. AI-botit käyvät sivustoja tiukemmalla budjetilla kuin Google, eivätkä ne palaa yhtä herkästi. Turhaan käytetty haku on niillä vielä kalliimpi.
Noindex ei riitä, jos sivu on yhä sivustokartassa
Tämä on se yksityiskohta, joka jää useimmilta huomaamatta, ja se oli osittain totta myös minun tapauksessani.
Noindex ja sivustokartta ovat kaksi eri asiaa:
- Noindex kertoo Googlelle, ettei sivua pidä laittaa hakemistoon.
- Sivustokartta kertoo Googlelle, että sivu kannattaa käydä läpi.
Jos sivulla on noindex mutta se on yhä sivustokartassa, annat Googlelle ristiriitaisen ohjeen. Kutsut sen käymään sivulla, jonka sitten kiellät indeksoimasta. Google käy silti, koska pyysit. Käynti kuluu, hyötyä ei tule.
Oikea järjestys on siis: päätä ensin kuuluuko sivu hakemistoon, ja poista se sitten sivustokartasta, jos ei kuulu.
Näin korjasin sen Yoastilla
Korjaus vei alle minuutin, kun tiesin mistä etsiä.
Käytän WordPressissä Yoast SEO -lisäosaa. Kurssialustan sivutyypit näkyivät Yoastin asetuksissa omana sisältötyyppinään, ja siellä oli yksi valinta: näytetäänkö tämän sisältötyypin sivut hakutuloksissa.
Kun otin valinnan pois päältä, kaksi asiaa tapahtui kerralla. Sivut saivat noindex-merkinnän, ja ne poistuivat sivustokartasta. Yoast hoitaa molemmat samasta kytkimestä, mikä on juuri se mitä tässä tilanteessa halutaan.
Sama pätee muihinkin lisäosiin, jotka luovat omia sisältötyyppejään: verkkokauppa-alustat, tapahtumakalenterit, jäsenalustat. Jos asennat lisäosan joka luo sivuja, tarkista sivustokartta sen jälkeen.
Mitä muuta Sivut-raportista kannattaa katsoa
Kun olet raportissa, kannattaa käydä läpi myös muut syyt. Nämä toistuvat useimmilla sivustoilla.
Duplikaatti. Google pitää sivua kaksoiskappaleena. Tarkista, onko canonical oikein, vai onko sivu oikeasti turha.
Indeksoitu robotilla, ei indeksoitu. Google kävi sivulla mutta ei ottanut sitä hakemistoon. Tämä on laatuarvio, ei tekninen este. Korjaus on sisältö, ei uusi indeksointipyyntö.
Sivu, jolla on uudelleenohjaus. Yleensä tämä ei ole virhe. Se kertoo vain, että sivustokartassa on vanhoja osoitteita, jotka ohjaavat muualle. Poista ne kartasta.
noindex-tunnisteen estämä. Tänne päätyvät ne sivut, jotka olet tarkoituksella jättänyt pois. Käy lista silti läpi, koska tänne joutuu myös vahingossa noindexattuja sivuja.
Ei löytynyt (404). Google on joskus löytänyt sivun, mutta se on nyt poissa. Jos listalla on sivuja, joiden pitäisi olla olemassa, lisää niille sisäisiä linkkejä tai korjaa osoite.
Jos joukossa on sivu, jonka haluat hakemistoon, voit pyytää indeksointia URL-tarkastuksesta. Se nopeuttaa yhden osoitteen käsittelyä, mutta ei korjaa syytä. Korjaa ensin, pyydä sitten.
Miksi seuraan tätä raporttia jokaisessa projektissa
Sivut-raportti on nopein tapa huomata tekninen virhe, jota kukaan ei ole huomannut.
Kaikkein rajuimmat virheet näkyvät siinä heti. Jos koko sivusto menee vahingossa noindexiin, esimerkiksi kehitysympäristön asetuksen jäätyä päälle julkaisussa, indeksoitujen sivujen käyrä lähtee jyrkkään laskuun ja ei-indeksoitujen käyrä nousee samaa tahtia. Sen näkee yhdellä silmäyksellä.
Kaksi asiaa kannattaa muistaa raportista:
Data laahaa muutaman päivän jäljessä. Jos näet sivun, jota ei ole indeksoitu, se on voinut indeksoitua sen jälkeen. Tarkista uudelleen ennen kuin lähdet korjaamaan.
Seuraa myös näyttökertoja. Ne reagoivat teknisiin virheisiin usein ennen kuin ehdit huomata mitään muuta.
Mitä tästä kannattaa ottaa mukaan
Kolme asiaa, jos et muuta muista:
- Sivustokartta on toivelista, ei inventaario. Sinne kuuluvat vain ne sivut, jotka haluat hakemistoon.
- Tarkista sivustokartta aina, kun asennat lisäosan, joka luo sivuja. Kurssialustat, verkkokaupat ja kalenterit tuottavat sivuja, joita et itse luonut.
- Käy Search Consolen Sivut-raportti läpi säännöllisesti. Kerran kuussa riittää, ja se vie viisi minuuttia.
Tämä oli pieni korjaus. Sivustoni ei noussut hakutuloksissa yhtään sen jälkeen, enkä odottanutkaan sitä. Mutta sivustokartassani on nyt vain ne sivut, jotka kuuluvat sinne, ja Googlen käynnit menevät sinne minne pitääkin.
Tekninen SEO on suurimmaksi osaksi tällaista: pieniä korjauksia, jotka eivät yksinään näy missään, mutta jotka yhdessä ratkaisevat sen löytyykö sivustosi.
Tarvitsetko apua
Jos kaipaat teknistä SEO-asiantuntijaa, ole minuun yhteydessä, niin voin auttaa sinua sivuston teknisten ongelmien kanssa.