Sivustokarttojen lähettäminen ja tilan lukeminen

Moduuli 2: Search Console, Bing ja IndexNow · Lukuaika: 10 minuuttia

Oppimistavoite: Tämän oppitunnin jälkeen osaat lähettää sivustokartan Google Search Consoleen ja lukea sen tilan Sitemaps-raportista. Tiedät myös, mitä "löydetty" tarkoittaa ja mitä se ei tarkoita.

Keskeiset käsitteet: sivustokartta, sivustokartan osoite, Sitemaps-raportti, tila Success, Couldn't fetch, Has errors, löydetyt sivut (Discovered pages), sivustokarttaindeksi, uudelleenlähetys, ping (lakkautettu), Sitemap: robots.txt-tiedostossa

Mitä sivustokartta tekee

Sivustokartta on tiedosto, jossa on niiden sivujen osoitteet, jotka haluat hakukoneisiin. Yleensä se on sitemap.xml sivustosi juurikansiossa. Hakukone löytää sivuja ennen kaikkea seuraamalla linkkejä (oppitunti 1.2). Sivustokartta on lisälista: "nämä sivut ovat olemassa, ja näin myöhään niitä on viimeksi muutettu". Miltä tällainen tiedosto näyttää ja mitä osoitteita siihen kuuluu, opit oppitunnilla 3.4. Tämä oppitunti käsittelee seuraavaa vaihetta: kerrot Googlelle, missä sivustokartta on, ja luet, mitä Google sillä teki.

Sivustokartta ei ole käsky. Google kertoo omissa ohjeissaan, ettei kaikkia sivustokartan osoitteita välttämättä indeksoida hakurobotilla. Se riippuu muun muassa sivuston koosta ja aktiivisuudesta. Eikä hakurobotin käynti vielä tarkoita, että sivu on indeksissä. Sivustokartasta on eniten hyötyä uusille sivustoille, joille on vähän linkkejä muualta, suurille sivustoille ja sivuille, jotka ovat syvällä sivustossa.

Mistä löydät sivustokarttasi?

Monet sivustotyökalut tekevät sivustokartan itse:

Jos et ole varma, avaa selaimessa https://www.example.com/robots.txt. Jos siellä on rivi Sitemap: ja osoite, se on sivustokarttasi. AI Builder lisää rivin itse, samoin WordPress.

Avaa sivustokartan osoite selaimessa. Jos näet listan osoitteita (tai listan muista sivustokartoista), se toimii. Jos saat virhesivun, korjaa se ensin.

Lähettäminen Search Consolessa

1. Avaa omaisuutesi Search Consolessa ja valitse valikosta Sitemaps (kohdassa Indexing).
2. Kirjoita kohtaan Add a new sitemap sivustokartan osoite. Jos osoitteen alku on jo valmiina, kirjoita vain loppuosa, esimerkiksi sitemap.xml.
3. Napsauta Submit.

Tähän tarvitset omaisuuden omistajan oikeudet. Google suosittelee testaamaan osoitteen ensin livenä URL-tarkistuksella (oppitunti 2.4): silloin tiedät varmasti, että Google pystyy noutamaan tiedoston.

Sivustokarttaindeksi on sivustokartta, joka viittaa muihin sivustokarttoihin, esimerkiksi yhteen sivuille ja toiseen artikkeleille. WordPress tekee tällaisen indeksin. Silloin lähetät vain indeksin; Google noutaa loput itse.

Tilan lukeminen

Lähettämisen jälkeen sivustokartta näkyy lähetettyjen sivustokarttojen taulukossa. Jokaisesta näkyy tyyppi, lähetyspäivä, milloin Google luki sen viimeksi (Last read), tila ja löydettyjen sivujen (ja videoiden) määrä.

Juuri lähetetyn sivustokartan kohdalla lukee joskus aluksi "Couldn't fetch", vaikka tiedosto toimii hyvin: Google ei ole silloin vielä yrittänyt noutaa sitä. Odota päivä, ennen kuin alat etsiä vikaa.

Löydetty ei tarkoita indeksoitua

Löydettyjen sivujen luku on niiden osoitteiden määrä, jotka Google on lukenut sivustokartasta (päällekkäiset osoitteet lasketaan kerran). Se ei kerro, että hakurobotti olisi käynyt sivuilla tai että ne olisivat indeksissä. Jos haluat tietää, kuinka moni sivustokartan osoite on indeksissä, avaa sivustokartta ja valitse See page indexing: pääset Page indexing -raporttiin, joka on suodatettu kyseisen sivustokartan mukaan (oppitunti 2.4). Sieltä näet, mitkä sivut eivät ole indeksissä ja miksi.

Lähetetäänkö uudelleen? Yleensä ei

Kun sivustokartta on kerran onnistunut, Google noutaa sen uudelleen omassa aikataulussaan. Sitä ei siis tarvitse lähettää uudelleen jokaisen uuden sivun jälkeen. Suuren muutoksen jälkeen (uusi sivusto, uusi rakenne) voit lähettää sen uudelleen pyyntönä. Jos noutaminen epäonnistui, Google yrittää muutaman päivän ja lopettaa sitten: korjaa ongelma ja lähetä sivustokartta sen jälkeen uudelleen.

Ennen Googlelle pystyi antamaan merkin "ping"-osoitteen kautta. Google lakkautti sen vuonna 2023, ja osoite palauttaa nyt virheen. Lisäosat tai vanhat skriptit, jotka yhä pingaavat, eivät siis enää tee mitään. Jäljelle jää kaksi tapaa: lähettäminen Search Consolessa ja rivi Sitemap: robots.txt-tiedostossa. Tee molemmat: robots.txt-rivi auttaa myös muita hakukoneita, ja lähettämisestä saat raportin.

Huomaa: Sitemaps-raportti näyttää vain sivustokartat, jotka olet lähettänyt raportin (tai API:n) kautta. Sivustokartta, jonka Google tuntee vain robots.txt-tiedostosta, ei näy siinä, vaikka Google käyttääkin sitä.

Käytännössä: AI Builder ja WordPress

AI Builder tekee jokaisen julkaisun yhteydessä uuden sitemap.xml-tiedoston, jossa ovat kaikki sivut ja jokaisen sivun viimeisimmän muutoksen päivämäärä, ja lisää rivin Sitemap: tiedostoon robots.txt. Jos sivusto on AI Builderissa asetettu tilaan "älä indeksoi", robots.txt estää päinvastoin kaiken; silloin lähettämisessä ei ole järkeä. WordPressissä sivustokartan tekee ydin; SEO-lisäosa korvaa sen usein omalla sivustokartallaan, ja silloin lähetät sen (osoite löytyy lisäosan asetuksista). Muissa sivustotyökaluissa toimitaan samaan tapaan: etsi sivustokartan osoite ja lähetä se.

Yhteenveto

• Sivustokartta on lista osoitteista, jotka haluat indeksiin; Google käyttää sitä apuna, ei käskynä.
• Etsi osoite (usein robots.txt-tiedostosta), avaa se selaimessa ja lähetä se Search Consolen Sitemaps-kohdassa.
• Success, Has errors tai Couldn't fetch: vain kahdessa viimeisessä sinulla on tehtävää.
• Löydetyt sivut eivät ole sama asia kuin indeksoidut sivut; ne näet Page indexing -raportista.
• Uudelleenlähetys tarvitaan vain suurten muutosten tai epäonnistuneen yrityksen jälkeen; pingaus ei enää toimi.

Tietovisa

Tehtävä

Tehtävä D2.2: Lähetä sivustokartta ja kirjaa tulos. Etsi sivustosi sivustokartan osoite (robots.txt-tiedostosta tai sivustotyökalustasi), avaa se selaimessa ja lähetä se Search Consolen Sitemaps-kohdassa. Palaa muutaman päivän päästä ja kirjaa ylös tila, löydettyjen sivujen määrä ja kuinka moni niistä on Page indexing -raportin mukaan indeksissä. Selitä ero.

Lisälukemista

Näiden artikkelien vaiheet koskevat WebOkén hallintapaneeleja; muilla palveluntarjoajilla toimitaan samaan tapaan.

• Ilmoita verkkosivustosi hakukoneisiin (Google ja Bing)
• Google, Sitemaps-raportin hallinta (hollanniksi): https://support.google.com/webmasters/answer/7451001?hl=nl
• Google Search Central, Sivustokartan luominen ja lähettäminen: https://developers.google.com/search/docs/crawling-indexing/sitemaps/build-sitemap
• Google Search Central Blog, sivustokartan pingin lakkauttaminen (kesäkuu 2023): https://developers.google.com/search/blog/2023/06/sitemaps-lastmod-ping