Pystyvätkö tekoälyn robotit lukemaan verkkosivujamme?

”Kuka voi tarkistaa, pääsevätkö tekoälyn robotit sivustollemme?”

Ihminen näkee sivustosi selaimessa. Tekoälyn robotti näkee usein jotain muuta: pelkän HTML:n ilman skriptejä, jotka täyttävät sivulle hinnat, valikot ja vastaukset. Jos tieto ei ole tekstinä sivun lähdekoodissa, moni tekoäly ei pysty käyttämään sitä. Se arvaa tai hakee tiedon jostain muualta.

Kyse ei ole ulkoasusta eikä nopeudesta. Eräässä Avisiblen auditoinnissa matkailuyrityksen sivusto sai suorituskyvystä 94 %. Silti sama sivusto näytti tekoälylle tuskin mitään hinnoista, retkien kestoista tai usein kysytyistä kysymyksistä.

Alla on viisi teknistä ongelmaa, jotka Avisible näkee auditoinneissaan useimmin. Ensin kuitenkin yksi perusasia: pääsevätkö tekoälyn robotit sivustolle ylipäätään.

Avisible suosittelee tarkistamaan asiat tässä järjestyksessä:

1. Päästä tekoälyn robotit sisään. Tarkista robots.txt sekä palomuurin ja CDN-palvelun asetukset ja salli robotit tietoisesti.
2. Kirjoita tärkeät tiedot HTML:ään, älä skripteihin. Kytke JavaScript pois ja avaa tärkeimmät sivusi. Mikä katoaa, sitä tekoäly ei välttämättä näe.
3. Kirjoita tärkeät tiedot tekstinä. Tiedot, jotka ovat vain kuvissa tai PDF-tiedostoissa, ovat tekoälylle näkymättömiä.
4. Kirjoita brändin nimi leipätekstiin. Laita nimi tärkeiden tietojen viereen, jotta tekoälyn poimimassa lauseessa lukee yrityksesi nimi.
5. Anna jokaiselle sivulle yksi H1, oma otsikko ja oikea kielimerkintä. Otsikot kertovat robotille, mistä sivu kertoo.
6. Lisää rakenteinen data ja yhtenäistä profiilit. Schema-merkintöjen, yritysprofiilien ja hakemistotietojen pitää kertoa samat asiat samalla nimellä.

Aloita robots.txt-tiedostosta sekä palomuurin ja CDN-palvelun asetuksista. Tekoälyyhtiöillä on omat robottinsa, esimerkiksi GPTBot ja OAI-SearchBot (OpenAI), ClaudeBot (Anthropic) ja PerplexityBot (Perplexity). Google AI Overviews käyttää Googlen tavallista hakurobottia.

Jos robotit on estetty, tekoäly kuvaa yritystäsi muiden sivustojen perusteella. Esto voi tulla tietoturva-asetuksesta tai palveluntarjoajan oletusasetuksesta, ei tietoisesta päätöksestä. Pyydä kehittäjää varmistamaan, mitä on sallittu ja miksi.

Kun Avisible kävi matkailuyrityksen sivuston läpi ilman skriptejä, sivuja oli 812. Hinnat, retkien kestot, usein kysyttyjen kysymysten vastaukset ja linkit aktiviteetteihin latautuivat kaikki skriptillä. Pelkässä tekstissä niitä ei ollut.

Tämä näkyi suoraan tekoälyn vastauksissa. Hintaa kysyttäessä tekoäly vastasi ”alkaen 0 €” tai jätti hinnan kokonaan pois. Samalla sivustolla peruutusehdot oli kirjoitettu tavallisena tekstinä. Ne tekoäly toisti oikein joka kerta.

Testi on helppo: kytke JavaScript pois päältä ja avaa tärkeimmät sivusi. Jos hinta, tuotetiedot tai vastaus yleiseen kysymykseen katoavat, tekoäly ei todennäköisesti näe niitä. Korjaus on yleensä palvelinpuolen renderöinti tai tärkeimpien tietojen kirjoittaminen suoraan HTML:ään.

Eräällä kuluttajabrändillä tärkeät tuotetiedot olivat kuvissa ilman alt-tekstiä. Tekoälylle ne olivat näkymättömiä. Kansainvälisellä kongressijärjestäjällä keskeistä sisältöä oli lukittuna PDF-tiedostoihin.

Tekoäly osaa joskus lukea PDF:n, mutta siihen ei voi luottaa. Jos tieto vaikuttaa ostopäätökseen, kirjoita se sivulle tekstinä. Kuva tai PDF voi olla lisänä, mutta ei ainoa paikka, jossa tieto on.

Tämä yllättää useimmat. Matkailuyrityksen auditoinnissa tekoäly luki yrityksen omaa sivua 16 vastauksessa eikä silti maininnut yritystä nimeltä. Nimi oli logossa ja sivun otsikossa, mutta ei leipätekstissä.

Tekoäly poimii usein yksittäisen lauseen tai kappaleen ja käyttää sitä ilman ympäröivää sisältöä. Jos lauseessa lukee ”järjestämme huskysafareita Rovaniemeltä”, tieto siitä, kuka ”me” olemme, katoaa. Kirjoita brändin nimi tärkeiden tietojen viereen: ”\[Brändi\] järjestää huskysafareita Rovaniemeltä.” Ihmislukijasta se voi tuntua toistolta. Koneelle se on selvää.

Sivun otsikko ja pääotsikot kertovat robotille, mistä sivu kertoo. Matkailuyrityksen sivustolla 347 sivulla oli sama otsikko kuin jollain toisella sivulla. 69 saksan- ja ranskankielisellä sivulla otsikko oli englanniksi. 812 sivusta 459:ssä oli alle 300 sanaa.

Kongressijärjestäjän 71 sivusta 56:lta puuttui varsinainen H1-otsikko. Sen llms.txt-tiedosto palautti 404-virheen.

Otsikot merkitsevät myös oman sivuston ulkopuolella. Teollisuusvalmistajan tuote oli jälleenmyyjän listauksessa otsikolla, josta puuttui mallin nimi. 15 Geminin vastauksessa tuote esiintyi ilman nimeään.

Tarkista, että jokaisella sivulla on yksi selkeä H1, oma yksilöllinen otsikko sekä sivun kieltä vastaava kielimerkintä ja otsikko.

Rakenteinen data (schema-merkintä) kertoo koneille vakiomuodossa, mitä sivu kuvaa: organisaatiota, tuotetta, hintaa tai tapahtumaa. Matkailuyrityksen sivustolla rakenteista dataa ei ollut lainkaan. Organization- ja Product-merkinnät sekä sameAs-linkit virallisiin profiileihin auttavat tekoälyä yhdistämään tiedot oikeaan yritykseen.

Entiteettitietoa on myös oman sivuston ulkopuolella. Saman yrityksen Google-yritysprofiili kertoi sen olevan ”polkupyörävuokraamo”. Tekoäly toisti tämän sanasta sanaan. Brändin nimi oli lisäksi kirjoitettu verkossa kuudella eri tavalla. Merenkulun palveluyrityksellä oli kaksi sivustoa, joilla neljän toimiston tiedot olivat ristiriidassa, ja tekoäly toisti molempia versioita.

Varmista, että yritysprofiilit, hakemistot ja omat sivustosi kertovat samat asiat samalla nimellä.

Teknisten ongelmien korjaaminen poistaa esteitä. Se ei yksin tuo näkyvyyttä. Eräällä Avisiblen aineiston teknologiayrityksellä jokainen sivu oli indeksoitavissa, llms.txt oli käytössä, kaikki tekoälyn robotit oli sallittu ja sivuilla oli keskimäärin noin 900 sanaa. Silti yritystä ei juuri mainittu avoimissa kysymyksissä, joissa ostaja ei nimeä brändiä.

Kahdella muulla sivustolla schema-kattavuus oli 100 %, ja silti avoimissa kysymyksissä oli suuria aukkoja. Tekninen työ varmistaa, että tekoäly pystyy lukemaan sinua. Sisältö ja ulkopuoliset lähteet ratkaisevat, valitseeko tekoäly sinut.

Avisible tarkistaa Visibility Audit -auditoinnissa, miten tekoälyn robotit näkevät sivustosi. Auditointiin kuuluu sivuston läpikäynti ilman skriptejä, joten näet, mitä tekoäly pystyy lukemaan ja mitä ei. Avisible yhdistää tekniset havainnot todellisiin tekoälyn vastauksiin: mikä puuttuva tieto johti mihinkin väärään tai tyhjään vastaukseen.

Avisiblen AI-näkyvyyden alusta seuraa ostajien kysymyksiä jatkuvasti, joten näet, muuttuvatko vastaukset korjausten jälkeen.

Avisible tekee yhteistyötä oman kehittäjäsi tai verkkotoimistosi kanssa. Avisible löytää ongelmat ja asettaa ne vaikutuksen mukaiseen järjestykseen. Kehittäjäsi tekee korjaukset.

Avisible tarjoaa molemmat: kertaluonteisen mittauksen, joko Visibility Snapshotin tai laajan Visibility Auditin, sekä jatkuvan seurannan alustalla. Avisible on AI-näkyvyyden työkalu ja palvelu samassa, joten voit aloittaa yhdellä tarkistuksella ja jatkaa seurantatyökalulla, kun olet valmis.

Sivustohavainnot ovat Avisiblen auditoinneista. Niissä Avisible käy asiakkaan sivuston läpi ajamatta skriptejä ja vertaa tulosta keräämiinsä tekoälyn vastauksiin (ChatGPT, Gemini, Google AI Overviews ja muut, useilla kielillä). Luvut ovat yksittäisten asiakkaiden auditoinneista, eivät keskiarvoja kaikista asiakkaista.

• Miksi tekoäly ei löydä yritystämme?
• Miten AI-näkyvyyttä parannetaan? Aloita siitä, mitä tekoäly jo lukee
• Mitä eroa on SEO:lla ja GEO:lla?

Avisible mittaa, miten ChatGPT, Gemini, Perplexity ja Google AI Overviews kuvaavat ja suosittelevat brändejä – retailista ja hotelleista B2B-palveluihin, myös pohjoismaisilla kielillä. Visibility Snapshot näyttää 900 tekoälykyselyn avulla, missä tilanteissa tekoäly löytää yrityksesi, mitä se sanoo sinusta ja mitä lähteitä se lukee. Toimitus kolmessa työpäivässä, 499 €.