Scanner kaatui kesken sivuston läpikäynnin. 50 000 URL-osoitetta, eikä selkeää käsitystä siitä, mitä niillä tekisi. Tutunoloinen tilanne kenelle tahansa teknisen hakukoneoptimoinnin parissa työskentelevälle.

Screaming Frog SEO Spider, työkalu, jota ilman sivuston auditointi on arvailua. Kaikki tuntevat sen: freelancereista yritysten SEO-tiimeihin. Ja kun kehittäjät julkaisevat ison päivityksen, jokainen uusi ominaisuus kannattaa tutkia tarkkaan.

Versio 14.0, joka julkaistiin koodinimellä "megalomania", toi kuusi merkittävää uudistusta. Suora vienti Google Sheetsiin, täydet HTTP-otsakkeet, evästeiden keruu, koostettu sivustorakenne ja tumma tila, joista jokainen ratkaisee tietyn työnkulun ongelmakohdan.

💡 Pikakatsaus:

• Tumma tila vähentää silmien rasitusta tuntikausia kestävien auditointien aikana
• Vienti Google Sheetsiin yhdellä klikkauksella, ilman väliaikaisia CSV-tiedostoja
• Täydet HTTP-otsakkeet ja evästeet nyt näkyvissä suoraan käyttöliittymässä
• Koostettu hakemistopuu auttaa hahmottamaan koko sivuston arkkitehtuurin

1. Tumma tila

Ei julkaisun teknisesti monimutkaisin ominaisuus, mutta huomattavin: kaikki kuvakaappaukset vaihdettiin tummaan teemaan. Ota käyttöön kohdasta Configuration > User Interface > Theme > Dark.

Niille, jotka auditoivat sivustoja tuntikausia hämärässä valaistuksessa, ero on tuntuva. Kehittäjät päivittivät myös grafiikat yleiskatsaus- ja sivustorakennevälilehdillä. Ruutukaappauksia varten kuva on selkeämpi, ja katsojan huomio pysyy datassa kirkkaan taustan sijaan.

2. Vienti Google Sheetsiin

Aiemmin Screaming Frogin data siirtyi ensin CSV-muotoon ja vasta sitten Google Sheetsiin. Versio 14.0 poistaa välivaiheen: vienti menee suoraan Sheetsiin Google Drivella.

Lisää Google-tilit, ja skannausdata ilmestyy Screaming Frog SEO Spider -kansioon Drivella.

Rajoitus: Google Sheetsiin mahtuu enintään 5 miljoonaa solua. Internal-välilehdellä on oletuksena 55 saraketta, ja ne kolminkertaistuvat helposti. Katto on noin 90 000 rivissä. Suurille sivustoille kannattaa käyttää muita formaatteja tai vähentää sarakkeiden määrää.

Suora vienti on sisäänrakennettu ajastimeen ja komentoriville, joten voit asettaa yöllisen skannauksen automaattisella siirrolla Sheetiin. Tiimityöskentelyn ja Google Data Studion kannalta se on merkittävä ajansäästäjä.

3. HTTP-otsakkeet

Ennen versiota 14.0 Screaming Frog poimi vain perusotsakkeet. Nyt voit tallentaa ja kysellä täydet HTTP-otsakkeet, sekä pyyntö- että vastausotsakkeet.

Käyttötapauksia: välimuistin hallinnan tiedot Cache-Control- ja ETag-otsakkeiden kautta, Set-Cookie-otsakkeet, Content-Language monikielisille sivustoille, tietoturvakäytännöt Content-Security-Policy- ja Strict-Transport-Security-otsakkeiden avulla.

Käyttöönotto: Configuration > Spider > Extraction > HTTP Headers. Vastausotsakkeet lisätään sarakkeiksi Internal-välilehdelle. Massavienti kohdasta Bulk Export > Web > All HTTP Headers.

4. Evästeet

Versio 14.0 tallentaa ja analysoi kaikki skannauksen aikana vastaanotetut evästeet. Ota käyttöön samasta paikasta: Configuration > Spider > Extraction > Cookies. Data näkyy Cookies-välilehdellä: nimi, arvo, domain, vanheneminen, Secure- ja HttpOnly-liput.

JavaScriptin kautta ladattuja evästeitä varten tarvitaan renderöintitila. Ilman sitä osa skriptien asettamista evästeistä jää näkymättömiin.

Koostettu analyysi kohdasta Reports > Cookies > Cookie Summary on kätevä GDPR-auditointeihin. Massavienti: Bulk Export > Web > All Cookies.

Huomio: kun evästeitä kerätään, SEO Spider poistaa käytöstä Google Analyticsin automaattisen poissulkemisen. Lisää seurantaskriptit kohtaan Configuration > Exclude tai suodata user-agent Analyticsin tasolla.

5. Koostettu sivustorakenne

SEO Spider näyttää URL-osoitteiden määrän kussakin hakemistossa suoraan hakemistopuussa. Pääset siihen "Export"-painikkeen vieressä olevasta puukuvakkeesta.

Litteän URL-listan sijaan näet koko sivuston arkkitehtuurin. On heti ilmeistä, missä osiot ovat paisuneet ja missä sisäkkäisyyden syvyys on liiallinen.

"Site Structure" -välilehti on päivitetty: koostettu hakemistopuu näkymän vaihdolla, indeksoitavuuden tila polun osien mukaan, selaussyvyys hakemistoittain.

6. Uudet konfigurointiparametrit

Kaksi parametria kohdassa Configuration > Spider > Advanced, molemmat oletuksena käytössä:

• Ignore Noindex URLs for On-Page Filters: ei-indeksoitavia sivuja ei liputeta suodattimilla, kuten "sama otsikko" tai "meta description pidempi kuin X merkkiä". Tämä on järkevää: noindex-sivuja ei pitäisi muutenkaan indeksoida.
• Ignore Paginated URLs for Duplicate Filters: sivutus-sivuja ei lasketa duplikaateiksi.

Kun skannaat staging-sivustoa, jossa on noindex kaikilla sivuilla, ota nämä parametrit pois käytöstä.

Muut parannukset

Versio 14.0 sisältää myös hyödyllisiä korjauksia:

• "Missing Alt Attribute" -suodatin Images-välilehdellä: tyhjä alt="" ja puuttuva attribuutti on nyt eroteltu. Koristekuvilla tulisi olla tyhjä alt; puuttuva attribuutti rikkoo ruudunlukijat.

• Headless Chrome päivitetty vastaamaan Googlebotia. "Accept Cookies" -asetus on nimetty uudelleen "Cookie Storage": Session Only, Permanent, Don't Store.

• Uudet URL-suodattimet: kaksoiskauttaviivat, toistuva polku, välilyönnit, sisäiset haku-URL:t. "Missing Safe Browsing Policy Header" -suodatin Security-välilehdellä.

• Noindex-URL:t poistettu "URLs not in Sitemap" -suodattimesta. Googlen rich results -validointi päivitetty.

⁉️🤔 Usein kysytyt kysymykset

Mikä on Screaming Frog SEO Spider ja mihin sitä tarvitaan?

Screaming Frog SEO Spider on työpöytäcrawler teknisiin SEO-auditointeihin. Se skannaa sivustoja, kerää URL-osoitteet, otsikot, meta-tagit, tilakoodit, uudelleenohjaukset ja rikkinäiset linkit. Ilmainen versio kattaa enintään 500 URL-osoitetta. Maksullinen lisenssi poistaa rajoituksen ja avaa JavaScript-renderöinnin, integraation Google Analyticsiin ja Search Consoleen.

Miten versio 14.0 eroaa perustavanlaatuisesti aiemmista versioista?

Kolme asiaa: suora vienti Google Sheetsiin ilman välitiedostoja, täysi HTTP-otsakkeiden ja evästeiden keruu, koostettu sivustorakennenäkymä. Aiemmat versiot eivät tarjonneet tätä tarkkuustasoa.

Täytyykö Screaming Frogista maksaa päivityksen jälkeen?

Ilmainen lisenssi (enintään 500 URL-osoitetta) säilyy. Maksullinen versio (199 puntaa vuodessa version 14.0 julkaisuhetkellä) poistaa rajoituksen ja avaa edistyneet ominaisuudet. Päivitykset pääversion sisällä ovat ilmaisia lisenssin haltijoille.

Tukeeko SEO Spider JavaScript-sivustojen skannausta?

Kyllä, sisäänrakennetun Headless Chromen kautta. Versiossa 14.0 moottori päivitettiin vastaamaan Googlebotia. Renderöinti otetaan käyttöön kohdassa Configuration > Spider > Rendering. Tarkkaa evästeiden keruuta varten renderöinti on välttämätön.

Mistä voin ladata Screaming Frog SEO Spiderin?

Viralliselta verkkosivustolta: screamingfrog.co.uk/seo-spider. Versiot ovat saatavilla Windowsille, macOS:lle ja Ubuntulle. Täydellinen dokumentaatio ja julkaisuhistoria löytyvät myös sieltä.

Mitä seuraavaksi: Screaming Frog version 14.0 jälkeen

Version 14.0 julkaisun jälkeen työkalu on kehittynyt pitkälle. Julkaisuhistorian mukaan kehittäjät ovat lisänneet LLM-pohjaisen semanttisen analyysin, automaattisen skannausten vertailun ja MCP-integraation. Nykyinen versio on jo 24.x. Mutta version 14.0 perusta (suorat integraatiot, työskentely otsakkeiden ja evästeiden kanssa) on edelleen SEO-asiantuntijan päivittäisen työn ydin.

Aloita ilmaisversiolla, jos et ole vielä käyttänyt Screaming Frogia. Aja sivustosi sen läpi, tarkista Internal- ja Response Codes -välilehdet. Se, mitä näet, saattaa yllättää sinut.