Scanner jooksis saidi poole peal kokku. 50 000 URL-i ja pole selget ettekujutust, mida nendega peale hakata. Tuttav stsenaarium kõigile, kes tegelevad tehnilise SEO-ga.

Screaming Frog SEO Spider on tööriist, ilma milleta muutub saidi auditeerimine oletamiseks. Kõik teavad seda: vabakutselistest kuni ettevõtte SEO-meeskondadeni. Ja kui arendajad annavad välja suure uuenduse, tasub iga uut funktsiooni uurida.

Versioon 14.0, mis anti välja koodnimega „megalomaania", tõi kuus suurt uuendust. Otseeksport Google Sheetsi, täielikud HTTP päised, küpsiste kogumine, koondatud saidistruktuur ja tume režiim, millest igaüks lahendab konkreetse töövoo valupunkte.

💡 Kiire ülevaade:

• Tume režiim vähendab silmade väsimust tundidepikkuste auditite ajal
• Eksport Google Sheetsi ühe klõpsuga, ilma vahepealsete CSV-failideta
• Täielikud HTTP päised ja küpsised on nüüd otse liideses nähtavad
• Koondatud kataloogipuu aitab visualiseerida kogu saidi arhitektuuri

1. Tume režiim

Mitte selle versiooni tehniliselt kõige keerukam, kuid kõige märgatavam funktsioon: kõik ekraanipildid vahetati tumedale teemale. Lülita sisse: Configuration > User Interface > Theme > Dark.

Neile, kes auditeerivad saite tunde väheses valguses, on erinevus tuntav. Arendajad uuendasid ka graafikat ülevaate ja saidistruktuuri vahekaartidel. Ekraanisalvestuste puhul on pilt puhtam, vaataja fookus jääb andmetele, mitte eredale taustale.

2. Eksport Google Sheetsi

Varem läksid Screaming Frog'i andmed CSV-sse ja alles seejärel Google Sheetsi. Versioon 14.0 eemaldab vaheetapi: eksport läheb otse Sheetsi Google Drive'is.

Lisa Google'i kontod ja skannimise andmed ilmuvad Drive'is Screaming Frog SEO Spider kausta.

Piirang: Google Sheets mahutab kuni 5 miljonit lahtrit. Vahekaardil Internal on vaikimisi 55 veergu ja need kolmekordistuvad kergesti. Lagi on umbes 90 000 rida. Suurte saitide puhul kasuta muid formaate või vähenda veergude arvu.

Otseeksport on sisse ehitatud ajastajasse ja käsureale, võimaldades seadistada öise skannimise automaatse üleslaadimisega Sheetsi. Meeskonnatöö ja Google Data Studio jaoks on see märkimisväärne ajakokkuhoid.

3. HTTP päised

Enne versiooni 14.0 eraldas Screaming Frog ainult põhilise päiste komplekti. Nüüd saad salvestada ja pärida täielikke HTTP päiseid, nii päringu kui ka vastuse omi.

Kasutusjuhud: vahemälu üksikasjad Cache-Control ja ETag kaudu, Set-Cookie päised, Content-Language mitmekeelsete saitide jaoks, turbepoliitikad Content-Security-Policy ja Strict-Transport-Security kaudu.

Lubamiseks: Configuration > Spider > Extraction > HTTP Headers. Vastuse päised lisatakse veergudena vahekaardile Internal. Hulgi eksport: Bulk Export > Web > All HTTP Headers.

4. Küpsised

Versioon 14.0 salvestab ja analüüsib kõiki skannimise ajal saadud küpsiseid. Luba samas kohas: Configuration > Spider > Extraction > Cookies. Andmed ilmuvad vahekaardile Cookies: nimi, väärtus, domeen, aegumine, Secure ja HttpOnly lipud.

JavaScripti kaudu laaditud küpsiste jaoks on vaja renderdusrežiimi. Ilma selleta jäävad mõned skriptide seatud küpsised nähtamatuks.

Koondanalüüs Reports > Cookies > Cookie Summary kaudu on mugav GDPR-i auditite jaoks. Hulgi eksport: Bulk Export > Web > All Cookies.

Märkus: küpsiseid kogudes lülitab SEO Spider automaatse Google Analyticsi välistamise välja. Lisa jälgimisskriptid jaotisesse Configuration > Exclude või filtreeri kasutajaagent Analyticsi tasemel.

5. Koondatud saidistruktuur

SEO Spider kuvab URL-ide arvu igas kataloogis otse kataloogipuus. Juurdepääs puuikooni kaudu nupu „Export" kõrval.

Lameda URL-ide loendi asemel näed kogu saidi arhitektuuri. Kohe on näha, kus on sektsioonid puhvis ja kus on pesastussügavus ülemäärane.

Vahekaarti „Site Structure" on uuendatud: koondatud kataloogipuu koos vaate vahetamisega, indekseeritavuse olek teelõikude kaupa, roomamissügavus kataloogide kaupa.

6. Uued konfiguratsiooniparameetrid

Kaks parameetrit Configuration > Spider > Advanced kaudu, mõlemad vaikimisi lubatud:

• Ignore Noindex URLs for On-Page Filters: mitteindekseeritavaid lehti ei märgista filtrid nagu „duplicate title" või „meta description longer than X characters". See on loogiline: noindex-lehti ei tohiks nagunii indekseerida.
• Ignore Paginated URLs for Duplicate Filters: lehekülgedeks jaotamise lehti ei loeta duplikaatideks.

Kui skannid testkeskkonna saiti, kus kõigil lehtedel on noindex, keela need parameetrid.

Muud täiustused

Versioon 14.0 sisaldab ka kasulikke parandusi:

• Filter „Missing Alt Attribute" vahekaardil Images: tühi alt="" ja puuduv atribuut on nüüd eraldatud. Dekoratiivsetel piltidel peaks olema tühi alt; puuduv atribuut lõhub ekraanilugejad.

• Headless Chrome on uuendatud, et see vastaks Googlebotile. Seade „Accept Cookies" on ümber nimetatud valikuks „Cookie Storage": Session Only, Permanent, Don't Store.

• Uued URL-i filtrid: topeltkaldkriipsud, korduv tee, tühikud, sisemised otsingu-URL-id. Filter „Missing Safe Browsing Policy Header" vahekaardil Security.

• Noindex-URL-id on filtrist „URLs not in Sitemap" välja jäetud. Google'i rikkalike tulemuste valideerimist on uuendatud.

⁉️🤔 Korduma kippuvad küsimused

Mis on Screaming Frog SEO Spider ja miks seda vaja on?

Screaming Frog SEO Spider on töölaua roomaja tehniliste SEO-auditite jaoks. See skannib saite, kogub URL-e, pealkirju, metasilte, olekukoode, ümbersuunamisi ja katkiseid linke. Tasuta versioon hõlmab kuni 500 URL-i. Tasuline litsents eemaldab limiidi ja avab JavaScripti renderdamise, integratsiooni Google Analyticsi ja Search Console'iga.

Kuidas versioon 14.0 põhimõtteliselt erineb eelmistest versioonidest?

Kolm asja: otseeksport Google Sheetsi ilma vahefailideta, HTTP päiste ja küpsiste täielik kogumine, koondatud saidistruktuuri vaade. Eelmised versioonid ei pakkunud sellist detailsuse taset.

Kas ma pean pärast uuendust Screaming Frog'i eest maksma?

Tasuta litsents (kuni 500 URL-i) jääb alles. Tasuline versioon (199 naela aastas versiooni 14.0 väljalaske ajal) eemaldab limiidi ja avab täiustatud funktsioonid. Põhiversiooni sisesed uuendused on litsentsiomanikele tasuta.

Kas SEO Spider toetab JavaScripti saitide skannimist?

Jah, sisseehitatud Headless Chrome'i kaudu. Versioonis 14.0 uuendati mootorit, et see vastaks Googlebotile. Renderdamine lubatakse jaotises Configuration > Spider > Rendering. Täpseks küpsiste kogumiseks on renderdamine vajalik.

Kust ma saan Screaming Frog SEO Spider'i alla laadida?

Ametlikult veebisaidilt: screamingfrog.co.uk/seo-spider. Versioonid on saadaval Windowsile, macOS-ile ja Ubuntule. Seal on ka täielik dokumentatsioon ja väljalaskeajalugu.

Mis saab edasi: Screaming Frog pärast versiooni 14.0

Alates versiooni 14.0 väljalaskmisest on tööriist teinud pika arenguhüppe. Väljalaskeajaloo kohaselt on arendajad lisanud LLM-põhise semantilise analüüsi, automaatse skannimise võrdluse ja MCP integratsiooni. Praegune versioon on juba 24.x. Kuid versiooni 14.0 vundament (otseintegratsioonid, töö päiste ja küpsistega) jääb SEO-spetsialisti igapäevatöö aluseks.

Alusta tasuta versiooniga, kui sa pole Screaming Frog'i veel kasutanud. Lase oma sait sellest läbi, kontrolli vahekaarte Internal ja Response Codes. See, mida näed, võib sind üllatada.