Log files analysis: cum citești crawl log-urile pentru a înțelege ce face Googlebot pe site-ul tău
Dacă ai ajuns aici, probabil te-ai săturat de rapoartele din Search Console care îți arată „Discovered – currently not indexed”…
Citește articolul
Dacă ai ajuns aici, probabil ai descărcat deja Screaming Frog și te-ai blocat la primul crawl. Sau l-ai folosit superficial, te-ai uitat la status code-uri și ai închis tab-ul. E ok, majoritatea oamenilor fac la fel.
Screaming Frog e cel mai folosit tool de audit tehnic SEO din piață și are un motiv: face ce trebuie, costă rezonabil (259 EUR/an pentru licența completă) și nu te bombardează cu dashboard-uri inutile. Dar e și genul de tool care îți dă 50 de tab-uri și te lasă să te descurci.
În continuare îți arăt cum să faci un audit tehnic real cu Screaming Frog, ce să verifici concret și ce să ignori. Fără teorie de manual.
Screaming Frog SEO Spider e un crawler desktop care simulează modul în care Googlebot parcurge site-ul tău. Vede ce vede Google (mai mult sau mai puțin) și îți raportează problemele.
Dacă ai un site de 10-200 de pagini, versiunea gratuită îți ajunge. Pentru orice e mai mare, plătește licența. Nu e negociabil.
Majoritatea oamenilor apasă „Start” și gata. Greșeală. Configurația inițială îți schimbă complet ce vezi în raport.
User-Agent: setează-l pe Googlebot (Smartphone) din Configuration > User-Agent. Vrei să vezi site-ul cum îl vede Google, nu cum îl vezi tu din Chrome.
JavaScript Rendering: dacă site-ul tău e pe React, Vue, Next.js sau orice framework JS, activează JavaScript rendering din Configuration > Spider > Rendering. Altfel vezi un site gol și intri în panică degeaba.
Respect robots.txt: lasă-l activ pentru un audit realist. Dezactivează-l doar dacă vrei să vezi ce blochezi în mod special.
Crawl Limits: pentru site-uri mari, limitează adâncimea la 5-7 niveluri inițial. Vezi structura, apoi extinzi.
După ce s-a terminat crawl-ul, prima oprire e tab-ul „Response Codes”. Aici găsești problemele evidente.
Realist, pe orice site cu istoric vei găsi 20-100 de 404-uri. Nu intra în panică. Concentrează-te pe cele care au linkuri interne către ele și pe cele care apar în Search Console ca având trafic istoric.
Aici Screaming Frog strălucește. Tab-urile „Page Titles”, „Meta Description” și „H1″ îți arată exact unde ai probleme.
Ce verifici concret:
Sortează după coloana „Occurrences” și începe cu duplicatele. Acolo ai impactul cel mai mare cu efortul cel mai mic.
În tab-ul „Images” găsești toate imaginile crawl-uite. Filtrele importante:
Pentru viteză reală, conectează Screaming Frog la API-ul de PageSpeed Insights (Configuration > API Access). Vei vedea LCP, CLS, FID/INP pentru fiecare URL crawl-uit. E mult mai eficient decât să verifici pagină cu pagină în PageSpeed.
Generează sitemap-ul din Sitemaps > XML Sitemap. Compară-l cu sitemap-ul actual al site-ului. Diferențele îți spun multe:
Verifică și directiva meta robots din tab-ul „Directives”. Caută pagini setate pe „noindex” care n-ar trebui să fie. Am văzut situații în care developerii uită noindex-ul de pe staging după lansare. Site complet invizibil în Google. Da, se întâmplă des.
Tab-ul „Internal” și „Inlinks” îți arată cum curge autoritatea prin site. Două lucruri pe care le verific mereu:
Orphan pages: pagini care există în sitemap dar nu au niciun link intern către ele. Conectează crawl-ul cu Google Analytics și Search Console pentru a le identifica. Dacă au trafic dar nu au linkuri interne, le pierzi degeaba.
Pagini cu prea puține linkuri interne: sortează coloana „Inlinks” crescător. Paginile importante (categorii, servicii principale, articole de bani) ar trebui să aibă minim 5-10 linkuri interne. Dacă au 1-2, ai o problemă de arhitectură.
Pentru linkurile externe pe care le primești de la advertoriale sau campanii de articole de brand, Screaming Frog nu te ajută direct – vezi doar linkurile de pe site-ul tău, nu cele care intră. Pentru monitorizarea linkurilor externe ai nevoie de alte tool-uri sau de sisteme dedicate gen Link Guardian din platforma SEO Digital, care îți spun când un link plătit dispare sau devine nofollow.
Realist:
Dacă cineva îți promite audit tehnic complet pentru un site de 5.000 de pagini în 2 ore la 100 EUR, fugi. Probabil îți dă export brut din Screaming Frog fără interpretare. Aia nu e audit, e listă de erori.
Screaming Frog e indispensabil pentru audit tehnic SEO serios, dar e doar un tool – nu îți face treaba în locul tău. Configurează-l corect (user-agent Googlebot, JS rendering dacă e cazul), conectează-l cu Search Console și Analytics, prioritizează problemele după impact și nu te pierde în detalii minore. Un audit bun cu Screaming Frog îți rezolvă 70-80% din problemele tehnice ale site-ului. Restul ține de strategie, conținut și linkuri externe.
Creezi contul în câteva minute, alegi prima publicație și vezi cum funcționează procesul real. Fără abonament, fără volum minim, fără să te legi de nimic.