Google alla prova dei fatti: sfatiamo alcuni miti #SEOMythbusting

In questo intervento mostriamo alcuni test condotti su prototipi di pagine web create a fini di prova. L'obiettivo è sfatare alcuni miti - a volte diffusi proprio da Google - su scansione, indicizzazione e posizionamento.

Transcript

1. Contenuto riservato e confidenziale. Google alla prova dei fatti: sfatiamo alcuni miti Gianluca Campo, Demetrio Orecchio #SEOMythbusting #SMConnect
2. Gianluca Campo Head of SEO & Analytics Demetrio Orecchio SEO & Analytics Specialist Senior
3. Indice 1. Introduzione e premesse 2. Cosa accade se inseriamo disallow e noindex? 3. Il nofollow è trattato come suggerimento? 4. Google preferisce HTTPS a HTTP? 5. Google scansiona i link in JavaScript? 6. Intermezzo (Analisi dei log con KNIME e SEO Log File Analyser) 7. Indexing API: aiutano l'indicizzazione? 8. Dopo quanti redirect hop Google non scansiona? 9. Inserire h1nell'head lo rompe? 10. Il noindex nel body viene considerato? 11. Cosa accade con noindex e canonical insieme? 12. I dati strutturati influenzano il ranking?
4. Premesse
5. Premesse 1. I test eseguiti sono soprattutto volti a riflettere sui fondamenti di scansione, indicizzazione e posizionamento a volte ignorati 2. Non c’è alcuna intenzione di screditare esponenti di Google o altri SEO, ma solo constatare il più possibile se qualcosa risulta vero o meno 3. Aggiornamenti di linee guida o documentazione possono essere avvenuti nelle ultime settimane, dunque i nostri test possono essere stati superati da novità recenti 4. In alcuni casi i test non hanno portato risultati significativi o a conclusioni diverse da quanto previsto
6. Come abbiamo condotto i test 1. Abbiamo effettuato i nostri test in maniera più semplice ed efficace possibile cercando di rimuovere elementi che potessero comprometterne la validità 2. I metodi utilizzati per svolgere i test hanno puntato sulla rapidità, a discapito della rigorosità in alcuni casi 3. Abbiamo usato solo Google Search Console per favorire la scansione, nessun altro metodo (a parte alcuni link esterni per la prima indicizzazione della homepage) 4. Tutti gli screen delle SERP sono state fatte con browser in incognito, per limitare l'influenza delle preferenze dei nostri browser sui risultati di ricerca
8. Passo 1. Avere un sito su cui effettuare i test Il primo passo è stato scegliere e registrare un dominio su cui effettuare i test. Abbiamo registrato il dominio https://nkseolab.com/ che abbiamo popolato con pagine HTML molto basilari, a volte un po' di JavaScript e qualche CSS.
9. Passo 2: Configurazione Google Search Console e prima indicizzazione Appena creato il sito, abbiamo configurato Google Search Console e ispezionato la URL dell'homepage. Con nostra grande sorpresa Google non indicizzava la homepage perché il contenuto canonico selezionato era https://www.dapupetta.it (un ristorante qualunque di Vercelli ☺)
10. Test #1 Cosa accade se inseriamo disallow e noindex?
11. Google: ‘’For the noindex to be effective, the page must not be blocked’’ Fonte: https://developers.google.com/search/docs/crawling-indexing/block-indexing
12. Indicizziamo una pagina qualunque
13. Inseriamo un noindex su codice ma anche un Disallow nel robots.txt https://nkseolab.com/londra6.html
14. Il primo risultato è che Google non può più scansionare
15. Restiamo in attesa che Google segnali la pagina bloccata da robots.txt
16. Google: ‘’For the noindex to be effective, the page must not be blocked’’ Fonte: https://developers.google.com/search/docs/crawling-indexing/block-indexing
17. Test #2 Il nofollow è trattato come suggerimento?
18. Google: ‘’nofollow will become a hint as of March 1, 2020’’ Fonte: https://developers.google.com/search/blog/2019/09/evolving-nofollow-new-ways-to-identify
19. Creiamo due pagine diverse ma che puntano allo stesso target https://nkseolab.com/esperimento-nofollow-2.html https://nkseolab.com/esperimento-nofollow-1.html Target, presente anche nel title
20. Indicizziamo entrambe le pagine
21. Sistemiamo i link in menu e footer, ma mettendo un nofollow nel menu Menu della homepage Footer della homepage
22. Il posizionamento premia la pagina senza nofollow, malgrado sia nel footer
23. Google: ‘’nofollow will become a hint as of March 1, 2020’’ Fonte: https://developers.google.com/search/blog/2019/09/evolving-nofollow-new-ways-to-identify
24. Test #3 Google preferisce HTTPS a HTTP?
25. Google: ‘’Google prefers to index the HTTPS version’’ Fonte: https://support.google.com/webmasters/answer/11396518
26. Creiamo una pagina orfana raggiungibile sotto HTTP e HTTPS Codice di risposta di https://nkseolab.com/milan.html Codice di risposta di http://nkseolab.com/milan.html
27. Dopo nostro invio su GSC Google le ha scansionate entrambe
28. Google indicizza la versione HTTPS, selezionandola come canonica
29. Google: ‘’Google prefers to index the HTTPS version’’ Fonte: https://support.google.com/webmasters/answer/11396518
30. Test #4 Google scansiona i link in JavaScript?
31. Google: ‘’Can follow links only if they are an <a> tag with an href attribute’’ Fonte: https://developers.google.com/search/docs/crawling-indexing/links-crawlable
32. Indicizziamo una pagina con due link a pagine altrimenti orfane https://nkseolab.com/roma.html
33. Attenzione: entrambi i link sono inseriti dinamicamente Screaming Frog con JS abilitato trova solo il primo link Screaming Frog con JS disabilitato non trova alcuno dei due link
34. Anche nei log notiamo che Google ha scansionato solo il primo link
35. Google: ‘’Can follow links only if they are an <a> tag with an href attribute’’ Fonte: https://developers.google.com/search/docs/crawling-indexing/links-crawlable
36. Analisi dei log con KNIME e SEO Log File Analyser Intermezzo
37. KNIME Analytics Platform • KNIME Analytics Platform è una piattaforma gratuita no-code/low- code per la data science, che usa la programmazione visuale per costruire sequenze di attività. • La piattaforma è basata su un’interfaccia drag & drop in cui si costruiscono pipeline di blocchi e ognuno di questi corrisponde ad un’attività precisa. • KNIME nasce per la data science dunque è trasversale a diversi ambiti per propria natura. • KNIME è nato nel 2006 nei laboratori dell’Università di Costanza: a questo deve il suo nome KN (Konstanz) IM (Information Miner) E. https://en.wikipedia.org/wiki/KNIME
38. Composizione della workbench
39. KNIME // Usiamo questo workflow https://kni.me/w/RHTIZn7EEJSlQn4C
40. KNIME // 1. Scarichiamo i file di log e li salviamo in una cartella sul desktop Spesso i file di log sono compressi
41. KNIME // 2. Impostiamo il nodo Web Log Reader
42. …dal file di log alla tabella: il risultato del nodo Web Log Reader
43. KNIME // 3. Pre-processiamo un po’ i dati Convertiamo gli IP in paesi Modifichiamo le date e rimuoviamo il quarto ottetto dagli IP per semplificare la successiva ricerca
44. KNIME // 4. Un metanodo per interpretare il JSON con indirizzi IP di Google Il metanodo è un gruppo di nodi, una sorta di mini-workflow Leggiamo il JSON scaricato da https://developers.google.com/static/ search/apis/ipranges/googlebot.json Processiamo fino ad ottenere una tabella utile ai nostri scopi
45. …dal JSON alla tabella: il risultato del metanodo *ATTENZIONE, nota tecnica su IPv6: non è corretto modificarne la notazione!
46. KNIME // 5. Filtriamo la tabella con i log applicando gli IP di Google
47. KNIME // 6. Scriviamo i risultati in un file Excel
49. Cos’è SEO Log File Analyser? Uno strumento estremamente utile per l'analisi dei log è SEO Log File Analyser di Screaming Frog.
50. Come impostare il file di log Lo strumento di Screaming Frog riesce, quasi sempre, a riconoscere i campi principali. Dove non riesce, è possibile settare manualmente i campi.
51. I dettagli del tab Events Il tab event contiene i dati Row importati nella fase precedente e permette di ordinare o filtrare le richieste in base al Timestamp, useragent, path URL, etc.
52. Test #5 Indexing API: aiutano l'indicizzazione?
53. Google: ‘’the Indexing API can only be used to crawl pages with JobPosting…’’ Fonte: https://developers.google.com/search/apis/indexing-api/v3/quickstart
54. Costruiamo una pagina senza i requisiti richiesti da Google La pagina non presenta alcun tipo di dato strutturato ed ha contenuto testuale generato casualmente e senza senso. https://nkseolab.com/c18/n2.html
55. Inviamo la pagina mediante Indexing API La pagina è orfana e quindi non linkata mai internamente né tramite Sitemap né inviata mediante Google Search Console. È stata inviata solo tramite le API per verificare se venisse scansionata ed indicizzata da Google mediante Indexing API. Script usato per fare le chiamate alle Indexing API
57. Creiamo un progetto su Google Cloud Platform 1 2
58. Generiamo un account di servizio
59. Diamo il nome che più ci piace al nostro servizio
60. Aggiungiamo una chiave al nostro servizio
61. Aggiungiamo una chiave al nostro servizio #1
62. Aggiungiamo una chiave al nostro servizio #2
63. Aggiungiamo la mail tra i proprietari di Google Search Console
64. Google ha indicizzato la pagina anche se non è un JobPosting! La pagina a distanza di poche ore è stata indicizzata da Google.
65. Google: ‘’the Indexing API can only be used to crawl pages with JobPosting…’’ Fonte: https://developers.google.com/search/apis/indexing-api/v3/quickstart
66. Test #6 Dopo quanti redirect hop Google non scansiona?
67. John Mueller: ‘’up to 5 hops in the chain per crawl attempt’’ Fonte: https://www.searchenginejournal.com/googles-john-mueller-recommends-less-than-5-hops-per-redirect-chain/344664/
68. Posizioniamo una pagina orfana alla fine di una catena oltre i 5 hop 3 salti 4 salti 5 salti 6 salti 301 https://nkseolab.co m/aaaa 301 https://nkseolab.co m/a 301 https://nkseolab.co m/aaa 301 https://nkseolab.co m/ab 301 https://nkseolab.co m/bbbb 301 https://nkseolab.co m/b 301 https://nkseolab.co m/bbb 301 https://nkseolab.co m/bc 301 https://nkseolab.co m/cccc 301 https://nkseolab.co m/c 301 https://nkseolab.co m/ccc 301 https://nkseolab.co m/cd 200 https://nkseolab.co m/c15/qq.html 301 https://nkseolab.co m/d 301 https://nkseolab.co m/ddd 301 https://nkseolab.co m/de 200 https://nkseolab.co m/c15/q.html 301 https://nkseolab.co m/eee 301 https://nkseolab.co m/ef 200 https://nkseolab.co m/c15/qqq.html 301 https://nkseolab.co m/ge 200 https://nkseolab.co m/c15/qqqq.html Scansionata? Sì Scansionata? Sì Scansionata? Sì Scansionata?
69. Google scansiona la pagina? Guardiamo il file di log 1 2 3 4 5 6
70. L’indicizzazione della pagina a 6 hop è inoltre avvenuta con successo
71. Tuttavia, le linee guida di Google sono intanto cambiate Martino Mosna ci ha segnalato che sono state aggiornate le linee guida. Per questa ragione abbiamo fatto altri 2 tentativi. Fonte: https://developers.google.com/search/docs/crawling-indexing/http-network-errors
72. Cosa accade dunque? 10 salti 11 salti 301 https://nkseolab.com/prova1 301 https://nkseolab.com/pro1 301 https://nkseolab.com/prova2 301 https://nkseolab.com/pro2 301 https://nkseolab.com/prova3 301 https://nkseolab.com/pro3 301 https://nkseolab.com/prova4 301 https://nkseolab.com/pro4 301 https://nkseolab.com/prova5 301 https://nkseolab.com/pro5 301 https://nkseolab.com/prova6 301 https://nkseolab.com/pro6 301 https://nkseolab.com/prova7 301 https://nkseolab.com/pro7 301 https://nkseolab.com/prova8 301 https://nkseolab.com/pro8 301 https://nkseolab.com/prova9 301 https://nkseolab.com/pro9 301 https://nkseolab.com/prova10 301 https://nkseolab.com/pro10 200 https://nkseolab.com/c15/qa.html 301 https://nkseolab.com/pro11 200 https://nkseolab.com/c15/qqaa.html Scansionata? Scansionata?
73. A 10 hop vediamo tutto scansionato correttamente 1 2 3 4 5 6 7 8 9 10
74. La pagina a 10 hop non sembra indicizzata, invece… Pagina di destinazione della catena Check indicizzazione pagina di origine della catena Check indicizzazione pagina di destinazione della catena
75. Anche 11 hop sono scansionati con successo! 1 2 3 4 5 6 7 8 9 11 10
76. L’indicizzazione è avvenuta come atteso Pagina di destinazione della catena Check indicizzazione pagina di destinazione della catena
77. John Mueller: ‘’up to 5 hops in the chain per crawl attempt’’ Fonte: https://www.searchenginejournal.com/googles-john-mueller-recommends-less-than-5-hops-per-redirect-chain/344664/
78. Test #7 Inserire h1nell'head lo rompe?
79. John Mueller: ‘’For us, this implicitly closes the head’’ Fonti: http://www.thesempost.com/avoid-non-head-html-tags-head-section-pages/ https://www.reddit.com/r/TechSEO/comments/87pxsu/comment/dwh3hd9/
80. Costruiamo una pagina con l’h1 posizionato nell'head prima del canonical https://nkseolab.com/c1/aa.html Il canonical punta a https://nkseolab.com/c1/aaa.html
81. Nonostante il canonical, la pagina rimane indicizzata
82. John Mueller: ‘’For us, this implicitly closes the head’’ Fonti: http://www.thesempost.com/avoid-non-head-html-tags-head-section-pages/ https://www.reddit.com/r/TechSEO/comments/87pxsu/comment/dwh3hd9/
83. Test #8 Il noindex nel body viene considerato?
84. Kristina Azarenko: ‘’Google respects the noindex tag found in the page <body>’’ Fonte: https://marketingsyrup.com/the-curious-case-of-noindexed-page/
85. Facciamo indicizzare una pagina qualunque
86. Inseriamo un meta robots noindex dentro il body
87. Google in effetti rispetta il noindex anche se si trova nel body!
88. Rimuovendo il noindex la pagina torna disponibile
89. Kristina Azarenko: ‘’Google respects the noindex tag found in the page <body>’’ Fonte: https://marketingsyrup.com/the-curious-case-of-noindexed-page/
90. Test #9 Cosa accade con noindex e canonical insieme?
91. John Mueller: ‘’we pick the rel=canonical and use that over the noindex’’ Fonti: https://www.contentkingapp.com/academy/canonical/faq/noindex/ https://www.reddit.com/r/TechSEO/comments/8yahdr/comment/e2dey9i/
92. Abbiamo creato due pagine per il test 1. /dubai1.html (noindex + canonical verso la 2) 2. /dubai2.html (orfana ma riceve canonical) https://nkseolab.com/dubai1.html
93. noindex + canonical: vince il noindex 1 2
94. Googlebot ha scansionato tutte le pagine create Ricordiamoci questa data
95. La pagina indicata dal canonical viene indicizzata dopo nostro invio Non era già passato prima?
97. Creiamo una pagina con canonical verso una pagina con noindex La pagina https://nkseolab.com/newyork1.html possiede un noindex La pagina https://nkseolab.com/newyork.html punta a https://nkseolab.com/newyork1.html
98. Dai log però vediamo che Google ha scansionato tutte le pagine
99. Google indicizza la pagina ignorando il canonical
100. John Mueller: ‘’we pick the rel=canonical and use that over the noindex’’ Fonti: https://www.contentkingapp.com/academy/canonical/faq/noindex/ https://www.reddit.com/r/TechSEO/comments/8yahdr/comment/e2dey9i/
101. Test #10 I dati strutturati influenzano il ranking?
102. SearchLiaison: ‘’ It has no impact on ranking’’ Fonte: https://twitter.com/searchliaison/status/1217854447449247745 Nostro sondaggio
103. Costruiamo due pagine con le stesse caratteristiche, ma non duplicate Le pagine sono: • orfane • testi diversi ma entrambi senza un senso logico • stesso h1 • stesso title • stessa meta description https://nkseolab.com/c20/sd2.html https://nkseolab.com/c20/sd1.html
104. Inseriamo dei dati strutturati di tipo Article nella pagina 1 https://nkseolab.com/c20/sd1.html
105. Per questa query si posiziona la pagina CON dati strutturati
106. Per quest’altra Google ritiene più rilevante la pagina SENZA dati strutturati
108. Costruiamo due pagine con le stesse caratteristiche Le pagine sono: • con contenuto testuale molto simile • stesso h1 • stesso title • stessa meta description • inseriti nella Sitemap • linkati nel menu laterale del sito https://nkseolab.com/madagascar2.html https://nkseolab.com/madagascar1.html
109. Aggiungiamo i dati strutturati solo a pagina 1: si posiziona meglio
110. Aggiungiamo i dati strutturati solo a pagina 2: i risultati si invertono
111. SearchLiaison: ‘’ It has no impact on ranking’’ Fonte: https://twitter.com/searchliaison/status/1217854447449247745 Nostro sondaggio
112. Grazie!
113. recruitment@nucleusagency.com