You're seeing Seahawk's original 2015 colors and logo. Thousands of WordPress sites maintained since.

Home/Sviluppo/Guida semplice per modificare facilmente un file Robots.txt in WordPress
Guide

Guida semplice per modificare facilmente un file Robots.txt in WordPress

By Monika Singh December 13, 2024 Updated January 6, 2026 8 min read

Ti stai chiedendo come modificare efficacemente il file robots.txt in WordPress? Questo piccolo ma potente file è come una mappa per di scansione dei motori di ricerca , che li guida su quali parti del tuo sito dovrebbero o non dovrebbero esplorare. Controllandolo, puoi aiutare i motori di ricerca a concentrarsi sulle tue pagine più importanti, migliorando la velocità del tuo sito e il posizionamento SEO.

Sebbene WordPress generi automaticamente un file robots.txt per il tuo sito, potrebbe non soddisfare sempre le tue esigenze specifiche. A volte, potresti dover apportare delle modifiche per garantire che i motori di ricerca vedano solo ciò che desideri.

Se l'idea di modificare il file robots.txt ti spaventa, non preoccuparti: sei nel posto giusto! In questa guida, spiegheremo a cosa serve il file robots.txt, perché è importante e i modi più semplici per modificarlo sul tuo sito WordPress. Iniziamo.

Comprendere il file Robots.txt in WordPress

Parliamo del file robots.txt in WordPress: è più semplice di quanto sembri! Questo semplice file di testo si trova nella directory principale del tuo sito web e fornisce ai robot dei motori di ricerca, o bot, una serie di istruzioni. In pratica, indica loro quali parti del tuo sito devono o non devono esplorare e indicizzare.

Pensala come se stessi fornendo ai motori di ricerca una serie di linee guida. Ad esempio, i crawler di Google (chiamati Googlebot) controllano frequentemente i siti web per aggiornare il loro indice di ricerca. Quando visitano il tuo sito, consultano il file robots.txt per le istruzioni su cosa fare.

L'obiettivo principale di questo file è aiutarti, in quanto proprietario di un sito web, a controllare a quali informazioni i motori di ricerca possono accedere. Puoi usarlo per impedire ai bot di scansionare pagine o directory specifiche del tuo sito. Ma ecco un avvertimento: non tutti i bot rispettano le regole. Mentre quelli affidabili come Google seguono le linee guida, alcuni bot non autorizzati potrebbero ignorarle.

Esplora: Elenco dei crawler - Esplorazione dei migliori crawler web per SEO

Perché è necessario modificare un file Robots.txt in WordPress?

Perché dovresti preoccuparti di modificare il file robots.txt sul tuo sito WordPress? A quanto pare ci sono diverse buone ragioni per farlo. Analizziamole:

Aumenta la velocità del tuo sito

Non tutte le pagine del tuo sito web devono essere indicizzate dai bot dei motori di ricerca. Indicando a questi bot di saltare le pagine non necessarie, puoi liberare risorse e migliorare la velocità di caricamento del tuo sito. I siti web più veloci non solo rendono i visitatori più soddisfatti, ma si posizionano anche meglio nei risultati di ricerca!

Ottimizza le prestazioni del server

I bot che non contribuiscono al successo del tuo sito web possono finire per monopolizzare le risorse del server e intasare i log con errori 404.Modificare il file robots.txt ti aiuta a bloccare questi bot indesiderati, mantenendo il server efficiente e garantendo prestazioni migliori.

Proteggere le informazioni sensibili

Alcune parti del tuo sito web, come pagine di amministrazione, documenti privati ​​o contenuti riservati, non dovrebbero essere indicizzate dai motori di ricerca. Utilizzando il file robots.txt, puoi indicare ai bot di evitare queste aree, contribuendo a salvaguardare la tua privacy e la tua sicurezza.

Scopri come risolvere il problema di Search Console "Nuovo motivo che impedisce l'indicizzazione delle tue pagine".

Guida i bot verso il contenuto giusto

Vuoi che i motori di ricerca si concentrino su pagine o post specifici? Il file robots.txt ti consente di indirizzare i bot verso i tuoi contenuti. Questo ti aiuta a stabilire le priorità per l'indicizzazione, aumentando le tue possibilità di ottenere un posizionamento più alto nei risultati di ricerca.

Evita problemi di contenuti duplicati

I contenuti duplicati, come le pagine di categorie o tag, possono confondere i motori di ricerca e compromettere il posizionamento SEO. Con un file robots.txt ben ottimizzato, puoi impedire ai bot di indicizzare queste pagine, mantenendo i contenuti del tuo sito puliti e ottimizzati per i motori di ricerca.

Correlati: Come correggere i tag dei titoli duplicati in WordPress per migliorare la SEO

Modificare un file Robots.txt in WordPress: 3 metodi

Ora che hai capito la funzione del file Robots.txt in WordPress, vediamo come modificarlo in tre semplici modi.

  • Utilizzo di un client FTP
  • Utilizzo di cPanel
  • Utilizzo del plugin AIOSEO

Ti guideremo passo dopo passo attraverso ogni metodo. Ma prima di iniziare, tieni presente che se utilizzi il client FTP o l'approccio cPanel, dovrai prima creare manualmente un file robots.txt. Iniziamo!

Modifica del file Robots.txt tramite un client FTP

Per modificare il file robots.txt in WordPress con un client FTP, è necessario configurare il client FTP e connetterlo al proprio sito web. Opzioni popolari come FileZilla e Cyberduck funzionano benissimo, ma in questa guida useremo FileZilla.

Passaggio 1: collega il tuo sito web WordPress all'FTP.

  • Innanzitutto, installa FileZilla sul tuo computer. Una volta installato, apri l'applicazione e vai su File > Gestione siti (oppure premi Ctrl+S per una scorciatoia).
  • Successivamente, fai clic su Nuovo sito e assegnagli un nome nella sezione "I miei siti".
  • Ora, passa alla Generale e inserisci le credenziali del tuo sito. Queste credenziali si trovano solitamente nella dashboard del tuo provider di hosting.
  • Dopo aver inserito le credenziali, fare clic su Connetti.

Ora ci siamo! Vedrai la directory dei file del tuo sito sul client FTP. Passiamo al caricamento del file robots.txt.

Passaggio 2: carica il file Robots.txt su WordPress

  • Accedi alla directory principale del tuo sito web, solitamente chiamata public_html. È qui che dovrebbe trovarsi il file robots.txt.
  • Se il file robots.txt è già presente, puoi sostituirlo con quello nuovo. Altrimenti, carica semplicemente il file creato in precedenza.

Ed ecco fatto! Il tuo file robots.txt è ora al suo posto. Per verificare che tutto funzioni correttamente, apri il tuo browser e aggiungi /robots.txt alla fine del tuo dominio. Ad esempio, example.com/robots.txt.

Scopri: come configurare un account FTP per WordPress?

Modificare Robots.txt tramite cPanel

La procedura per utilizzare cPanel è molto simile a quella del client FTP. Ecco cosa fare:

Passaggio 1: accedi a cPanel

Inizia accedendo al cPanel del tuo sito web. Il tuo provider di hosting dovrebbe averti già fornito le credenziali di accesso.

Una volta effettuato l'accesso, scorri verso il basso fino alla File e fai clic su Gestione file.

Passaggio 2: carica il file Robots.txt

Nel File Manager, accedi alla public_html . Questa è la cartella principale in cui dovrebbe essere posizionato il file robots.txt.

Se è già presente un file robots.txt, sostituiscilo con la nuova versione. In caso contrario, carica il file appena creato.

Passaggio 3: testare il file Robots.txt

Per assicurarti che il file venga caricato correttamente, digita il tuo dominio seguito da /robots.txt nel tuo browser (ad esempio, example.com/robots.txt).

Ed ecco fatto! Che tu abbia utilizzato FTP o cPanel, il tuo file robots.txt è ora aggiornato e pronto a guidare i motori di ricerca su come interagire con il tuo sito.

Esplora: la migliore piattaforma di hosting alternativa a cPanel per WordPress

Modifica Robots.txt utilizzando AIOSEO

Uno dei modi più semplici per modificare il file robots.txt è utilizzare il All in One SEO (AIOSEO) , uno dei migliori plugin SEO per WordPress in circolazione. Include un editor robots.txt, che semplifica notevolmente l'override del file robots.txt predefinito di WordPress e l'impostazione di regole personalizzate per la scansione del sito da parte dei motori di ricerca.

Iniziamo subito a modificare il tuo file robots.txt utilizzando AIOSEO!

Passaggio 1: abilita il file Robots.txt personalizzato

Per prima cosa, vai al All in One SEO nella dashboard di WordPress e clicca su Strumenti. Da lì, seleziona la Editor Robots.txt .

AIOSEO genererà automaticamente un file robots.txt dinamico. Questo file verrà memorizzato nel database di WordPress e potrà essere visualizzato nel browser (ti mostreremo come fare tra poco).

Quando ti trovi nell'editor di Robots.txt, la prima cosa da fare è abilitare Robots.txt personalizzato. Basta cliccare sul pulsante finché non diventa blu e sbloccherai la possibilità di personalizzare il file.

Vedrai quindi un'anteprima delle regole predefinite nella parte inferiore dello schermo. Queste impostazioni predefinite indicano ai robot di non eseguire la scansione di determinati file del core di WordPress, come le pagine di amministrazione. Puoi sovrascrivere queste regole con le tue!

Passaggio 2: aggiunta di regole personalizzate

Ora è il momento di aggiungere le tue regole personalizzate. Hai due opzioni: puoi utilizzare il Generatore di regole oppure importare un file robots.txt da un altro sito.

Metodo 1: aggiungere regole utilizzando il generatore di regole

Il Generatore di regole consente di creare facilmente regole personalizzate per stabilire quali pagine debbano essere indicizzate e quali no. Ad esempio, se si desidera bloccare l'accesso di tutti i robot a una directory temporanea, è qui che si può fare.

Ecco come funziona:

  1. User Agent: digita il nome del robot (ad esempio "Googlebot") nel User Agent . Se desideri applicare la regola a tutti i robot, utilizza semplicemente il simbolo *.
  2. Direttiva: scegli tra le direttive disponibili come Allow, Disallow, Clean-paramo Crawl-delay.
  3. Valore: immettere il percorso della directory o il nome del file a cui applicare la regola.

Una volta impostato tutto, fai clic su Aggiungi regola per crearne un'altra, se necessario. Non dimenticare di fare clic su Salva modifiche al termine.

Vedrai le nuove regole apparire nella Anteprima di Robots.txt . Per visualizzare il file aggiornato, fai clic su Apri Robots.txt. Questo ti porterà all'URL del tuo file robots.txt.

Metodo 2: importare le regole da un altro sito

Se hai trovato un file robots.txt da un altro sito che vorresti utilizzare, puoi importarlo facilmente nel tuo sito utilizzando AIOSEO. Ecco come fare:

  1. Nel menu di AIOSEO, vai su Strumenti > Robots.txt > Abilita Robots.txt personalizzato
  2. Fare clic Importa .
  3. Incolla l'URL del sito da cui vuoi importare il file robots.txt oppure copia e incolla il contenuto direttamente nello spazio fornito.
  4. Fai clic su Importae AIOSEO estrarrà il file e lo aggiungerà al tuo sito.

Questo è probabilmente il modo più rapido per ottenere un file robots.txt personalizzato sul tuo sito!

Prova AIOSEO oggi

Modifica delle regole del file Robots.txt

Una volta impostate le regole, puoi modificarle nuovamente utilizzando il Generatore di regole. Puoi anche eliminare una regola cliccando sull'icona del cestino accanto ad essa.

Ed ecco una funzionalità interessante: puoi cambiare l'ordine delle tue regole. Basta cliccare e tenere premuti i sei puntini accanto al cestino, trascinare la regola in una nuova posizione e rilasciarla. Questo ti aiuta a dare priorità alle regole più importanti!

Una volta terminate le modifiche, fai clic su Salva modifiche per applicarle tutte.

Ed ecco fatto! Hai modificato con successo il tuo file robots.txt usando AIOSEO. Facile, vero?

Ulteriori letture: SEO ottimale su WordPress: una guida completa

Conclusione

In conclusione, modificare il file robots.txt in WordPress è un modo semplice ma efficace per gestire l'interazione dei bot dei motori di ricerca con il tuo sito. Creando e personalizzando questo file, puoi impedire ai bot di analizzare contenuti sensibili o duplicati, garantendo che vengano indicizzate solo le pagine più pertinenti.

Inoltre, puoi utilizzare il file robots.txt per indirizzare i bot verso i tuoi contenuti preferiti, contribuendo a migliorare la SEO e la visibilità del tuo sito. Rivedere e aggiornare regolarmente questo file è fondamentale per mantenere il controllo sulle prestazioni del tuo sito sui motori di ricerca.

WP Services

WordPress services at revolutionary pricing.

Productized WordPress services, from builds to care, delivered by Seahawk and tracked in one app. For the WordPress lovers.