Come eliminare una pagina in Yandex. Rimozione di pagine dalla ricerca Yandex

(2)

Quasi tutti i webmaster, soprattutto nella fase iniziale della creazione di un progetto, hanno dovuto affrontare la necessità di rimuovere le pagine del sito Web dall'indice dei motori di ricerca. Nonostante il fatto che la procedura, a prima vista, sia abbastanza semplice, molti hanno ancora difficoltà.

A volte il proprietario di una risorsa web deve nascondere un documento dai motori di ricerca per i seguenti motivi:

• il sito è in costruzione ed è entrato nella SERP quasi per caso;
• il contenuto della pagina non è più pertinente;
• il documento duplica un'altra pagina già presente nel sito;
• l'indice comprende le pagine dei servizi in cui si trovano i dati personali dei clienti.

Per evitare casi del genere, oggi parleremo di 4 modi efficaci per rimuovere una pagina dall'indice del motore di ricerca.

Come chiudere una pagina dai motori di ricerca utilizzando il pannello del webmaster?

Questo metodo per bloccare l'accesso alle pagine del tuo sito per i robot di ricerca è considerato uno dei più semplici. Inoltre, questo strumento è ideale per quei casi in cui determinati URL devono essere rimossi con urgenza.

Yandex

Per fare ciò, è necessario il servizio Yandex.Webmaster. Ti abbiamo spiegato come aggiungere un sito a questo sito per velocizzare l'indicizzazione. Segui il link https://webmaster.yandex.ru/tools/del-url/ e aggiungi l'indirizzo di una pagina specifica nel campo corrispondente, quindi fai clic su "Elimina".


Con un alto grado di probabilità, Yandex ti chiederà di accelerare il processo di eliminazione di una pagina dal database di sistema. Per fare ciò, devi prima chiuderlo dai bot tramite un file o un meta-tag robots, oppure fare in modo che il server restituisca un errore 404. Parleremo di come farlo un po' più avanti.

Ci vorranno diverse ore o addirittura giorni prima che i bot eliminino il documento dal database. Ciò è dovuto al fatto che il sistema dovrà tenere traccia del suo stato e assicurarsi che non cambi più.

Google

Accedi al sito Strumenti per i Webmaster di Google... Aggiungi prima il tuo sito all'indice se non l'hai già fatto. Quindi trova la scheda "Indice Google" e sotto di essa "Rimuovi URL". Nella finestra che appare, seleziona l'opzione per creare una richiesta di cancellazione e inserisci l'indirizzo del documento da cancellare nel campo. Quindi invia la tua richiesta.

Errore del server 404

Sicuramente ogni utente, cercando le informazioni necessarie su Internet, è finito nella pagina in cui ha dato Errore 404 - Pagina Non Trovata"... Ciò significa che il documento che stavi cercando è stato rimosso dalla risorsa.

Il webmaster può farlo, ad esempio, nel pannello di controllo del sito. Per i motori di ricerca, ciò significa configurare il server di risposta di questa pagina in modo che il codice appaia a un indirizzo specifico 404 nontrovato... E quando il robot visita nuovamente l'URL specificato, il server lo informa che la pagina non esiste più. Ciò rende chiaro ai motori di ricerca che il documento è stato rimosso dal sito e lo rimuoveranno dai risultati della ricerca in modo che i visitatori non vadano a leggerlo e leggano l'errore 404.

Le caratteristiche di questo metodo includono:

1. Facile installazione in pochi clic.
2. Scomparsa completa del documento dalla risorsa web. Per questo motivo, non è consigliabile utilizzare questo metodo quando una pagina di servizio (informazioni riservate dei client e così via) deve essere rimossa dall'indice.
3. Vale anche la pena ricorrere a un'altra opzione per nascondere la pagina, ad esempio un reindirizzamento 301 se i collegamenti in entrata portano ad essa.

Importante! La pagina esce dall'indice di ricerca non a causa della sua rimozione dalla risorsa, ma a causa di un'ulteriore reindicizzazione. Pertanto, per rimuoverlo, dovrai attendere circa 2 settimane prima che il bot visiti nuovamente la risorsa.

Per i webmaster, questo metodo è uno dei più convenienti, ma al visitatore potrebbe non piacere l'errore 404 e c'è il rischio che l'utente, vedendolo, smetta di visitare il sito. Ma c'è anche una via d'uscita da questa situazione.

In una nota. Molto spesso, i costruttori di siti sono impegnati in un design interessante della pagina in cui l'errore 404 non trovato si blocca. Pubblicano lì informazioni utili e offrono di visitare altre pagine della risorsa, che attireranno sicuramente l'attenzione del visitatore. Ciò renderà questa pagina più attraente per l'utente, il che avrà sicuramente un effetto positivo sul suo posizionamento e riconoscimento.

Modifica del file robots.txt

Un altro metodo comune utilizzato dai webmaster. Ti permette di nascondere singoli documenti e intere sezioni. Nel file robots, non solo puoi negare, ma anche consentire ai bot di ricerca di indicizzare un sito o determinate pagine. Tali comandi vengono forniti utilizzando la direttiva Disallow.

Per nascondere una pagina dai motori di ricerca, devi accedere alla cartella principale del sito. Il documento robots.txt contiene fondamentalmente 2 righe:

1. Utente-agente. Il nome del robot di un determinato motore di ricerca, a cui vieti la scansione della pagina, è indicato qui o il codice è scritto Agente utente: *, applicabile a tutti i bot contemporaneamente.
2. Non consentire. L'URL della pagina da eliminare è scritto qui.

Insieme creano un comando per i motori di ricerca per l'URL specificato. Se necessario, puoi nascondere più documenti su una risorsa in un file contemporaneamente e non si influenzeranno in alcun modo l'un l'altro.

Ad esempio, è così che diciamo a tutti i robot di ricerca di non indicizzare le pagine indice e password sul nostro sito web.

Agente utente: * Disallow: / index Disallow: / password

Quando scrivi questo comando, dovrai attendere la prossima indicizzazione. Dovresti sapere che tutte le modifiche al file robots sono di natura consultiva per i motori di ricerca, quindi non sorprenderti se l'oggetto rimane ancora nell'indice, ma è contrassegnato per essere nascosto tramite robots.txt. Ma se dopo un certo periodo di tempo lo stato del documento non cambia, verrà comunque eliminato dal database del motore di ricerca.

Importante! Se ci sono collegamenti esterni alle pagine remote, rimarranno disponibili per fare clic su di essi. Ciò è dovuto al fatto che i comandi nel file robots non rimuovono effettivamente l'oggetto dai risultati della ricerca, ma lo nascondono solo dai risultati.

Meta tag robot

Se non entri nei dettagli, questo metodo è simile al precedente, solo tutti i comandi sono scritti nel codice html del sito all'interno dei tag head:

Tutte le modifiche verranno apportate anche dopo l'indicizzazione. Il vantaggio dell'utilizzo del tag meta robot è che puoi rimuovere più URL dalla tua ricerca utilizzandolo senza dover modificare i robot. Questo metodo è ideale per i costruttori di siti alle prime armi che creano gradualmente nuove pagine.

È anche un'ottima opzione quando è necessario chiudere una pagina dall'indice Yandex, ma allo stesso tempo tenerla disponibile su Google. Oppure quando vuoi rimuovere un elemento dalla ricerca, ma lasciare le informazioni disponibili sul sito stesso.

Un esempio di chiusura di un URL solo per Yandex:

Importante! La scrittura di meta tag differisce dalla modifica di robots.txt in quanto è possibile utilizzarli per rimuovere un oggetto dalla ricerca, anche se i collegamenti esterni portano ad esso. Ciò è facilitato dal meta tag noindex. Tuttavia, se il tuo sito non è costruito su WordPress, la procedura sarà più complicata. Il fatto è che WP ha uno speciale plug-in Yoast SEO che ti consente di eliminare le pagine con meta tag.

Conclusione

Se hai improvvisamente bisogno di rimuovere una pagina specifica del tuo sito dall'indice di ricerca, puoi facilmente utilizzare tutti i metodi indicati in questo articolo. Scegli quello che è più conveniente per te, ma allo stesso tempo prendi in considerazione le caratteristiche di ciascuno di essi. In generale, se si desidera chiudere il documento il prima possibile, utilizzare più opzioni contemporaneamente.

A volte è necessario rimuovere una pagina del sito dai risultati di ricerca, ad esempio se contiene informazioni riservate, è o è stata rimossa.

Dì a Yandex di eliminare la pagina

Questo può essere fatto in diversi modi:

Se la pagina viene rimossa dal sito

• Non consentire l'indicizzazione della pagina utilizzando la direttiva Disallow nel file robots.txt.

Configura il server in modo che quando il robot accede all'indirizzo della pagina, invii uno stato HTTP con un codice 404 Not Found, 403 Forbidden o 410 Gone.

Se la pagina non dovesse apparire nella ricerca

• Non consentire l'indicizzazione della pagina utilizzando la direttiva Disallow nel file robots.txt.
• Chiudi le pagine dall'indicizzazione utilizzando il meta tag noindex.

Se hai personalizzato la risposta del server al codice 4XX o hai utilizzato il meta tag noindex per più pagine, il robot apprende ogni modifica di pagina in modo incrementale. In questo caso, disabilitare l'indicizzazione delle pagine utilizzando la direttiva Disallow.

Quando un robot Yandex visita il sito e viene a conoscenza del divieto di indicizzazione, la pagina scompare dai risultati di ricerca entro una settimana. Successivamente, l'indirizzo della pagina eliminata verrà visualizzato nell'elenco delle pagine escluse nella sezione Indicizzazione → Pagine nella ricerca Yandex.Webmaster.

Per qualche tempo, il robot visiterà ancora la pagina per assicurarsi che il suo stato non sia cambiato. Se la pagina rimane inaccessibile, scomparirà dalla base del robot.

La pagina potrebbe riapparire nei risultati di ricerca se rimuovi il file robots.txt dall'indicizzazione o se la risposta del server cambia in 200 OK.

Se una pagina viene rimossa dal sito a causa di una violazione del copyright, l'ordine in cui viene rimossa dai risultati di ricerca non cambia e non ha la precedenza.

Velocizza la rimozione della pagina dalla ricerca

Se, dopo aver vietato l'indicizzazione delle pagine, il robot non ha ancora visitato il tuo sito, puoi dire a Yandex di rimuovere la pagina utilizzando lo strumento Rimuovi pagine dalla ricerca in Yandex.Webmaster.

Rimuovi le singole pagine del sito dalla ricerca Yandex

aggiungi e conferma il sito in Yandex.Webmaster.

Verifica che il file robots.txt contenga la direttiva Disallow per le pagine che desideri rimuovere. Se il robot trova altre direttive per le pagine specificate in Yandex.Webmaster in robots.txt, nonostante queste, rimuoverà le pagine dalla ricerca.

Puoi eliminare una directory, tutte le pagine del sito o le pagine con parametri nell'URL. Per fare ciò, aggiungi e conferma il sito in Yandex.Webmaster.

In Yandex.Webmaster, vai su Strumenti → Rimuovi pagine dalla pagina di ricerca.

Verifica che il file robots.txt contenga la direttiva Disallow per le pagine che desideri rimuovere. Se il robot trova altre direttive per le pagine specificate in Yandex.Webmaster in robots.txt, nonostante queste, rimuoverà le pagine dalla ricerca.

1. Impostare l'interruttore su Per prefisso.
2. Specifica un prefisso:

   Puoi inviare fino a 20 direttive per sito al giorno.

3. Fare clic sul pulsante Elimina.

Stati dopo l'invio dell'URL

Come restituire una pagina ai risultati di ricerca

Rimuovere le direttive che vietano l'indicizzazione: nel file robots.txt o nel meta tag noindex. Le pagine tornano ai risultati di ricerca quando il robot esegue la scansione del sito e viene a conoscenza delle modifiche. Questo può richiedere fino a tre settimane.

Abbiamo pubblicato un nuovo libro, "Content Marketing sui social media: come entrare nella testa degli abbonati e innamorarsi del tuo marchio".

Per raggiungere i tuoi obiettivi nel lavorare con il sito, devi prendere in considerazione molte sottigliezze diverse. Durante l'ottimizzazione disattenta, accade che l'indice contenga informazioni che non sono per gli occhi dei navigatori di Internet. È logico che tu debba sbarazzarti di questo tipo di contenuto. In questo articolo, analizzeremo i casi comuni in cui si presenta tale necessità e, naturalmente, impareremo come rimuovere una pagina dalla ricerca Yandex.

Motivi per rimuovere le pagine web dalla ricerca

Non parleremo dei problemi dei colossi, come la storia del noto operatore di telefonia mobile, di cui non pubblicizzerò il nome, mi limiterò a dire che inizia con "mega" e finisce con "sfondo". Quando quest'ultimo è stato indicizzato ed è entrato nella ricerca di una pagina con i messaggi SMS degli utenti. Inoltre, non ci concentreremo sui problemi dei negozi online, dove puoi trovare periodicamente i dati personali degli utenti e i dettagli dei loro ordini di dominio pubblico. E così via.

Analizzeremo i problemi dolorosi degli imprenditori ordinari che vogliono risolvere i loro problemi:

1. Raddoppia. Il contenuto duplicato interferisce con la promozione dei siti, questo non è un segreto per nessuno. Le ragioni dell'evento possono essere diverse. Maggiori dettagli possono essere trovati nel nostro .
2. L'informazione ha perso la sua rilevanza. Ad esempio, c'è stata qualche azione una tantum, ma è passata. La pagina deve essere eliminata.
3. "Segreti". Dati che non sono per tutti. Ricordiamo la situazione con l'operatore di telecomunicazioni. Tali pagine devono essere nascoste agli spettatori.
4. Modifica degli indirizzi URL. Che si tratti di spostare un sito o di allestire un CNC, in ogni caso, dovrai sbarazzarti delle vecchie pagine e fornire al motore di ricerca di nuove.
5. Quando si passa a un nuovo nome di dominio, si decide di rimuovere del tutto il sito dal motore di ricerca Yandex in modo che l'unicità del contenuto non ne risenta.

In effetti, ci possono essere molti più motivi per eliminare le pagine salvate dai motori di ricerca. L'elenco è necessario solo per illustrare i problemi tipici.

Come rimuovere una pagina dal motore di ricerca Yandex

Ci sono due modi di sviluppo degli eventi. Lungo (ma pigro) e accelerato (devi muoverti un po').

• Lunga via

Se il tempo non ha fretta e ci sono cose più importanti da fare, allora puoi semplicemente eliminare la pagina tramite il sistema di gestione dei contenuti (è il pannello di amministrazione o CMS). In questo caso, andando a un URL inesistente, il robot di ricerca scoprirà che il server risponde con un codice 404 - la pagina non esiste, il che significa che deve essere eliminata dalla ricerca, cosa che alla fine avverrà senza il tuo intervento

• Modo accelerato

Una sorta di continuazione del primo. Dopo la rimozione dal CMS, è necessario utilizzare il servizio Yandex rimuovi URL ... Ciò porterà a una pronta reazione da parte del PS e nel prossimo futuro le informazioni non necessarie scompariranno dall'indice.

Ma cosa succede se hai bisogno di rimuovere una pagina dal motore di ricerca, lasciandola sul sito stesso?

Come eliminare una pagina nel motore di ricerca Yandex senza eliminarla dal sito

Innanzitutto, blocca l'indicizzazione della pagina utilizzando i robot. txt, sono sicuro che l'hai già incontrato. All'interno del file, è necessario scrivere quanto segue:

Agente utente: Yandex
Disallow: / i-hate-my-page

Ciò bloccherà l'indicizzazione del contenuto, il cui URL è www.domain.ru / i-hate-my-page

In secondo luogo, poiché i robot. txt non contiene un rigido insieme di regole per il robot, ma è piuttosto di natura consigliativa, quindi il solito Disallow potrebbe non essere sufficiente. Pertanto, per maggiore confidenza, scrivi quanto segue nel codice html della pagina:

Nota che i tag head non sono qui per lo spettacolo. Il meta tag del robot deve essere posizionato tra i tag .

Il culmine sarà l'aggiunta dell'indirizzo al già familiare servizio Yandex Elimina URL, che sappiamo già come utilizzare.

Come rimuovere un sito dal motore di ricerca Yandex

Per rimuovere completamente un sito dalla base di ricerca, devi seguire gli stessi passaggi dell'eliminazione di una pagina, ma con alcune sfumature.

• Chiudi l'intero sito dall'indicizzazione aggiungendolo ai robot. righe di testo
  Agente utente: Yandex
  Non consentire: /
• Rimuovere le pagine utilizzando il servizio di rimozione URL nativo.
• Sbarazzati di tutti i link che portano al tuo sito.
• Attendi la reindicizzazione.

Se non hai più bisogno del sito, elimina tutti i file che si trovano sull'hosting e dimenticalo. Come ultima risorsa, contatta il servizio di supporto PS.

Risultato

Vorrei dire che la procedura per rimuovere le pagine salvate dalla ricerca non è molto difficile e talvolta è semplicemente necessaria. Spero che i proprietari di siti che non vogliono immergersi nei dettagli possano trovare in questo articolo la risposta alla domanda su come rimuovere le pagine Web non necessarie dalla ricerca Yandex.

Spero di essere stato utile!

Ciao! Il post di oggi riguarda il punto dolente per la maggior parte dei costruttori di siti alle prime armi. Ho dovuto rispondere molto spesso alla stessa domanda nei commenti - come rimuovere pagine dalla ricerca che sono stati indicizzati in precedenza, ma a causa delle circostanze attuali sono stati eliminati e non esistono più, ma sono ancora nell'indice dei motori di ricerca. Oppure la ricerca contiene pagine vietate per l'indicizzazione.

Nei commenti, non ti espanderai molto, quindi, dopo la prossima domanda, ho deciso di prestare particolare attenzione a questo argomento. Per prima cosa, cerchiamo di capire come potrebbero apparire tali pagine nella ricerca. Darò esempi basati sulla mia esperienza, quindi se dimentico qualcosa, aggiungi per favore.

Perché vengono chiuse e cancellate le pagine nella ricerca?

Potrebbero esserci diversi motivi e cercherò di evidenziarne alcuni sotto forma di un piccolo elenco con spiegazioni. Prima di iniziare, spiegherò cosa intendo per pagine "extra" (chiuse): servizi o altre pagine la cui indicizzazione è vietata da regole o da un meta-tag.

Le pagine inesistenti vengono cercate per i seguenti motivi:

• Il luogo più comune è che la pagina è stata cancellata e non esiste più.
• Modifica manuale dell'indirizzo di una pagina Web, a seguito della quale un documento già presente nella ricerca diventa non disponibile per la visualizzazione. Particolare attenzione dovrebbe essere prestata a questo punto per i principianti che, a causa della loro scarsa conoscenza, sono sprezzanti del funzionamento della risorsa.
• Continuando il pensiero sulla struttura, vi ricordo che di default, dopo aver installato WordPress su un hosting, non soddisfa i requisiti di ottimizzazione interna ed è composto da identificatori alfanumerici. Cade sul CNC, mentre compaiono molti indirizzi non funzionanti, che rimarranno nell'indice dei motori di ricerca per molto tempo. Pertanto, applica la regola di base: se decidi di modificare la struttura, usa un reindirizzamento 301 dai vecchi indirizzi a quelli nuovi. L'opzione ideale è completare tutte le impostazioni del sito PRIMA di aprirlo, un server locale può tornare utile per questo.
• Il funzionamento del server non è configurato correttamente. Una pagina inesistente dovrebbe restituire un codice di errore 404 o con un codice 3xx.

Le pagine aggiuntive vengono visualizzate nell'indice nelle seguenti condizioni:

• Le pagine sembrano chiuse, ma in realtà sono aperte alla ricerca di robot e vengono cercate senza restrizioni (oppure il robots.txt non è scritto correttamente). Per verificare i diritti di accesso PS alle pagine, utilizzare gli strumenti appropriati per.
• Sono stati indicizzati prima di essere chiusi in modi accessibili.
• Queste pagine sono collegate da altri siti o pagine interne all'interno dello stesso dominio.

Quindi, abbiamo capito le ragioni. Vale la pena notare che dopo aver eliminato la causa, le pagine inesistenti o extra potrebbero rimanere nella base di ricerca per molto tempo - tutto dipende dalla frequenza o dalla frequenza della visita del robot al sito.

Come rimuovere una pagina dal motore di ricerca Yandex

Per rimuovere l'URL da Yandex basta seguire il link e nel campo di testo del form inserire l'indirizzo della pagina che si desidera rimuovere dai risultati della ricerca.

La condizione principale per una richiesta di eliminazione riuscita:

• la pagina deve essere chiusa dall'indicizzazione tramite regole robot o un meta-tag noindex su questa pagina - se la pagina esiste, ma non deve partecipare alla ricerca;
• quando si tenta di accedere a una pagina, il server dovrebbe restituire un errore 404 - se la pagina viene eliminata e non esiste più.

La prossima volta che il robot esegue la scansione del sito, le richieste di eliminazione verranno eseguite e le pagine scompariranno dai risultati della ricerca.

Come rimuovere una pagina dal motore di ricerca di Google

Per rimuovere le pagine da, facciamo lo stesso. Apri Strumenti per i Webmaster e trova Rimuovi URL nell'elenco a discesa Ottimizzazione e segui il collegamento.

Davanti a noi c'è un modulo speciale con il quale creiamo una nuova richiesta di cancellazione:

Fare clic su continua e, seguendo le ulteriori istruzioni, selezionare il motivo dell'eliminazione. Secondo me, la parola "ragione" non è del tutto adatta a questo, ma non è questo il punto...

Tra le opzioni presentate, abbiamo a disposizione:

• eliminare una pagina dai risultati di ricerca di Google e dalla cache del motore di ricerca;
• cancellare solo la pagina dalla cache;
• eliminazione di una directory con tutti gli indirizzi inclusi in essa.

Una funzione molto comoda per eliminare un'intera directory quando devi eliminare più pagine, ad esempio da una categoria. Puoi monitorare lo stato della richiesta di cancellazione nella stessa pagina degli strumenti con l'opzione di cancellazione. Per un successo eliminare pagine da google sono richieste le stesse condizioni di cui all'art. La richiesta viene solitamente completata in pochissimo tempo e la pagina scompare immediatamente dai risultati della ricerca.