Indexer un site dans les moteurs de recherche. Comment l'indexation du site dans "Yandex" et "Google"

Qu'est-ce que l'indexation du site? Comment ça se passe? Vous pouvez trouver des réponses à ces questions et à d'autres dans l'article. L'indexation sur le Web (indexation dans les moteurs de recherche) fait référence au processus d'incorporation d'informations sur un site dans une base de données par un robot de recherche, qui est ensuite utilisé pour trouver des informations sur des projets Web ayant subi une telle procédure.

Les données sur les ressources Web consistent souvent enmots-clés, articles, liens, documents. L'indexation peut également audio, images, etc. On sait que l'algorithme d'identification des mots-clés dépend du système de recherche.

Les types d'informations indexées (fichiers flash, javascript) sont limités.

Gérer l'affiliation

L'indexation d'un site est un processus complexe. Pour le gérer (par exemple, pour interdire l'inclusion d'une page particulière), vous devez utiliser un fichier robots.txt et des instructions telles que Autoriser, Interdire, Analyser-délai, Utilisateur-agent et autres.

De plus, les balises <noindex> et les accessoires <nofollow> qui cachent le contenu de la ressource des robots Google et Yandex (Yahoo applique la balise <nofollow>) sont utilisés pour indexer.

Dans le moteur de recherche Goglle, les nouveaux sites sont indexés de quelques jours à une semaine, et à Yandex - d’une semaine à quatre.

Vous voulez que votre site apparaisse dans les requêtesles résultats des moteurs de recherche? Ensuite, il devrait être traité par Rambler, Yandex, Google, Yahoo, etc. Vous devez indiquer aux moteurs de recherche (spiders, systèmes) l'existence de votre site Web, puis ils le scanneront en totalité ou en partie.

De nombreux sites ne sont pas indexés depuis des années. Les informations qui s'y trouvent ne sont visibles pour personne, sauf leurs propriétaires.

Les moyens de traitement

L’indexation d’un site peut être effectuée de plusieurs manières:

La première option est l'ajout manuel. Vous devez entrer les données de votre site via les formulaires spéciaux proposés par les moteurs de recherche.
Dans le second cas, le robot de recherche lui-mêmetrouve votre site Web via des liens et l'indexe. Il peut suivre votre site pour trouver des liens provenant d'autres ressources qui mènent à votre projet. Cette méthode est la plus efficace. Si le moteur de recherche trouve le site de cette manière, il le considère comme significatif.

Timing

L'indexation du site n'est pas trop rapide. Les termes sont différents, à partir de 1-2 semaines. Les liens provenant de ressources faisant autorité (avec d'excellents relations publiques et liens) accélèrent considérablement le positionnement du site dans la base de données des moteurs de recherche. Aujourd'hui, le plus lent est Google, bien que jusqu'en 2012, il puisse faire ce travail pour la semaine. Malheureusement, tout change très rapidement. On sait que Mail.ru travaille avec des sites Web dans ce domaine depuis environ six mois.

Indexer le site dans les moteurs de recherche pour l'implémenterTous les spécialistes ne sont pas capables. Le moment choisi pour ajouter à la base de données de nouvelles pages déjà traitées par le site des moteurs de recherche affecte la fréquence de réglage de son contenu. Si de nouvelles informations apparaissent constamment sur la ressource, le système considère qu'elles sont fréquemment mises à jour et utiles pour les utilisateurs. Dans ce cas, son travail est accéléré.

Vous pouvez suivre la progression de l'indexation d'un site Web dans des sections spéciales destinées aux webmasters ou aux moteurs de recherche.

Changements

Donc, nous avons déjà compris comment allerindexation du site. Il convient de noter que les bases de données des moteurs de recherche sont fréquemment mises à jour. Par conséquent, le nombre de pages ajoutées dans votre projet peut changer (diminuer ou augmenter) pour les raisons suivantes:

sanctions du moteur de recherche sur le site Web;
présence d'erreurs sur le site;
changer les algorithmes des moteurs de recherche;
hébergement dégoûtant (inaccessibilité du serveur sur lequel se trouve le projet) et ainsi de suite.

Réponses "Yandex" aux questions ordinaires

Yandex est un moteur de recherche utilisébeaucoup d'utilisateurs. Il se classe au cinquième rang des systèmes de recherche dans le monde en termes de nombre de demandes de recherche traitées. Si vous y ajoutez un site, il risque d’être ajouté à la base de données trop longtemps.

Ajouter une URL ne garantit pas son indexation. Ce n'est qu'une des méthodes par lesquelles le robot système est informé de l'apparition d'une nouvelle ressource. S'il n'y a aucun lien vers le site à partir d'autres sites Web ou de certains d'entre eux, l'ajout aidera à le trouver plus rapidement.

Si l'indexation n'a pas eu lieu, vous devez vérifiery avait-il un crash du serveur au moment de la création de l'application à partir du robot "Yandex". Si le serveur signale une erreur, le robot termine son travail et tente de l'exécuter en tant que procédure complète. Les employés de Yandex ne peuvent pas augmenter la vitesse d’ajout de pages à la base du moteur de recherche.

Indexer un site dans Yandex, c'est jolioccupation difficile. Vous ne savez pas comment ajouter une ressource à un moteur de recherche? S'il contient des liens provenant d'autres sites Web, vous n'avez pas besoin d'ajouter un site Web spécial. Le robot le recherchera et l'indexera automatiquement. Si vous ne disposez pas de tels liens, vous pouvez utiliser le formulaire "Ajouter une URL" pour déclarer au moteur de recherche l'existence d'un site Web.

Il faut se rappeler que l’ajout d’une URL ne garantit pas l’indexation de votre création (ni sa rapidité).

Beaucoup se demandent combien de temps cela prendindexation de sites dans Yandex. Les employés de cette entreprise ne donnent pas de garanties et ne prédisent pas les dates. En règle générale, depuis que le robot a découvert le site, ses pages de recherche apparaissent dans deux jours, parfois dans quelques semaines.

Processus de traitement

Yandex est un moteur de recherche qui requiert précision et attention. L'indexation de site comprend trois parties:

Le robot de recherche explore les pages de ressources.
Le contenu (contenu) du site est enregistré dans le système de recherche de base de données (index).
Après 2-4 semaines, après la mise à jour de la base de données, vous pouvez voir les résultats. Votre site apparaîtra (ou n'apparaîtra pas) dans les résultats de la recherche.

Vérification d'index

Comment vérifier l'indexation du site? Vous pouvez le faire de trois manières:

Entrez le nom de votre entreprise dans la lignerecherchez (par exemple, “Yandex”) et vérifiez chaque lien sur la première et la deuxième page. Si vous trouvez l'URL de votre idée originale, cela signifie que le robot a terminé sa tâche.
Vous pouvez entrer l'URL de votre site dans la ligne de recherche. Vous pouvez voir combien de listes Internet sont affichées, c'est-à-dire indexées.
Inscrivez-vous sur les pages du webmaster àMail.ru, Google, Yandex. Après avoir passé la vérification du site, vous pourrez voir les résultats de l'indexation et des autres services de moteur de recherche créés pour améliorer les performances de votre ressource.

Pourquoi Yandex refuse-t-il?

L'indexation du site dans Google est effectuéecomme suit: le robot de la base de données entre toutes les pages du site, de qualité médiocre et de qualité élevée, sans choix. Mais seuls les documents utiles sont impliqués dans le classement. Et "Yandex" exclut immédiatement tous les déchets Web. Il peut indexer n’importe quelle page, mais le moteur de recherche finira par éliminer toutes les ordures.

Indexation de sites dans les moteurs de recherche

Les deux systèmes ont un index incrémental. Cela, ainsi que les autres pages de qualité médiocre, affecte l’évaluation globale du site Web. Il utilise une philosophie simple. Les ressources préférées d'un utilisateur particulier occuperont des positions plus élevées dans son émission. Mais ce même individu aura du mal à trouver un site qu'il n'a pas aimé la dernière fois.

C'est pourquoi il est d'abord nécessaire, à partir de l'indexation, de recouvrir des copies de documents Web, d'inspecter la présence de pages vides et de ne pas permettre la publication de contenu de mauvaise qualité.

Accélération de Yandex

Comment pouvez-vous accélérer l'indexation du site dans Yandex? Les étapes suivantes sont obligatoires:

Installez le navigateur Yandex sur votre ordinateur et parcourez les pages du site qui l’utilise.
Confirmez les droits de gestion des ressources dans Yandex.Webmaster.
Sur Twitter, postez un lien vers l'article. On sait que depuis 2012, Yandex coopère avec cette société.
Pour le site, ajoutez une recherche de Yandex. Dans "Indexation", vous pouvez spécifier vos propres URL.
Entrez le code “Yandex.Metrica” sans cocher “L'envoi de pages pour l'indexation est interdit”.
Créer un plan Sitemap existantseulement pour le robot et non visible pour le public. La vérification commencera par lui. L'adresse du plan du site est entrée dans le fichier robots.txt ou sous une forme appropriée dans les options "Webmaster" - "Définition de l'indexation" - "Plans Sitemap".

Actions intermédiaires

Que devez-vous faire pendant que la page Web"Yandex" n'est pas indexé? Le moteur de recherche national doit considérer le site comme la source originale. C'est pourquoi, même avant la publication de l'article, il est nécessaire d'ajouter son contenu au formulaire «Textes spécifiques». Autrement, les plagiaires copieront le document dans leur ressource et figureront d'abord dans la base de données. En conséquence, ils seront reconnus par les auteurs.

Base de données Google

Pour Google, les mêmes recommandations que celles décrites ci-dessus conviennent, seuls les services seront différents:

Google+ (au lieu de Twitter);
Google Chrome
Appareils Google pour les programmeurs - «Numériser» - «Ressembler à Googlebot» - Option «Numériser» - Option «Ajouter à l'index».
rechercher dans la ressource de Google;
Google Analytics (au lieu de Yandex.Metrics).

Interdiction

Quelle est l'interdiction de l'indexationsite? Vous pouvez l'imposer à la fois sur la page entière et sur sa partie séparée (lien ou morceau de texte). En fait, il existe à la fois une interdiction mondiale de l'indexation et une interdiction locale. Comment cela est-il mis en œuvre?

Envisagez l'interdiction d'ajouter un site Web à la base du moteur de recherche dans Robots.txt. A l'aide du fichier robots.txt, vous pouvez exclure l'indexation d'une seule page ou de la catégorie complète d'une ressource:

Agent utilisateur: *
Interdit: /kolobok.html
Interdit: / foto /

Le premier paragraphe dit que les instructionsdéfini pour tous les PS, le second indique l'interdiction d'indexer le fichier kolobok.html et le troisième ne permet pas l'ajout du remplissage complet du dossier photo à la base de données. Si vous devez exclure plusieurs pages ou dossiers, spécifiez-les tous dans "Robots".

Afin d'empêcher l'indexationUne liste Internet distincte, vous pouvez appliquer la balise méta robots. Il diffère de robots.txt en ce sens qu'il donne des instructions à tous les PS en même temps. Cette balise META est soumise aux principes généraux du format HTML. Il doit être placé dans l'en-tête de page entre les balises <head> <head>. Une entrée pour une interdiction, par exemple, peut être écrite comme suit: <meta name = ”robots” content = ”noindex, nofollow”>.

Ajax

Comment Yandex indexe-t-il les sites Ajax? Aujourd'hui, de nombreux développeurs de sites Web utilisent la technologie Ajax. Bien sûr, elle a de grandes opportunités. Il vous permet de créer des pages Web interactives à grande vitesse et productives.

Cependant, le robot du moteur de recherche voit la liste Web.pas comme l'utilisateur et le navigateur. Par exemple, une personne consulte une interface confortable avec des listes Internet mobile. Pour un robot de recherche, le contenu de la même page peut être vide ou présenté comme le reste du contenu HTML statique, pour la génération duquel les scripts ne fonctionnent pas.

Vous pouvez utiliser des URL avec # pour créer des sites Ajax,mais son moteur de recherche de robot ne l'utilise pas. Habituellement, la partie de l'URL après le # est séparée. Ceci doit être pris en compte. Par conséquent, au lieu de l'URL du formulaire http://site.ru/#example, il crée une application sur la page principale de la ressource située à l'adresse http://site.ru Cela signifie que le contenu de la feuille Internet peut ne pas être inclus dans la base de données. En conséquence, il n'apparaîtra pas dans les résultats de la recherche.

Améliorer l'indexation des sites AjaxYandex a pris en charge les modifications apportées au moteur de recherche et aux règles de traitement des URL pour ces sites Web. Aujourd'hui, les webmasters peuvent indiquer au moteur de recherche Yandex le besoin d'indexation en créant le schéma approprié dans la structure de ressources. Pour cela, vous avez besoin de:

Remplacez # dans l'URL de la page par #!. Le robot comprendra maintenant qu'il sera en mesure de demander la version HTML du contenu de cette fiche Internet.
La version HTML du contenu d'une telle page doit être placée sur l'URL, où #! remplacé par? _escaped_fragment_ =.