Qu'est-ce qu'un Spider logiciel (ou robot)?

 

Un "Spider logiciel" est un programme géré par un moteur de recherche qui surfe sur le web comme vous le faites. Une différence est que l'araignée est sans pilote. Comme il se rend dans chaque site Web, il enregistre (enregistre sur son disque dur) tous les mots sur chaque site et les notes chaque lien vers d'autres sites. Il a ensuite "clique" sur un lien et c'est parti pour lire, l'index et enregistrer un autre site Web.
L'e robot lit souvent et indexe le texte complet de chaque site Web qu'il visite dans la base principale de la
moteur de recherche il travaille pour. (Récemment, de nombreux moteurs comme AltaVista ne sont plus que l'indexation à un certain nombre de pages d'un site, souvent près de 400, puis s'arrête. Apparemment, c'est parce que le Web est devenu tellement important qu'il est impossible de tout indice. Combien de pages de l'araignée indice n'est pas tout à fait prévisible. Par conséquent, c'est une bonne idée de soumettre chaque page spécialement important dans votre site que vous souhaitez être indexés, tels que ceux qui contiennent des mots-clés importants).
Un robot est comme un bibliothécaire électronique qui permet de supprimer les tables des matières de chaque livre dans toutes les bibliothèques dans le monde, les trie dans un index principal gigantesque, et crée ensuite une bibliographie électronique qui stocke les informations sur lesquelles textes de référence qui d'autres textes. Certaines araignées logiciels indice peut plus d'un million de documents par jour!
Pour vos fins de marketing, de savoir que certains moteurs de recherche ont araignées qui visitent votre site Web. Que l'araignée voit sur votre site sera de déterminer comment votre site est répertorié dans leur index.
Rappelez-vous, comme un robot visite votre site il note tous les liens sur votre page vers d'autres sites. En tout état de moteur de recherche de grande base de données sont enregistrés tous les liens entre les sites. Les moteurs de recherche ne sait qui vous lié , et plus important encore, qui lié à vous.  Certains moteurs vont même jusqu'à utiliser le nombre de liens vers votre site comme une indication de la popularité, et alors améliorer votre classement en raison de ce facteur.