SEO : Est-il recommandé de télécharger et de mettre en ligne une version bêta / non finie du site web ?

Question

Je travaille sur ce gros site web et je veux le mettre en ligne avant qu'il ne soit complètement terminé...

Je travaille localement et la base de données devient très volumineuse. J'ai donc voulu télécharger le site web et continuer à travailler sur le serveur, mais en permettant aux gens d'entrer, afin que je puisse faire des tests.

La question est de savoir si cela est bon pour le référencement, je veux dire, il ya beaucoup de choses liées au référencement qui sont incomplètes . Par exemple : il n'y a pas de friendly URLs, pas de sitemap, pas de fichier .htacces, beaucoup de sections 'en construction'...

Google va-t-il me pénaliser pour toujours ? Comment cela fonctionne-t-il ? Google indexe et obtient la structure du site une seule fois ou est-il constamment mis à jour et vérifie-t-il les changements ? L'utilisation de User-agent: * Disallow: dans le fichier robots.txt empêche totalement Google de l'indexer ? Puis-je modifier le fichier robots.txt ultérieurement et faire en sorte que Google l'indexe à nouveau ? Que recommandez-vous ?

Answer 1

Bien sûr, il suffit de mettre un fichier robots.txt dans votre Root pour être sûr que Google ne commence pas à l'indexer.

Comme ça :

User-agent: *
Disallow: /

Answer 2

C'est ainsi que je comprends ce problème :

Google atteindra votre site Web si quelqu'un a soumis l'URL de votre site. http://www.google.com/addurl/ ou il existe un lien vers votre site web dans un autre site web déjà indexé.

Lorsque Google atteindra votre site Web, il consultera le fichier robots.txt et verra quelles sont les règles en vigueur. Si vous interdisez l'indexation à l'aide d'un code tel que le suivant, Google n'indexera pas votre site Web pour le moment.

User-agent: *
Disallow: /

Mais Google visitera à nouveau votre site après quelques jours peut-être, et fera la même chose que la première fois, si vous n'avez pas trouvé le fichier robots.txt ou si vous avez mis des règles qui leur permettent d'indexer le site en utilisant un code comme le suivant, ils commenceront à indexer les pages et le contenu du site.

User-agent: *
Allow: /

Si vous refusez l'indexation par Google à l'aide de robots.txt, il n'y a pas de différence, faites ce qui vous convient le mieux.

Note : Je ne suis pas sûr à 100% des règles que j'ai mentionnées dans cette réponse car google change toujours ses techniques d'indexation.

Ce que j'ai dit à propos de Google est également valable pour d'autres moteurs de recherche tels que Yahoo et Bing, mais ce n'est pas une règle pour tous les moteurs de recherche, c'est juste une façon de faire courante.

J'avais l'habitude de mettre une version intermédiaire de mes sites Web pour les tester dans l'environnement réel avant de passer à la version réelle, et j'utilisais le fichier robots.txt. Je n'ai jamais trouvé aucun de ces liens intermédiaires dans Google, Bing ou Yahoo.

Answer 3

Tant que votre sécurité es no la qualité du pari, c'est une bonne idée de mettre votre site en ligne le plus tôt possible.

Google indexe votre site périodiquement, et l'indexera plus fréquemment s'il détecte des modifications plus fréquentes et/ou si votre pagerank augmente.