Πολλοί χειριστές ιστοσελίδων είναι ασταθείς. Προφανώς πρέπει απολύτως να έχετε ένα αρχείο που ονομάζεται robots.txt. Τι είναι αυτό?
Windows + Linux / English / Open Source. Εάν έχετε μια αρχική σελίδα, συνήθως θέλετε να βρεθείτε. Υπάρχει μεγάλη απογοήτευση όταν η δική σας σελίδα δεν εμφανίζεται στο Google. Αυτό μπορεί να οφείλεται στο αρχείο robots.txt. Αλλά μόνο αν είναι εκεί. Αυτό το αρχείο μπορεί να κάνει μόνο ένα πράγμα: απαγορεύει.
Στο αρχείο robots.txt, μπορείτε να απαγορεύσετε την πρόσβαση στις σελίδες σας από αυτόματα προγράμματα που περιηγούνται στο Διαδίκτυο όλο το εικοσιτετράωρο. Μπορείτε να προφέρετε την απαγόρευση παντού για όλα αυτά τα ρομπότ ή για ορισμένα. Μπορείτε να αποκλείσετε τις σελίδες σας εντελώς ή μόνο συγκεκριμένες περιοχές.
Εάν το αρχείο δεν υπάρχει, δεν υπάρχουν αντίστοιχα απαγορεύσεις. Οι σελίδες σας είναι ανοιχτές σε όλες τις μηχανές αναζήτησης. Εάν εξακολουθείτε να μην εμφανίζεστε στο Google, προκύπτει μια εντελώς διαφορετική ερώτηση: Έχετε ήδη καταχωρίσει τις σελίδες σας; Το καλύτερο που έχετε να κάνετε είναι να το κάνετε αμέσως. Απλώς εισάγετε τη διεύθυνση εδώ:
https://www.google.com/webmasters/tools/submit-url
Για να το κάνετε αυτό, πρέπει να συνδεθείτε στον Λογαριασμό σας Google.
Προκειμένου ένα αρχείο robots.txt που λείπει να είναι πρόβλημα, ο διακομιστής θα πρέπει επίσης να έχει ρυθμιστεί εσφαλμένα. Στη συνέχεια, ένα ρομπότ θα μπορούσε να προσπαθήσει να αποκτήσει πρόσβαση στο αρχείο και να συναντήσει ασυνήθιστα μηνύματα σφάλματος, προκαλώντας τη διακοπή της διαδικασίας. Αλλά αυτή η περίπτωση είναι πολύ απίθανη.
Εάν θέλετε να δημιουργήσετε ένα αρχείο robots.txt, αποθηκεύστε το στον κύριο φάκελο του διακομιστή ιστού σας. Εάν θέλετε να επιτρέψετε σε όλους να κάνουν τα πάντα, γράψτε τα εξής σε αυτό:
Πράκτορας χρήστη: *
Απαγορεύω:
Η γραμμή "User-Agent" υποδεικνύει σε ποιον ισχύει η απαγόρευση. * σημαίνει: για όλους. Η γραμμή "Απαγόρευση" εκφράζει την απαγόρευση. Εάν δεν υπάρχει τίποτα περισσότερο, σημαίνει ότι όλες οι προσβάσεις επιτρέπονται.
Περισσότερα για το θέμα:Κουρτίνα, εδώ έρχεται ο ιστότοπός σας: Πώς να δημιουργήσετε έναν ιστότοπο με λίγη προσπάθεια
