Mnogi operaterji spletnih mest so nemirni. Očitno moraš imeti datoteko robots.txt. Kaj je to?
Windows + Linux / angleščina / odprtokoden. Če imate domačo stran, običajno želite, da vas najdejo. Obstaja velika frustracija, ko se vaša lastna stran ne prikaže v Googlu. To je lahko posledica datoteke robots.txt. Ampak le, če je tam. Ta datoteka lahko naredi samo eno: prepovedati.
V datoteki robots.txt lahko samodejnim programom, ki ves čas brskajo po internetu, prepovejo dostop do vaših strani. Za vse te robote ali za nekatere jih lahko izrečete prepoved. Lahko popolnoma blokirate svoje strani ali samo določena področja.
Če datoteka ne obstaja, torej ni prepovedi. Vaše strani so odprte za vse iskalnike. Če se še vedno ne pojavljate v Googlu, se pojavi povsem drugo vprašanje: Ste že registrirali svoje strani? Najboljša stvar je, da to storite takoj. Tukaj preprosto vnesite naslov:
https://www.google.com/webmasters/tools/submit-url
Če želite to narediti, se morate prijaviti v svoj Google Račun.
Da bi manjkala manjkajoča datoteka robots.txt, bi moral biti tudi strežnik napačno konfiguriran. Nato bi lahko robot poskušal dostopati do datoteke in naletel na nenavadna sporočila o napakah, kar bi povzročilo prekinitev postopka. Toda ta primer je zelo malo verjeten.
Če želite ustvariti datoteko robots.txt, jo shranite v glavno mapo spletnega strežnika. Če želite vsem omogočiti vse, v to vpišite naslednje:
Uporabniški agent: *
Zavrni:
Vrstica "User-Agent" označuje, za koga velja prepoved. * pomeni: za vsakogar. Vrstica "Disallow" izraža prepoved. Če ni nič več, to pomeni, da so vsi dostopi dovoljeni.
Več o temi:Zavesa, tukaj je vaša spletna stran: kako z malo truda ustvariti spletno stran
