Diese Seite mit anderen teilen ...

Informationen zum Thema:
Forum:
WinDev Forum
Beiträge im Thema:
3
Erster Beitrag:
vor 1 Jahr, 4 Monaten
Letzter Beitrag:
vor 1 Jahr, 4 Monaten
Beteiligte Autoren:
JP, DarrenF

[WD21] - Robots.txt

Startbeitrag von JP am 08.08.2016 08:24

Hi All

In a WebDev 21 Dynamic site - can one use a robots.txt to tell search engine indexing spiders to not attempt indexing the site? I sometimes see Googblebot try for 40+ minutes to index my site which I have no interest in them doing ...

If yes, where does one put the robots.txt file, which folder?

Antworten:

Hi,

It needs to go in the highest level directory or the root of your domain.

...but for a more comprehensive description see here:
https://support.google.com/webmasters/answer/6062596?hl=en

von DarrenF - am 08.08.2016 09:03
Hi Darren,

Yup I know that. But what is that directory for a WebDev site - But I did some tests and I figured it out :)

Thanks!

von JP - am 08.08.2016 09:10
Zur Information:
MySnip.de hat keinen Einfluss auf die Inhalte der Beiträge. Bitte kontaktieren Sie den Administrator des Forums bei Problemen oder Löschforderungen über die Kontaktseite.
Falls die Kontaktaufnahme mit dem Administrator des Forums fehlschlägt, kontaktieren Sie uns bitte über die in unserem Impressum angegebenen Daten.