robots.txt

Li usate? Qualcuno ha un buon link che spiega come vanno creati... magari in italiano? Credete che vada segnato nel txt di non analizzare la cartella manager?

No, io non gli uso.
... scusa, non ho saputo resistere ...

Comunque, googlando:
Prolisso: http://www.posizionamento.ch/faidate-spider.htm
Schematico: http://www.prozone.it/forum/index.php?showtopic=1423
Detto da Lui: http://www.google.it/support/webmasters/bin/answer.py?answer=35303
Scolastico: http://www.infomedia.it/riviste/login/41/articolo24/articolo.htm
Ancora più scolastico: http://www.webmasterpoint.org/guida-motori-di-ricerca/robots-txt_a71.html

E infine, in inglese, IL sito sul file di cui sopra: http://www.robotstxt.org/
Altro?

No, fino ad ora non ho avuto l’esigenza di creare un sito per una setta segreta e quindi non ne ho mai avuto bisogno .

Scherzi a parte, non ne hai bisogno per il manager. Se provi a fare una ricerca delle pagine indicizzate del tuo sito vedrai che il manager non esce mai fuori, perchè nel suo index ha già le istruzioni per i motori di ricerca per non farsi indicizzare.

Ciao

Grazie a tutti...
@kudolink ho corretto la grammatica
Insomma non servono a gran che almeno che non si voglia nascondere qualcosa...
Poi mi è venuta in mente una cosa... mica tanto furbi sti robots, si dice al motore cosa non indicizzare, ma a un malintenzionato che cerca i robots si scrive chiaro e tondo quale sono le pagine riservate

Si, ma anche se usi il motodo dei meta pragma no cache, no index ecc, che sono l’equivalente, non cambia niente. Non c’è modo di nascondere delle pagine ad un maleintenzionato se non usando l’autenticazione http, quindi editando il .htaccess o ancora meglio httpd.conf di apache e magari legandolo a qualche server database con password criptate per il riconoscimento dell’utente. Ad oggi secondo me è il metodo più sicuro per limitare l’accesso a qualche zona di un sito.

Ciao

sono d’ accordo con te...
Comunque questa cosa dei robots mi era venuta in mente guardando questa pagina per i possessori di domini di google, dove si possono recuperare molte informazioni utili su come google analizza il nostro sito e inviare la propria sitemap magari creata proprio con lo snippet presente nel database di modxcms.com
https://www.google.com/webmasters/sitemaps/

Non ho mai testato quello snippet, ma sono sicuro che non indicizza il manager. Farà la mappa del solo frontend, quindi no problem.

Lo snippet sitemap non indicizza ovviamente il manager, inoltre con sitemap è possibile escludere le pagine con un determinato template.