User-agent: * #dotyczy wszystkich typów crawler’ów Disallow: /tmp #zabrania dostępu do katalogu ‘tmp’ Disallow: /upload #zabrania dostępu do katalogu ‘upload’ Disallow: /img #zabrania dostępu do katalogu ‘img’ Disallow: /js #zabrania dostępu do katalogu ‘js’