User-agent: * # fuer alle Robots Disallow: /chCounter/ # verbiete den Ordner chCounter zu indexieren Disallow: /*.php Disallow: /*.php$ # verbiete alle Dateien, die mit .php enden, zu indexieren Disallow: index.html # verbiete die Indexierung von index.html, weil die direkt unter der Domain drin steht Disallow: /seite1.html # verbiete die Indexierung aller Seiten namens seite1.html, weil die direkt unter dem Ordner drin steht