Nickles › Forum › Internet › Viren, Spyware, Datenschutz

Viren, Spyware, Datenschutz 11.213 Themen, 94.186 Beiträge

robots.txt..verständnisfrage

ghartl1 am 09.05.2009, 16:52 / 11 Antworten / Flachansicht

hallo,

wird die datei robots.txt auch dazu verwendet, um spamcrawler nicht auf gewisse seiten zu führen?

gewissermassen als eine schutzmassnahme ?

      Hallo! Naja, die guten Scanner halten sich dran. Den bösen ist das so was ... ChrE 09.05.2009, 17:05
    
      Ich kann mir nicht vorstellen, dass ein Spamcrawler sich um das schert, was ... Max Payne 09.05.2009, 17:22
    
      Das kannst Du über Einträge in der .htaccess lösen nach folgendem Schema: ... asterix5 09.05.2009, 21:16
    
      123.45.67.890 Ist das die IP-Adresse von DEM Spam-Crawler? - Über eine ... Borlander 11.05.2009, 19:02
    
      Ich selbst hab s nicht getestet, hatte bisher auch keine Veranlassung dazu. ... asterix5 11.05.2009, 20:33
    
      123.45.67.890 ... Eine Übereinstimmung mit einer tatsächlich vorhandenen ... Borlander 11.05.2009, 21:20
    
      Und welche Maßnahme schlägst Du vor? asterix5 11.05.2009, 22:02
    
      Keine regulären eMail-Adressen auf Webseiten angeben, sondern nur solche ... Borlander 11.05.2009, 22:24
    
      Meine Frage Und welche Maßnahme schlägst Du vor? war wohl zu kurz. Ich ... asterix5 12.05.2009, 20:48
    
      Es gibt keine Maßnahmen mit der Du das zuverlässig ausschließen ... Borlander 13.05.2009, 20:05
    
      In Jörgs Forum gibt s gerade eine Diskussion zum Thema: ... asterix5 16.05.2009, 22:06