lol, und nun gebe man mal genau das bei google ein:
http://www.google.de/search?hl=de&q=...le-Suche&meta=
;) Sollte den 1. Link nurnoch jemand in so ne tabelle umwandeln..
//edit:
oder hier:
http://www.lerneniminternet.de/htm/robots-liste.html
ich meine damit lassens ich doch schonmal die wichtigsten abdecken oder?
//Edit 2: Vorallem muss ja nicht genau den Host so übernehmen, sondern kannst ka die versionen usw durch wildcards ersetzen..
//Edit 3:
http://www.boardplanet.net/archive/t-11514.html So, wenn das nicht reicht, dann weiss i au it weiter. Aber das script will i dann au haben ;)