robots.txt bei Support-Network für Oxado?

[whitenexx]

Hallo zusammen!
Wegen der Übersicht, habe ich jetzt einen neuen Thread erstellt.
Folgendes möchte ich noch wissen:
Wie bekomme ich es hin, dass der Oxado-Bot, der die Keywords indexiert auf mein Forum zugreifen darf?
In meiner robots.txt sind ja im Moment alle Bots ausgeschlossen...was muss ich tun, damit der Oxado-Bot trotzdem indexiert?
Meine robots.txt : http://support-network.info/robots.txt
URL zum Forum: http://support-network.info

Need Help!

 

[Florian]

Wieso sperrst du alle Robots aus? Mit CODE User-agent: *
sperrst du alle Robots aus. Die Robots haben doch sowieso keine Chance zu indexieren wo man einen Login braucht. Du kannst allen Crawler durch den Meta-Tag
CODE <meta name="robots" content="noindex">
verbieten die Seite du crawlern. Anders geht das meiner Meinung nicht. Du könntest einzelne Robots durch die robots.txt aussperren. Mehr geht nicht.

Weitere Infos findest du unter:
http://de.selfhtml.org/diverses/robots.htm
http://de.selfhtml.org/html/kopfdaten/meta.htm
http://www.google.com/search?sourceid=navc...e&q=oxado+robot

MFG
Florian

 

[whitenexx]

Nein, die Robots haben auch Zugriff aufs Archiv

Ist schon gewollt so

Nur weiß ich nicht wie der Robot von Oxado heißt

Auf http://www.internetofficer.com/web-robot/oxado.html steht:

Access control options understood by the robot : unknown

Muss ich dann in die robots.txt noch was für "unknown" einsetzen oder was?
Bei Google Adsense ist es ja irgendein "google-mediapartners" oder so.
Hoffe ihr versteht was ich meine

 

[Florian]

Du musst Oxado fragen wie der Robot heisst. Und ob der Robot von Oxado überhaupt die robots.txt beachtet.

MFG
Florian

 

[whitenexx]

Ah! Genau das meinte ich

Ok...wie es aussieht beachtet der Oxado-Bot die robots.txt nicht. *freu*
Danke!