...A2D Robots.txt Control Code Generator

Tool zum Erstellen und Überprüfen Ihrer robots.txt

Robots oder Spider sind Programme von Suchmaschinen, die das Web durchsuchen. Sie folgen allen Links, und indexieren meist alle Seiten auf dem Server. Dies ist nicht immer der Wunsch des Webmasters, da z.B. nicht öffentliche Dateien Wie zum Bsp. admin oder test-bereich vom Spider mit indexiert werden, wo dies nicht der Fall sein sollte.

 

"Mit der Datei robots.txt kann man dies verhindern."

 

Wenn Sie nicht genau wissen, wozu die einzelnen Anwendungen da sind, sollten Sie vielleicht vorher unsere Robots.txt FAQ lesen oder Kontaktieren uns und wir werden versuchen Ihnen weiterzuhelfen.

 

Nachdem Sie die robots.txt erstellt und es hochgeladen haben, können Sie es direkt im Internet überprüfen lassen!

 

Robots.txt Prüfen!

Kopieren Sie einfach den URL der zu prüfenden Datei (robots.txt) in das Textfeld auf der folgenden Seite. Bsp: http://www.ihre-domäne.de/robots.txt
http://tool.motoricerca.info/robots-checker.phtml um zu sehen, ob Sie alles richtig gemacht haben ;>)

 

 

Rückstellung - alle Robots sind:
Allowed Refused
Verzögert Crawl:
Ohne Verzögerung 5 Seconds 10 Seconds 20 Seconds 60 seconds 120 Seconds
Spezifische Such-Robots:
Google	Default Allowed Refused   googlebot
MSN Search	Default Allowed Refused   msnbot
Yahoo	Default Allowed Refused   yahoo-slurp
Ask-/Teoma	Default Allowed Refused   teoma
GigaBlast	Default Allowed Refused   gigabot
Scrub The Web	Default Allowed Refused   scrubby
DMOZ Checker	Default Allowed Refused   robozilla
Nutch	Default Allowed Refused   nutch
Alexa-/Wayback	Default Allowed Refused   ia_archiver
Baidu	Default Allowed Refused   baiduspider
Spezifische Spezial-Bots:
Google Image	Default Allowed Refused   googlebot-image
Yahoo MM	Default Allowed Refused   yahoo-mmcrawler
MSN PicSearch	Default Allowed Refused   psbot
SingingFish	Default Allowed Refused   asterias
Yahoo Blogs	Default Allowed Refused   yahoo-blogs/v3.9
Eingeschränkte Verzeichnisse:
Der Weg ist relativ zu root und muß ein trailing enthalten "/"
Bitte kopieren Sie den im Container hinterlegten Text in eine leere Textdatei. Speichern diese unter dem Dateinamen robots.txt ab. Achten Sie dabei unbedingt auf Groß- und Kleinschreibung, es müssen ALLE Buchstaben des Dateinamens klein geschrieben werden. Kopieren Sie diese Datei in das Stammverzeichnis Ihrer Domain. Pro Domain darf nur eine robots.txt existieren!

Falls Sie noch weitere Fragen zum robots.txt haben, können Sie uns natürlich gerne per
E-mail kontaktieren. Wir werden versuchen Ihre Fragen so gut es geht zu beantworten!

 

Finden Sie die Tools auf dieser Seite gut? Dann verlinken Sie diese doch mit folgendem Code

<a href="http://www.art2digital.com/" target="_new" title="SEO-SEM Tools f&uuml;r Webmaster">Webmaster SEO-Tools - Robots.txt Generator</a>

Social Bookmark

Die offizielle Infoseite finden Sie unter www.robotstxt.org

---

A2D Kontakt  | Seite weiterempfehlen  | Seite Drucken

• .: A2D Online-Tools :.
• .: Tools Übersicht :.
• .: Google Dance Tool :.
• .: Google Pagerank Tool :.
• .: Metatag Generator :.
• .: robots.txt Generator :.
• .: Linkpopularität überprüfen :.
• .: CSS Formatierer-Optimierer :.
• .: E-Mail Schutz Generator :.
• .: E-Mail-link Generator :.
• .: HTML2PDF Generator :.
• .: Website Link-Checker :.
• .: Webmaster Online-Tools :.

Schneller zum Ziel!
A2D Tipp des Tages!
SEO - SEM Tipps & Infos für die Praxis!
Neue Trends, interessante Informationen aus der Praxis für Ihr Marketing und Ihre Werbung. Kostenloser Service... Täglich!

Sie sind Unternehmer/in und möchten
in Suchmaschinen gefunden werden?

Mehr Erfolg im Internet:
Tipps für effizienteres und erfolgreiches Suchmaschinen-Marketing. A2D SEO - SEM Leitfaden für mehr erfolg im Internet

Wir beraten sie gern persönlich:
Art2Digital InterMedia Solutions
Webdesign & Internet Marketing Service
DE-97922 Lauda-Königshofen

Telefon: +49 (0) 93 43 - 509 402
Telefax: +49 (0) 93 43 - 509 403

Suchen

Anrufen Wir sind Profis und nehmen Ihren Erfolg ernst.

Newsletter   Anmelden   Abmelden Abonnieren Sie jetzt unseren kostenlosen Newsletter!