Der BesserOnlineBlog 【ツ】

besser Online jeden Tag – Tipps für SEO, eCommerce, Online-Marketing

Robots.txt

Wofür wird die Robots.txt benötigt? Wer eine Website neu erstellt, der wird vielleicht immer wieder neue Testbeiträge anlegen, prüfen ob alles so funktioniert wie gewünscht, und dann auch ggf wieder löschen. Problematisch dabei ist es jedoch, wenn dann zufällig genau in diesem Moment ein Suchmaschinen-Bot vorbeischaut, und den “falschen” neuen Content in den Index packt. […]

Jetzt alles lesen!/a>