#20251015chartreuse

RIP robots.txt

Laut heise.de ist die robots.txt gestorben. Natürlich war die Beachtung dieser Datei immer freiwillig, aber der für mich einzig wichtige Zweck ist ja, dass Google das nicht indiziert. Alles andere kommt eh hinter ein Login.

indizieren: in einen Index aufnehmen
indexieren: verschlagworten/kategoresieren