Hallo Jens,
diese Bots sind Suchmaschinen die unser Board besuchen.
Nutzen so wie Du die Links zu Themen, Bereichen etc. um Inhalte zu finden und zu indexieren... Ohne diese Bots, gäbe es keine Einträge in Suchmaschinen...
Man meldet bei Google und anderen Suchmaschinen seine Seite/Domain an und dann kommen die Bots und schauen sich das ganze mal an und nehmen einen dann auf.
Die kommen dann halt regelmäßig und suchen nach neuen Inhalten für den Index.
Gruß
Hajö
PS: den Button hab ich gefunden... Einsicht ist der besten Anfang...