Crawler Ethik

Der durch uns betriebene Web-Crawler respektiert die Grundsätze der Crawler-Ethik. Unsere Web-Crawler warten grundsätzlich 800ms zwischen Anfragen an den gleichen Host-Server (sog. politeness delay).

In diesem Zusammenhang halten wir uns auch an den de-facto Standard robots.txt.

Aus diesem Grund identifizert sich unser Web-Crawler mit dem folgenden User-Agent:

Semantic Health Web Crawler (shc-info.zml.hs-heilbronn.de)

Auf den nachfolgenden Seiten erklären wir Ihnen, wie Sie eine Besuch durch unseren Web-Crawler verhindern können.