Wie manche unserer Stamkunden schon festgestellt haben, leidet der Server von Fischer-Lahr in den letzten Wochen und Monaten zeitweilig unter kurzen Verfügbarkeit-Problemen: Ursache sind Bots - genauer KI-Bots - die die Seite von Fischer-Lahr massiv zu Trainings-Zwecken crawlen. Das können viele hunderttausend gleichzeitige Abfragen sein, was die Datenbank manchmal an ihren Leistungsgrenze bringt!
Anstatt nun agressive KI-Crawler auszuschließen (was wir auf Grund der Freiheit von Informationen vermeiden möchten), rüsten wir unsere Webserver nun technisch weiter auf und versuchen durch ausgefeilte Zugriffskontrolle dem Problem Herr zu werden.
Möglich wird dann sein, dass wir für agressive KIs ein Tempolimit einführen, an welches sich auch Suchmaschinen in aller Regel freiwillig halten. Das Crawlen bzw. die Anzahl von Abfragen wir dann zeitlich limitiert, für Maschinen die sich nicht an die robots.txt halten. Wie gesagt: wir wollen niemanden, auch Maschinen, nicht ausschließen, doch müssen wir unsere eigene Mashine schützen.
Wir bitten alle, die in der Vergangenheit unter langsamen Ladezeiten und Downtimes litten, dies zu entschuldigen und denken, das wir mit den anlaufenden Maßnahmen und technischen Erweiterung.




