IONOS - die aktuelle Situation

[Theo Gottwald]

Titel: Forum-Ausfälle, Sedo-Parking und massive Bot-Zugriffe

In der letzten Zeit war unser Forum zeitweise nicht erreichbar. Statt des Forums erschien eine Sedo-Parking-Seite.

Der Support von IONOS war auch nach >6 maligem Kontak völlig sinn- und hilflos.
Also war es besser sich selbst auf die Suche zu machen.

Die Ursache war jedoch kein Domain-Parking und auch kein fehlerhafter Domaintransfer.
Wie vermutet wurde das Forum und unser anderen Museums-Forum dermassen von KI-Bots gestürmt dass die datenschwachen Server von Ionos den Löffel bagaben.

Was wir geprüft haben

• DNS und IONOS-Nameserver waren korrekt.
• forum.it-berater.org zeigte korrekt auf den IONOS-Webspace.
• IPv4: 217.160.0.126
• IPv6: 2001:8d8:100f:f000::277
• Es existierte kein Sedo-CNAME und keine Sedo-Weiterleitung.
• SSL-Zertifikate waren allen Forum-Subdomains zugewiesen.
• Das aktive Forum verwendete tatsächlich die IONOS-Performance-Datenbank dbs15753645.
• IONOS Performance Level 5 war bereits aktiv.

Die eigentliche Ursache

Die Sedo-Seite war eine von IONOS ausgelieferte Fehlerseite bei HTTP 500. Unter hoher Last waren die gemeinsamen PHP-/Webhosting-Ressourcen erschöpft.

Der Access-Log enthielt am 20. Juni bereits rund 234.000 Requests. Allein forum.it-berater.org hatte zum Messzeitpunkt:

• 10.316 Requests
• 2.501 HTTP-500-Fehler
• 913 HTTP-429-Antworten

Auch die Read-only-Museumsforen erzeugen Serverlast. Obwohl dort niemand mehr schreiben kann, wird jeder Seitenaufruf weiterhin dynamisch durch PHP und MySQL verarbeitet.

Die auffälligsten Bots

Erste Messung für forum.it-berater.org:

Bot	Requests
ClaudeBot	2.936
Barkrowler	1.101
Applebot	968
AhrefsBot	524
Bytespider	354

Spätere Messung über alle fünf Foren ab 18:15 Uhr:

Bot	Requests	HTTP 500
Amazonbot	1.767	831
GPTBot	218	137
IbouBot	80	31
PetalBot	24	17
MJ12bot	20	18

Diese Zahlen erfassen nur eindeutig erkennbare Bots. Viele Scraper verwenden normale Chrome- oder Firefox-Kennungen und lassen sich dadurch nicht sicher von echten Besuchern unterscheiden.

Was geändert wurde

Wir sperren momentan ausschließlich die größten klar erkennbaren Verursacher:

Code Select Expand

ClaudeBot
Barkrowler
Applebot
Amazonbot

GPTBot bleibt vorerst zugelassen.

Die Sperre wurde in den relevanten .htaccess-Dateien eingerichtet:

Code Select Expand

RewriteCond %{HTTP_USER_AGENT} (ClaudeBot|Barkrowler|Applebot|Amazonbot) [NC]
RewriteRule ^ - [F,L]

Zusätzlich wurden die von IONOS empfohlenen Regeln gegen die Sedo-Fehlerseite eingetragen:

Code Select Expand

ErrorDocument 503 "Server broken"
ErrorDocument 500 "Server broken"
ErrorDocument 404 "File not found"
ErrorDocument 403 "Permission denied"
ErrorDocument 401 "Authentication required"

Aktueller Stand am 21. Juni

Beim morgendlichen Kontrolltest ergaben:

• 25 von 25 normalen Startseitenaufrufen HTTP 200
• 10 von 10 dynamischen Index- und Threadaufrufen HTTP 200
• keine Sedo-Seite
• ClaudeBot und Amazonbot wurden weiterhin abgewiesen
• GPTBot blieb erreichbar

Die Situation hat sich damit deutlich verbessert. Wir beobachten das Forum weiter, insbesondere während der höheren Last am Nachmittag und Abend.

[Erik VanDyke]

I'm the person who helped Theo, which was causing the website to freeze when connecting.
I saw that in my web browser.

I use Firefox ESR as my web browser, with an extension NoSript Security Suite from Giogio Maone

[Theo Gottwald]

Erik, I had to change your Forum Name because the Forum Rules want the full name.
Welcome in the Forum.