Ein Hobby-Blogger gibt auf: Warum ich meine Website lieber abschalte
Running web sites makes me not want to
Ein Hobby-Blogger aus Neuseeland zieht die Konsequenzen: Weil LLM-Scraper von Meta, Azure und Alibaba seinen selbst gehosteten Server mit sinnlosen Anfragen überfluten, will er seine Fotografie-Website aufgeben. Statt digitaler Bilder soll es nur noch gedruckte Zines geben. Sein Fazit: Wer heute ohne großen Konzern als CDN im Rücken ein eigenes Webangebot betreiben will, braucht mehr Fachwissen, als ein Freizeit-Enthusiast aufbringen kann.
Es ärgert mich wirklich, wie selbstverständlich das massenhafte Auslesen des Webs durch Konzerne geworden ist – nur um uns dann eine schlechte Imitation von Kreativität zurückzuverkaufen.
- baumschubser
Von allen Aspekten der KI finde ich diesen am leichtesten zu ignorieren. KI mag dein Lesen vergiften, aber lass nicht zu, dass sie dein Schreiben vergiftet. Warum machst du nicht einfach weiter mit dem, was du tust? Dieses Gefühl der Entfremdung ist nicht neu in einer Welt, in der sich jede Nützlichkeit als Tauschwert ausdrücken muss. Lass einfach einen Dienstleister die zusätzliche Last bewältigen und höre nicht auf, ein denkender, schreibender, Fotos machender und sozialer Mensch zu sein.
- eska
Mir ist klar, dass Scraper auch private IP-Bereiche über SDKs nutzen, die App-Entwicklern schmackhaft gemacht werden, um Hintertüren einzubauen, damit die Verbindung für "andere Dinge" verwendet werden kann.
Kann das jemand bestätigen?
- nightdeployboy
Ich betreibe auch eine kleine Nebenprojekt-Website, und ich bekomme jede Woche Hunderttausende von Bots zu Besuch ..
- yosefk
Liefere größtenteils statische Seiten, die von einem CDN zwischengespeichert werden, und cache die gelegentlichen dynamischen Seiten, bei denen du nicht erwartest, dass sie oft aufgerufen werden, selbst auf der Serverseite, dann bist du fein raus
- Bender
Gib nicht auf. Das Blockieren, Umleiten und Tarpitting von Bots kann in eine Art lustiges Spiel oder Rätsel verwandelt werden. Die Bots entwickeln sich weiter, also muss sich auch das Spiel weiterentwickeln. Ich bremse die privaten Bots ein kleines bisschen aus und die offensichtlichen Bots auf irgendwo zwischen 32 und 96 Bytes pro Sekunde. Ich dachte, die meisten würden abbrechen, aber viele tun es nicht. Sie bleiben für das langsame Tröpfeln da.
Hier nur ein Beispiel. Es ist irgendwie unhöflich, besonders für legitime Leute hinter Firmen-Firewalls, aber solche Leute sollten sowieso nicht auf meiner Seite sein. Passe es nach Bedarf an. Es ist nur ein albernes Beispiel.
if ($server_protocol = HTTP/2.0) { set $limit_rate 384k; set $ok 1; }
if ($http3 != "") { set $ok 1; } # no rate limit for quic
if ($ok != 1) { set $limit_rate 32; limit_rate_after 128; set $trace "${trace}not-h2h3 "; add_header Content-Type text/html;return 200 '<!DOCTYPE html><html><head><title>Welcome to nginx!</title><style>body{width:35em;margin:0 auto;font-family:Tahoma,Verdana,Arial,sans-serif;}</style></head><body><h1>Welcome to nginx!</h1><p>If you see this page, the nginx web server is successfully installed and working. Further configuration is required.</p></body></html>'; }
Leute, die nicht hinter faschistischen Firewalls und nicht über Proxys surfen, können QUIC (über alt-svc-Header und DNS) für volle Geschwindigkeit nutzen. Die meisten echten VPNs sollten QUIC nutzen können.
Dies ist nur ein albernes Beispiel. Man kann nginx geo in Kombination mit FireHOL und anderen Spammer-IP-Repositories (konsolidiert mit iprange) verwenden, um auch zu verlangsamen oder Tarpitting zu betreiben oder […]