#llm træning

1 opslag

27. oktober 2025 kl. 05:22maurycyz.com

lol... babble.c... mon ikke min kone har fået en kopi af det stykke kode? 😅 Spøg til side — sjovt lille eksperiment med bot-crawling her, læseværdigt. 📚👍🏻

Fodrede crawlere med nonsens — nu udgør de 99% af trafikken

Jeg satte en "infinite nonsense"-crawler, og den står nu for 99% af min servertrafik; AI-scrapere ignorerer robots.txt, roterer IP'er og æder båndbredde og disk. Blokering, rate-limits eller paywalls fejler — billigst og nemmest er at fodre botsene med skrammel.

Besøg linketPermalink

Kort fortalt: Jeg satte en "infinite nonsense"-crawler, og den står nu for 99% af min servertrafik; AI-scrapere ignorerer robots.txt, roterer IP'er og æder båndbredde og disk. Blokering, rate-limits eller paywalls fejler — billigst og nemmest er at fodre botsene med skrammel.

#crawlerfælder#llm træning#serverydelse#webscraping