Pyszny markoviec dla botów
Ostatnio pokazywałem Anubisa, a dzisiaj wrzuciłem na domowego kubernetesa podobny program – Iocaine. To oparty na łańcuchach markowa generator polinkowanych stron wypełnionych bezsensowną treścią.
W zamierzeniu współpracuje z odwrotnym proxy HTTPS. Zwykłe przeglądarki odsyła na właściwą stronę. Natomiast botom serwuje labirynt, aby zaśmiecić wyniki ich crawlowania. Oczywiście tylko tym, które olewają robots.txt zakazujące zapuszczania się w niektóre ścieżki.
Osobiście (chyba?) nie jestem dotknięty problemem uporczywego skanowania, więc konfigurację zrobiłem na szybko, niezupełnie tak jak przewidział autor. Jako źródło treści zapodałem Pana Tadeusza i Free as in Freedom, biografię Richarda Stallmana. Efekt można podejrzeć udając bota, np.
curl --user-agent Perplexity https://pipebreaker.pl/links
Z dziwnostek, kod źródłowy wygląda jakby nazewnictwo dobierał nahormonowany nastolatek 🤨
036/100 of #100DaysToOffload
Tomasz Torcz
Comments
Comments powered by Disqus