Vlákno názorů k článku
AI crawlery začaly prolamovat ochranu Anubis, tvrdí Codeberg
od Jan Hrach - WTF.
Proč si to git nevyklonuje, čímž to dostane...
-
Jan HrachStříbrný podporovatelWTF.
Proč si to git nevyklonuje, čímž to dostane všechna data v krásně čistém formátu?
Mastodon je federace, takže nejspíš taky bude existovat způsob jak příspěvky získat realtime a bez nutnosti parsovat HTML.
-
KateStříbrný podporovatelProtože to chce i issues, debaty u pull requestů... Prostě veškerou omáčku kolem.
-
Jan HrachStříbrný podporovatel
OK, dobrá poznámka.
I tak si ale myslím, že to stahuje nesmysly - alespoň co jsem pozoroval na své dokuwiki a gitwebu.
-
Protože je git samotnej vůbec nezajímá, je to prostě crawler aka web-spider. O gitu neví nic a v podstatě ho to ani nezajímá, jen je na tom webu prostě hodně linků (každej soubor v každým commitu) ke getnutí.
Btw všechno to chodí z ASN Huawei Cloud (AS136907), takže stačí stáhnout jejich prefixy, bloknout a zapomenout.
18. 8. 2025, 07:21 editováno autorem komentáře
-
Ondra Satai NekolaZlatý podporovatelHalt kdyby OpenAI neprasilo s crowlrem, tak bude mít méně blokování s agentem.
-
Staré pravidlo říká, že neexistuje ochrana, kterou by nešlo obejít. A ti, kteří je obcházejí, jsou vždy o krok napřed před těmi, kdo je implementují.
Proto řešit tyto věci jen restrikcemi je nesmysl – mnohem lepší je hledat jiné, funkční technické řešení, které bude vyhovovat všem stranám. „Nejde“ neexistuje, jen „zatím to neumím“. -
Ondra Satai NekolaZlatý podporovatel
A jak si to představuješ?
Apelovat na morálku "AI" firem je absurdní, soudit se na dlouho, tyhle ochrany jim sypou písek do soukolí solidně...
-
Taky jsem ten Singapurský huawei cloud minulý týden bloknul na více serverech, validních požadavků z těchto končin jsem objevil... přesně nula. Zvažuju kompletní geoip blok pro Čínu, ruSSko, Afriku, Jižní Ameriku, apod. Útoků a botů od nich chodí dost, zákazníky tam nemáme a odbavit ten provoz reálně něco stojí.
18. 8. 2025, 10:49 editováno autorem komentáře
