Discussion
Loading...

Post

Log in
  • About
  • Code of conduct
  • Privacy
  • About Bonfire
Aurin Azadî
Aurin Azadî
@atarifrosch@mastodon.de  ·  activity timestamp 4 days ago

Ich bin echt kurz davor, meine Media-Site, die von Scraper-Bots überrannt wird, die wiederum fail2ban zum Glühen bringen, auf IPv6-only umzustellen, also den A-Record im DNS zu löschen. Denn die Scraper können alle nur IPv4.

So viele IP-Ranges kann ich gar nicht sinnvoll in die iptables tackern – zudem ich dann eventuell die Bots von Let's Encrypt aussperre, die ja leider nicht verraten, auf welchen Hosts sie gerade sitzen.

Haken: Ich fürchte, daß ausgerechnet Let's Encrypt dann ein wenig verschnupft reagieren wird, weil dann eben der A-Record fehlt.

Ihr wißt doch immer so viel: Wie könnte ich das lösen?

#IPv6 #LetsEncrypt

  • Copy link
  • Flag this post
  • Block
Spoontaneous Consumption
Spoontaneous Consumption
@manu@freiburg.social replied  ·  activity timestamp 4 days ago

@atarifrosch
Hast du dir Anubis schon angeschaut? Das ist diese Hash-Challenge die auf vielen Seiten kurz kommt bevor die Seite geladen wird.
https://anubis.techaro.lol/

Das verhindert nicht den Zugriff für Bots aber macht ihn teurer. @Codeberg haben das eingesetzt als bei ihnen die Scraper zu heftig wurden und wenn ich auf aktuellem Stand sind haben die Bots wohl die Kosten auf sich genommen und die Hashes trotzdem berechnet. Weiß aber nicht ob das flächendeckend gemacht wird oder nur auf Seiten, die gezielt ausgesucht werden wie Codeberg, wo es sehr viel zu holen gibt.

  • Copy link
  • Flag this comment
  • Block

BT Free Social

BT Free is a non-profit organization founded by @ozoned@btfree.social . It's goal is for digital privacy rights, advocacy and consulting. This goal will be attained by hosting open platforms to allow others to seamlessly join the Fediverse on moderated instances or by helping others join the Fediverse.

BT Free Social: About · Code of conduct · Privacy ·
Bonfire social · 1.0.1 no JS en
Automatic federation enabled
Log in
  • Explore
  • About
  • Code of Conduct