Spam-Nummern über verteilte Anrufbeantworter bei Anruf online crawlen

[BenutzerEinsZweiDrei]

Hallo bspw hatte mich diese nummer angerufen

https://www.cleverdialer.de/telefonnummer/022327018303

Das erste google ergebnis liefert direkt Gewissheit, dass es sich um SPAM handelt.

Die Nummer war aber nicht in der Blocklist.

Für einen Entwickler sollte es kein Problem sein

All diese Websites automatisch zu crawlen und

Entsprechende nummern zur Blocklist hinzuzufügen.

Wo ist hier das Problem?

[geimist]

Warum so forsch? @haumacher erstellt das alles in seiner Freizeit und bekommt keinen Cent dafür. Wir können für seinen Einsatz sehr dankbar sein, sodass wir dieses Projekt nutzen können. Das ist ein Opensource-Projekt, wo jeder – auch du – zur Verbesserung beitragen kann.

Die Nummer war aber nicht in der Blocklist.

Diese Nummer ist seit dem 2. Dezember 2024, 12:10:44 UTC in der Blacklist. Wenn du aber nur das CardDAV-Adressbuch nutzt, so kann dein Router nicht die komplette Blacklist verarbeiten. In dem Fall hat @haumacher mit dem Phoneblock-AB eine gute Alternative geschaffen.

Für einen Entwickler sollte es kein Problem sein All diese Websites automatisch zu crawlen und Entsprechende nummern zur Blocklist hinzuzufügen.

Guck mal HIER

[BenutzerEinsZweiDrei]

Sorry war nicht beabsichtigt forsch zu klingen. Entschuldigt falls der Ton unangemessen war.

[BenutzerEinsZweiDrei]

Alles klar. Also habe ich richtig verstanden, dass es fritz.box Modelle gibt, welche bei CardDAV nicht die komplette Liste verarbeiten können (oder auch zu anderen Problemen führen)? Mit neueren fritz.box Modellen funktioniert das alles vermutlich besser?

[geimist]

Guck mal im Login-Bereich settings auf der Website. Da wird das beschrieben. Und wie gesagt: Mit dem AB hat man das Limit nicht.
Das 'normale' Limit liegt bei ~2000-4000. Es gibt wohl keine definierte Grenze, sondern die Geräte laufen in ihr Limit. Das schwankt wahrscheinlich auch mit den genutzten Features in der FRITZ!Box. Ob eine FRITZ!Box 7690 alle ~11.000 Einträge verkraftet kann keiner garantieren.

[haumacher]

Das mit dem "Crawlen" ist gar nicht so einfach, weil sich die Webseiten dagegen "wehren". PhoneBlock versucht das tatsächlich, aber die Webseiten sperren Aufrufer, die zu viele Abfragen stellen, weil sie vermuten, dass dadurch Daten "abfließen". Wenn man effektiv andere Dienste "integrieren" wollte, müsste man dieses Crawlen dezentral organisieren. Denn, die Adresse der PhoneBlock-Servers ist schon bei vielen Seiten auf der schwarzen Liste.

[geimist]

… Wenn man effektiv andere Dienste "integrieren" wollte, müsste man dieses Crawlen dezentral organisieren. …

Das wäre eigentlich ein praktisches optionales Zusatzfeature für das Dockerimage, welches ja überall verteilt läuft. Zudem ändert sich bei vielen Usern täglich die IP.

[haumacher]

Ja, das wäre eine gute Option - man muss ja auch nur die Nummern crawlen, die bei dem Betreffenden aktiv anrufen - und sie danach auch noch an PhoneBlock reporten. PR wanted :-)

[haumacher]

Der Crawling-Code ist schon da: de.haumacher.phoneblock.meta.MetaSearchService

[MarkyMarkDE]

Das mit dem "Crawlen" ist gar nicht so einfach, weil sich die Webseiten dagegen "wehren". PhoneBlock versucht das tatsächlich, aber die Webseiten sperren Aufrufer, die zu viele Abfragen stellen, weil sie vermuten, dass dadurch Daten "abfließen". Wenn man effektiv andere Dienste "integrieren" wollte, müsste man dieses Crawlen dezentral organisieren. Denn, die Adresse der PhoneBlock-Servers ist schon bei vielen Seiten auf der schwarzen Liste.

absolut korrekt, streng genommen ist das auch Contentdiebstahl, egal ob das ein legitimer Zweck ist oder nicht.
Kenne den Spaß/Krampf mit Crawler Bots leider auch - nur zu gut (web Development) 😒