Woher bekommen seolytics, xovi.de, etc. ihre Daten

[ChristophKind]

Hi Leute,
ich frage mich gerade, woher die großen Anbieter von Seo-Tools ihre Daten bekommen.
Wenn ich mir bei Google die API-Preise für Suchanfragen ansehen sind diese schon ziemlich happig.
Kann sich das überhaupt lohnen für diese Anbieter, oder gehen sie anders vor?

Gruß

[hanneswobus]

ich vermute, die haben eigene crawler oder legen die api-preise auf die kunden um oder haben rabatte fuer die api-abfragen.
gruß

[domää]

Ich vermute du meinst die Backlinks und Ranking-Positionen.

Die Backlinks werden über APIs von Datenbanken eingespeist, wie zum Beispiel ahrefs oder seokicks. Dafür werden monatliche Kosten fällig, die jedoch durch die Kunden leicht wieder eingespielt werden.

Die Rankings können ganz einfach mit einem PHP-Code ausgelesen werden, der entsprechende Codeteil hat in meiner eigenen Analyse-Software nicht mal 50 Zeilen.

LG

[ChristophKind]

Die Rankings können ganz einfach mit einem PHP-Code ausgelesen werden, der entsprechende Codeteil hat in meiner eigenen Analyse-Software nicht mal 50 Zeilen.

Sowas habe ich auch mal programmiert, allerdings bekomme ich nach ca. 100 Anfragen immer einen 503 von Google, wo ich ein Capture eingeben muss.

Meine weiteren Fragen sind daher:
- Wie umgehst du (bzw. die großen Firmen) das Capture
- Ist sowas legal? Also ich meine Google zu "grabben"

Danke

[hanneswobus]

Meine weiteren Fragen sind daher:
- Wie umgehst du (bzw. die großen Firmen) das Capture
Danke

ich mache sowas mit einer desktop-anwendung wiefolgt:
a) rotierende proxies
b) zufaellig gewaehlte abfragefrequenz von 1sek bis 30sek
gruß

[swiat]

Große Tools sammeln diese Daten selber so viel mir bekannt ist.

Gruss

[Vegas]

Gemacht wird es wie Hannes sagt. Legal ja, aber von Google natürlich unerwünscht, deshalb auch die technischen Hürden.

[hanneswobus]

ich spiele derzeit wegen einer anderen geschichte mit dieser abfrage herum.
https://www.google.com/uds/GwebSearch?c ... &q='blabla'
soweit ich das hier beobachten kann, lassen sich per stapelverarbeitung ~1000 phrasen / keys da durchjagen.
gruß