Möglichkeiten, ein temporäres Google-Verbot für häufigen Zugriff auf die Datenbank zu umgehen - Profit Hunter

* Gastbeitrag

Dieser Beitrag ist den Besonderheiten der Arbeit mit dem nTrendsMaster-Skript, der Massenüberprüfung der Google-Ausgabe für die Anzahl der Wettbewerber für die erforderlichen Abfragen und dem Timeout-Problem von Google im Allgemeinen gewidmet. Der Beitrag ist sehr gut in Bezug auf die Erweiterung des Horizonts (ich hatte keine Ahnung von vielen hier geschriebenen Dingen) und erklärt in gewisser Weise die Ursachen für Probleme, die beim Verwenden von Google-Skripts und -Programmen (einschließlich Market Samurai) auftreten können ).

Der Beitrag ist eine Zusammenstellung von Kommentaren und Korrespondenz mit dem Internetunternehmer Oleg Savchenko und wird mit seiner Erlaubnis veröffentlicht.

-----

Die Ausrichtung ist wie folgt (auf jeden Fall habe ich):

  • wir starten das Skript und geben ihm 100-200 Wörter - alles funktioniert ohne Probleme ...
  • beginnen wir erneut mit der gleichen Menge ... und mehr ... wenn Sie nicht mindestens eine halbe Stunde zwischen den Starts des Ehepartners stehen, dann buchstäblich nach 3 Starts (d. H. Nach 400-600 geprüften Wörtern) bei der Überprüfung von Konkurrenzseiten ; - ((

Nachdem ich sofort nach etwas in Google gesucht habe, sehe ich ein Captcha. Das Skript wurde von Denver aus gestartet. Das Captcha sagt, dass mein Aypishnik vorübergehend zum Verbot gegangen ist Im manuellen Modus Ich kann den Code für dieses Bild längere Zeit ruhig mit Google eingeben, aber für etwa 5-6 Stunden kann dasselbe Captcha zufällig während eines meiner Anrufe bei Google angezeigt werden (oder möglicherweise nicht). In jedem Fall zu diesem Zeitpunkt Die Verwendung des Skripts von derselben Adresse aus wird nicht funktionieren, da das Image oder Laufwerk im Code nicht erkannt werden kann.

Lösungen, die ich sehe:

1. Erhöhte Pausen zwischen Google-Anforderungen in Skript . Aber nicht nur eine Zunahme der Pausen, sondern auch deren Randomisierung. Viele Desktop-Anwendungen ( KRA PRO , IBP und andere) fallen aus genau diesem Grund nicht unter das Google-Verbot. Sie legen jedoch zwischen jeder Anfrage eine Pause von 7 bis 30 Sekunden ein !!! Wenn Sie nur 5 (7, 10, 15) Sekunden setzen und alle Pausen gleich machen, durchbricht Google die Automatisierung und gibt ein Captcha aus: - ((

Warum ist dieser Pfad schlecht? Zu welcher Zeit wird die Skriptprüfung vergleichbar? Zeit, um manuell nachzuschauen, aber es gibt Pluspunkte: Zu diesem Zeitpunkt prüfen Sie immer noch nicht, sondern etwas anderes. Es ist "lang, aber ohne Sie", daher hat die Option das Recht zu existieren Wahrscheinlich schlägt es fehl, wahrscheinlich weil ich die Seiten mit einer Curl (eine Funktion wie Curl in PHP) ziehe, oder vielleicht brauche ich mehr (Es gibt auch solche Bibliotheken, die mehr oder weniger genau erlauben, einen Browser zu emulieren) Kurz gesagt, es gibt noch etwas zu bedenken ...

2. Verwenden von Schlüsseln von Google . Aber das Problem ist hier Google unterstützt offiziell keine SOAP-API mehr, empfiehlt jedoch jedem, auf die AJAX-API zu wechseln. Ich habe festgestellt, dass sich die Ergebnisse in diesem Fall sehr stark von der Suche im manuellen Modus unterscheiden (manchmal und sogar dutzende Male !!!). (http: // www. google. com / search? hl = de. sicher = aus. q = ajax + google + api + geschätzteResultCount) Sie werden feststellen, dass dieses Problem allgegenwärtig ist ... Daher empfehle ich dringend, die neue API nicht für SEO-Untersuchungen zu verwenden.

Wie bei der alten Methode mit der Google SOAP Search API ist alles in Ordnung: Die Ergebnisse divergieren "innerhalb vernünftiger Grenzen" (sie unterscheiden sich auch auf verschiedenen Google-Servern, daher ist alles in Ordnung). Aber Google ist nicht mehr Benutzer erhalten diese "alten" API-Shnye-Schlüssel. Es ist also unmöglich, ein Skript zu schreiben, das öffentlich sein wird.

Die Leute der Lichtungen machten den Unterschied zwischen den alten und den neuen Schlüsseln und eilten die alten zum Handel ... Und ich war auch überrascht - wer braucht sie für 25 Dollar? Aber in den Foren. Digitalpunkt. com sie werden gerade so einem Preis zugewiesen. Und mit einem Schlüssel können nur 1000 Anfragen pro Tag gemacht werden. Sie hatten schon immer ein solches Limit. Wenn Sie also einen Schlüssel und ein Skript besitzen, müssen Sie 10 Tage auf einer Basis von 10.000 Personen verbringen. Nun, oder kaufen Sie 10 Schlüssel, aber die Kerze nicht wert. Ein kostenloses Skript, das zusätzliche 250 USD für seine eigenen Schlüssel benötigt, ist nicht ernst gemeint ...

Für diejenigen, die wie ich einen alten Schlüsselbestand haben, ist es jedoch sinnvoll, auf diese Möglichkeit zu achten. Dies ist jedoch nicht für eine öffentliche Veröffentlichung gedacht ... Leider ...

Außerdem garantiert Online-Kauf nicht, dass Sie nicht gleichzeitig ein paar Dutzend Käufer vom selben Verkäufer gekauft haben ;-)) und dann wird dieser Schlüssel im Allgemeinen unbrauchbar. Das heißt, Sie müssen nur von geprüften Personen kaufen, die die Einzigartigkeit des Verkaufs garantieren können. Und wohin soll man sie bringen?

3. Kombination des ersten mit der Arbeit durch einen Proxy . Sie können mehrere gleichzeitige Streams erstellen (von verschiedenen Proxys, d. H. Von verschiedenen IP-Adressen, die zum google kommen), von denen jeder vernünftige Pausen verträgt und die Geschwindigkeit des gesamten Skripts so oft steigt, wie diese Streams beteiligt.Hier besteht die Schwierigkeit darin, die ARBEITNEHMER zu finden und gleichzeitig wirklich ANONYMOUS-Proxies, die nicht wirklich eine echte IP-Adresse vor Google scheinen würden. Unter den Dutzenden, Hunderten und sogar Tausenden von kostenlosen Proxy-Listen, die nach Überprüfung im Internet verfügbar sind, bleiben die prozentualen Bruchteile erhalten. Gestern habe ich mehr als 2.000 Proxy-Software getestet - nur etwa einhundert haben gearbeitet, und anonyme 20 Stücke funktionierten. Das Skript muss also mit einer solchen Komponente ausgestattet sein, in der die Proxy-Listen und ihre regelmäßigen Leistungsprüfungen abgerufen werden. Und dabei wird ein separates Monster erhalten. Ich kenne solche Arbeitssysteme, ich verwende sogar ein kostenpflichtiges Skript, aber ich kann es nicht direkt in dieses Skript integrieren - nur durch Import-Export. Dieses Problem ist jedoch gelöst, aber wieder kann der Massencharakter der Verwendung in diesem Fall vergessen werden. Warum bin ich das alles? Darüber hinaus ist es durchaus real, das Skript für sich selbst zu gestalten. Nur Sie benötigen einen eigenen Proxy-Checker oder gekaufte Proxys. Beide kosten Geld.

4. Alternative "für Maniacs" . 5-6 Hosting wird mit funktionierenden offenen Verbindungen für PHP-Skripts erworben (nicht jeder Hosting-Service erlaubt dies), dh PHP-Skripts selbst sind jetzt allgemein verfügbar, aber für diese Skripte besteht die Möglichkeit, Verbindungen zu externen Servern herzustellen. Es ist durchaus möglich, solche Anbieter zu finden. Dann wird ein Skript geschrieben, das beispielsweise 1000 Wörter in 5 Teile von jeweils 200 Teilen aufteilt und sie auf 5 Hosts verteilt, wo sie wie üblich leise überprüft werden, ohne dass Änderungen vorgenommen werden. 200 Wörter normalerweise alle Pässe ... Und vorbei nd sie werfen die Ergebnisse zurück an den „zentralen“ Skript aus, das Sie und ein einheitliches Bild bietet. Es ist wie ein Stellvertreter und kein Stellvertreter zugleich. Aber der Preis beträgt 5 Hosting-Anbieter - Sie wissen ... und monatlich ... Es ist einfacher, einen Proxy-Checker zu kaufen und alles von Denver aus auszuführen ...

5. Verwenden von Daten von Wordtracker oder einem anderen ähnlichen Dienst . Sie haben normalerweise Mitbewerber, die in der Nähe von Google-Daten für die Vereinigten Staaten sind. Die Beliebtheit von Keywords interessiert uns nicht, hier haben wir Trends von Google, nur Daten zu Mitbewerbern ... Aber auch die finanzielle Seite der Frage ...

Hier ist ein Deal. Ich neige dazu, zu dauern. Deaktivieren Sie also im Skript selbst die Nafig-Prüfung der Konkurrenten. Und jagen Sie alles, um die richtige Anzahl von Anfragen zu finden. Wir schicken die „Konkurrenten“ (wir lehnen alles ab, was wir zu selten oder zu oft suchen), um unsere Konkurrenten zu überprüfen. Das Einzige, was sich als Kombination aus mehreren Durchgängen herausstellt, aber ich möchte „alle gleichzeitig“, aber für mich scheint diese Option ziemlich attraktiv zu sein ( in Anbetracht der Tatsache, dass es immer noch wünschenswert ist, ein Abonnement für Wordtracker oder einen anderen ähnlichen Dienst zu haben). Wenn der Wordtracker jedoch nicht erschwinglich ist, sind die Optionen folgendermaßen angeordnet:

  • mit alten Schlüsseln (nicht für jedermann geeignet);
  • mit Proxies und Multithread-Abfrageausführung (schwierig zu erstellen, aber wirklich.) );
  • mit mehreren Hosts (der Preis kann mit dem Preis von Wordtracker vergleichbar sein).

Verwandte Beiträge:

  • Die ganze Wahrheit über das Cloaking
  • Wie man schnell herausfindet, wie man ein Blog hackt
  • Wie Profit Hunter checkt
  • Online-Shop-Konvertierung erhöhen

Sie mögen Artikel? Abonnieren Sie den Newsletter!

Suche

In Verbindung stehende Artikel