"Abruf wie durch Google" kaputt?

"Der google Bot hat bei mir in den letzten Tagen täglich abnormale 400% der Seitenanzahl gecrawled"

Das Verhalten habe ich witzigerweise auch. Wobei ich mir da auch nicht sicher bin, ob das stimmt. Da werden viel mehr Seiten angeblich abgerufen, als es überhaupt gibt. z:b. eine winzige Seite, 689 Abrufe laut Google am 8.9, aber die Domain besteht inkl. Favicon und Robots.txt nur aus 21 Dateien.

Vielleicht bestehen die Probleme aber auch nur darin, dass die nun die neue Search-Console "ausbauen". Gibt da nun ja einiges neue.

Wenn Dein Provider allerdings den Bot sperrt, dann gibt es nur eine Lösung -> wechseln

Aber rufe doch mal die Dateien ab, die angeblich nicht erreichbar waren. Geht ja, musst ja keine Webseite vom Bot abrufen lassen, kann ja auch ein CSS oder Bild sein. Bei mir geht das dann komischerweise fehlerfrei.

Rufe ich mein Seite von vorher wieder ab, dann kommt das hier:

[ATTACH=JSON]{"data-align":"none","data-size":"full","title":"g-abruf-1.jpg","data-attachmentid":117398}[/ATTACH]

Also CSS nicht gefunden. Rufe ich das aber direkt ab, dann kommt das:

[ATTACH=JSON]{"data-align":"none","data-size":"full","title":"g-abruf-2.jpg","data-attachmentid":117399}[/ATTACH]

Funktionierte also....

Mein Provider reguliert da gar nichts. Sind eigene Server und bis 10 TB am Tag kann ich machen was ich will. Er hat mich nur einmal "reguliert", als ich einen DNS-Fehler hatte, der am Tag an die 4 Mio Zugriffe auf deren DNS-Server verursachte. Da kam aber sofort eine Meldung der Abuse-Abteilung. Zudem, wie gesagt, einer der ersten Bilder. Die Abfragen, die Google da angeblich nicht kann, die kommen von 3 verschiedenen Servern. Also teilt sich das ohnehin auf. Und 40 oder habe ich eh nicht, wenn dann unter 10 und das eben auf 3 Server verteilt, also nix

Zudem spricht noch viel mehr dagegen. Rendern geht nicht, nur Abrufen aber schon. Wenn der Provider sperren würde, dann könnte der das nicht unterscheiden.

Wenn Dein Provider aber bestätigt hat, dass er Dich mit nicht mal 30.000 Zugriffen sperrt, dann suche Dir einen anderen Anbieter. Geht ja gar nicht. Ich habe hier Domänen, die bestehen aus fast 600.000 Unterseiten / Bildern!!!

Wie meinst Du das? Bezogen auf wen. Nur als Info. Ich habe ja noch den Auth vom seo-nw. Auch bei dem bekomme ich die gleichen Fehler wie bei mir. Wenn es am Provider liegt, dann auch an Deiner noch derzeitigen.

Und nachdem ich hier posten kann sehe ich, dass das da nicht stimmen kann...

[ATTACH=JSON]{"data-align":"none","data-size":"full","title":"g-abruf-3.jpg","data-attachmentid":117422}[/ATTACH]

Und der nächste Versuch ....

[ATTACH=JSON]{"data-align":"none","data-size":"full","title":"g-abruf-4.jpg","data-attachmentid":117425}[/ATTACH]

Ja, Du hast das, was ich bei meinen Seiten sehe. Ich sehe Dein Forum als gar nicht erreichbar. Also die Seite an sich schon nicht.

Sehe ich auch so, das scheint ein Bug zu sein. Aber eben mit dem faden Beigeschmack, ob der normale Bot den Bug auch hat....

Nee, das widerlegt es nicht, denn weder bei mir noch bei Alex greift der Hoster ein (verschiedene Hoster). Es stimmt was nicht bei Google, das ist richtig. Dass Dein Hoster einschreitet stimmt aber auch nicht, also nicht im Sinne von "Faktor Seitenanzahl/Serverinteraktionen". Das mag stimmen, was der da sagt, aber die Umsetzung ist quatsch mit Soße. Bei DDoS reden wir nicht von solchen zahlen, sondern von tausenden Zugriffen pro Minute oder Sekunde. Alles andere muss deren Netzwerk aushalten können.

Was ich sagen will, wegen Bots. Google geht da noch sehr harmlos vor, auch wenn es teilweise sehr viel ist. Da gibt es ganz andere Bots, die 10-20 Seiten pro Sekunde abrufen. Das macht Google nicht.

Selbst die 700 bei mir, was zu viel ist für die Seite, sind letztendlich nur 3 Zugriffe pro Minute.

Und habe mich ein wenig umgehört, wegen den Zahlenangaben bei Google bezüglich abgerufenen Seiten. Das ist irreführend, denn die Angabe bezieht sich nicht auf "Seiten", sondern "Zugriffe." Also eine Webseite mit ein HTML, ein CSS, ein JS und ein Bild sind in der Statistik 4 "Aufrufe". Also ein Seitenabruf, der aus 4 Requests besteht.

gelöscht, falscher Thread.... Liegt wohl am Gas-Geruch