Suchmaschinen Infos.Info

Suchmaschinen Infos Forum

 Hallo Gast!
Einloggen
Registrieren

Alle Foren - Suchmaschinen Optimierung - Bot bzw Crawler Sandbox
germanien2006-10-05 11:23:07

Profil

Beitrag #1 		Vor ca. 8 Wochen scheint Google eine Bot bzw. Crawler Sandbox eingeführt zu haben.

(Näheres dazu später, ich wollte erstmal den Thread dazu eröffnen)

Hat jemand ein anderes verhalten der Bots (zeitmässig) oder des crawles (tiefenmässig) in letzter Zeit festgestellt?

Pagemaster2006-10-05 11:27:14

Profil

Beitrag #2 		..habe ich auch bemerkt. Ein 8ter Link hat aber das Problem bei einer meiner Domains beseitigt. Danach hat der Bot die Site täglich komplett verschlungen.

(ca 2000 Seiten)

Aber neue Domains schnell in den Index zu bringen ist jetzt mehr Aufwand

germanien2006-10-05 11:57:42

Profil

Beitrag #3 		Der Thread Suchmaschinenoptimierung Spezialist ist immer noch nicht im Index ;)

Siehe dazu dort den Beitrag # 15

huhuhu2006-10-05 13:28:47

Profil

Beitrag #4 		Nein, aber ich hatte bisher noch nie HighCrawl-Plattformen.

Auffällig ist nur, dass die Änderungsintervalle kürzer sein müssen als bisher um wenigstens innerhalb einer Woche neue Seiten in den Index zu bekommen.
Auch AgenturSeiten die 2-3 mal im Jahr leicht geändert werden werden relativ spät frisch gecrawlt.
Früher ging das oft in 1-2 Tagen heute muss man da schon mal ne 1-2 Wochen warten.

BH-Projekte (wenig frische Links)werden fast nicht mehr gecrawlt.

Insgesamt sehr langsame Indexierung.
Neue Seiten von 2 Gliederungsniveau (tmpSitemap)
aus verlinkt brauchen oft mehr als 7 Tage.
Startseite --> tmpSitemap (4 Tage) -->neueSeite (+3 Tage) insgesamt ca. 7 Tage.

Immer alles Gute

huhuhu

huhuhu2006-10-05 13:31:35

Profil

Beitrag #5 		>>Siehe dazu dort den Beitrag # 15

Je mehr Deeplinks auf die 'neue Seite' kommen desto langsamer wandert die Seite in den Index.

War doch schon immer so - ODER.
Deeplinks erst wenn die Seite im Index ist.

Immer alles Gute

huhuhu

maus2006-10-05 16:34:34

Profil

Beitrag #6 		momentan werden bei mir neue seiten innerhalb 2-4 tagen aufgenommen.

das war vor ein paar wochen noch ganz anders.

kann das also nicht bestätigen.

neue seiten werden bei mir komplett und sehr oft gekrault.

keine deeplinks von extern.

mfg maus

germanien2006-10-05 18:29:18

Profil

Beitrag #7 		Der Unterschied liegt vielleicht in der größe der Seite.

Das werden Maßnahmen sein,
die getroffen wurden, nachdem der "Milliarden Seiten Mann" aufgeflogen ist.

Mit Big Daddy hatte Google ja ein Scheunentor aufgemacht, das dieser wohl direkt genutzt hat.

Dem soll wohl folgendes entgegenwirken:

Zeit
Die Abstände der Botsbesuche sind größer, bei allen Arten von Seiten.
Eine alte statische Seite muß da schonmal 6 Wochen warten, bis der bot wieder vorbeischaut.

Crawler
Der Crawler geht nicht mehr so schnell in die Tiefe, dort scheint ein Zeitfaktor eingebaut worden zu sein.
Früher war da nur der PR-Faktor.
Vorher haben die aber mal eben reichlich Seiten, die bei Big Daddy schnell eingekommen waren, rausgeworfen.
Nun darf man da eben reichlich warten.

So ein Zeitfaktor gibt es bei Yahoo schon von Anfang an, dort kann man machen was man will, es dauert reichlich lange.

Beide Maßnahmen machen es "Spammern" schwerer ihre hohe Zahl von Seiten schnell in den Index zu bekommen.

Aber auch beim "Linktausch" muß man nun länger warten bis der Link gefunden wird und somit seine Wirkung entfalten kann.
Insbesondere macht es den Linktausch ein wenig unkalkulierbarer.
Hat man früher damit rechnen müssen das alle Links, die man innerhalb einer Woche gesammelt hat, auf ein Schlag gefunden werden, so kann dieses heute für einen größeren Zeitraum passieren.

Das Sandbox-System läßt schön grüßen...

germanien2006-10-07 15:21:21

Profil

Beitrag #8 		Nun darf ich ja bei Suchmaschinenoptimierung Spezialist mitspielen,
aber noch ganz bescheiden auf Pos.41

Seltsam ist, heute das erstemal im Cache zu finden, jedoch mir einem Cache Datum vom 29. September.

Also gut eine Woche von der Erfassung bis zur Aufnahme.

Ob das die Regel wird?

Bei einer anderen Seite sehe ich sogar Stand vom 26. Sept. 2006 und erst heute zu sehen...

[Dieser Beitrag wurde von <b>Werner</b> geändert: 07.10.2006 15:22]

germanien2006-10-17 13:57:04

Profil

Beitrag #9 		Oh, ich hab gerade festgestellt
(Papiergeld fällt langsamer)
das Google damit die Spammer nicht "blocken" bzw. ihr gespamme erschweren will,
sondern das Google gerade diesen Spammer einen Vorteil verschaffen will,
oder so ähnlich...

Dabei sind diese Spammer doch sehr schnell und einfach zu finden.
z.B.:
Suche nach Domain mit über (z.B.) 1.000 Subdomains und zeige/melde sie.
Da schaut mal einer kurz drauf und schon sind die richtigen gekillt...

Das könnte man sogar automatisch über AdSense laufen lassen ;)

huhuhu2006-10-17 15:34:46

Profil

Beitrag #10 		>> Lol ein interessanter Weg Menschen bei G00gle zu finden :-))

Immer alles Gute

huhuhu

germanien2006-10-18 00:56:19

Profil

Beitrag #11 		Seit einiger Zeit sind ja immer mehr Spammer unterwegs die für jede einzelne Seite ein eigene SubDomain erstellen.

Der Vorteil ist ganz klar, der bot braucht nicht in die Tiefe und man bekommt so seine Seiten erheblich schneller in den Index.
Man raucht sich also nicht darum zu kümmern das der bot in die Tiefe geht um eine hohe Zahl von Seiten zu schlucken.

Nun sieht s so aus, als wenn Google von der Erkennung des ersten Backlinks, bis zur Aufnahme der Indexseite, eine Zeitsperre von ca. 14 Tage eingebaut hat.
Dann dauert es natürlich noch,
bis der bot *Anfängt* in die Tiefe zu gehen.

Irgendwie sieht das so aus,
als wenn man damit den Spammern das Leben ein wenig schwerer machen will.

*Aber genau das Gegenteil ist damit der Fall!*

Es wird damit dem "Normalen" das Leben erschwert und der Spammer bekommt schneller einen "Vorsprung".

Man braucht dazu einfach nur eine kleine Rechnung "aufzumachen"...

Sagen wir mal, auf jeder SubDomain werden 10 Links zu *neuen SubDomains* gesetzt, dann sieht das so aus...
(immer plus 14 Tage)
14 Tage=1x1=1
14 Tage=1x10=10
14 Tage=10x10=100
14 Tage=10x100=1.000
14 Tage=10x1.000=10.000
14 Tage=10x10.000=100.000
14 Tage=10x100.000=*Eine Millionen*

Man hat so also in knapp 100 Tagen *eine Millionen* Seiten in den Index gepumt, trotz einer jeweiligen Zeitsperre von 14 Tage.

Die Zeitsperre ist somit also vollkommen untauglich um Spammer zu "bekämpfen", sie behindert jedoch "Normale"...



huhuhu2006-10-18 08:23:07

Profil

Beitrag #12 		Die SubCluster hat G00gle schon vor 1-2 Jahren erfolgreich bekämpft, dieses Konzept hat meiner Meinung nach nur sehr kurzzeitigen Erfolg.
Und das Problem ist nachher wieder aus der Nummer rauszukommen (DC etc.) und ich kenne mich da wirklich gut aus.

Ich habe den Eindruck dass neue Seiten wenn Sie dann endlich mal erscheinen gleich am richtigen Platz sitzen.
Also das langsame Steigen, oder Newsbonus langsames fallen nicht mehr ist.

Weiterhin glaube ich das G00gleTrend eine Rolle spielen könnte.
Hat das jemand mal beobachtet.

Schneller im Index = TrendThemaSeite
7-14 Tage = NORMAL

Das DeepCrawl-Verhalten ist eine Katastrophe.
ABER wirklich GROSSE, 'echte' Seiten und hier meine ich schon Seiten > 1000 oder 10.000 Seiten gibt es doch recht wenig ;-))

Immer alles Gute

huhuhu






Caschi2006-10-18 21:34:12

Profil

Beitrag #13 		kann das auch sein das die tante google bei der aktion mal wieder paar tausend seiten einer domain fallen läst die erst seit 1-2 wochen drinne waren :/

germanien2006-10-18 22:35:53

Profil

Beitrag #14 		> kann das auch sein

Wird hier und da berichtet...

Caschi2006-10-19 08:10:14

Profil

Beitrag #15 		die gehen mir echt auf den sack mal wieder. heute der stand noch 6000. die kicken gerade mal schön alle unterseiten meiner subs :(
Beiträge 1 bis 15 von 18 angezeigt.    >>>
Seiten: 1 2
Zum Thema antworten



Um einen Beitrag zu verfassen oder um auf ein Thema zu Antworten muss man eingelogged sein.

Hier gehts zur Anmeldung: Anmelden

Passwort vergessen?
Benutzerhinweise
Benutzerhinweise:
Keine URLs posten, um darüber zu diskutieren! Keine Moral-Debatten über Spamming!
Die Forenregeln im Detail.
URLs einfügen[url=http://www.domain.de]Zur Domain.de[/url]
vorformatierter Text[pre]besonders für Programmcode geeignet[/pre]
Zitat[quote]Ein Zitat.[/quote]
HTML-Code wird umgewandelt in normalen Text. D.h. die Tags werden nicht interpretiert, sondern als Text dargestellt.

Impressum