Im offiziellen Google Blog wird das etwa so erklärt: Da der User ja nicht live im Web sondern auf dem Index von Google sucht, ist es höchste  Zeit gewesen, das bisherige System zu renovieren. Die Datenmenge wächst schließlich ebenso wie die Vorkommen von Videos, Bildern, News, Tweets u.s.w. Eine Webseite heute ist viel multimedialer und komplexer als je zuvor. Um dieser Situation (und den gestiegenen Nutzer-Erwartungen) Herr zu  werden, wurde Caffeine gebaut.

Auf dem Bild oben hat Google versucht, den Unterschied darzustellen: Der  alte Index hatte verschiedene Schichte (Layer) mit unterschiedlicher Aktualität. Um einen der Layer zu aktualisieren, musste zunächst das Web abgesucht und die neuen Seiten eingebaut werden. Das konnte auch schon mal ein paar Wochen dauern.

Das geht natürlich in Zeiten von Twitter nicht mehr. Und tatsächlich: Dieser Beitrag hier wird wenige Sekunden nach dem Tweet dazu bei Google zu finden sein. Das funktioniert nun sehr gut – via Caffeine.

Mit dem neuen System wird das Web in kleinen “Portionen” analysiert und der Index ständig und weltweit angepasst. Wenn Google eine Seite oder eine neue Information auf einer bestehenden Seite findet, kommt das sofort in die Suchergebnisse.

Das heißt, man ist  schneller mit neuen  Seiten enthalten. ABER das heißt auch (jetzt aufgepasst) dass man mit alten, nicht so ganz aktuellen Seiten auch eher von der ersten Ergebnisseite verschwindet. “Freshness matters” also nicht nur für die Benutzer – sondern auch für die Seitenbetreiber. Genauso wird es zunehmend wichtig, die Erwartungshaltung von Google an Webseiten (aktueller, multimedialer) zu erfüllen…

Auf all das ist Google fürchterlich stolz und verweist auf fast 100 Millionen Gigabyte Speicher in einer Datenbank (und, hey, das IST viel). Man bräuchte, so der absurde Verweis, 625.000 iPods um das zu speichern. Diese würden, nebeneinander  gelegt, 40 Meilen lang sein.

Nun, und jetzt sag noch mal jemand, Google liebt nur relevante Informationen

Schneller, größer, toller: Caffeine ist online ist erschienen im Seo Book der CONTENTmanufaktur.

Related posts:

1. Google Caffeine: (k)ein Sommerloch-Thema?
2. Spiegel Online verrät SEO-Tipps für Google News
3. CONTENTmanufaktur auf der SEO Campixx: weißer geht’s nicht

Das Problem ist eigentlich der Scheduler

Jo Müller, der “europäische Matt Cutts”, zeigt auf seinen Präsentationen gerne den komplexen Weg, den eine Seite durch die Google-Server nehmen muss, um gecrawlt zu werden. Ganz am Anfang steht da der “Scheduler”, sozusagen der Vorarbeiter des Robots, der dessen Zeit einteilt. Vermutlich ist die Zeitmenge, die der Robot pro Webseite hat, abhängig von ihrer Autorität (und damit wieder von den Backlinks). Was er aber in dieser Zeit zu sehen bekommt, haben wir selber in der Hand. Und ist diese Zeit abgelaufen, wird der Robot zurück gepfiffen und muss woanders crawlen.

Zeitsparprogramm für den Robot

Ein wichtiges Ziel der Google-Optimierung ist also, dem Robot in möglichst kurzer Zeit möglichst viele relevante Seiten zu zeigen. Und da spielen eine Menge Faktoren eine Rolle:

• Alle Seiten sollten schnell ausgeliefert werden. Hierbei ist es nicht entscheidend, wie groß die Seiten sind – sondern wie schnell der Crawler sie sehen kann.
• Neue und veränderte Seiten müssen ihm zuerst “vorgelegt” werden,
• danach aber auch alle anderen wichtigen Seiten.
• Duplicate Content ist kein Grund für eine Penalty – sondern die Verschwendung von kostbarer Crawler-Zeit.
• Das gilt auch für unnötige Index- bzw. gefilterte Seiten.
• Und auf den eigentlichen Beitragsseiten sollte der Robot möglichst schnell und übersichtlich die zur Einordnung wichtigen Informationen erkennen können.

Das ist eigentlich schon alles

Viel Arbeit für die Crawlability…

Selbstverständlich ist das für Kunden mit mehreren Hundertausend Unterseiten und einem komplexen Content Management System eine gigantische Herausforderung. Das kostet Geld und Zeit. Aber, hey, es muss nun mal sein…

Ich kann und will in diesem Übersichts-Artikel nicht auf die Details eingehen, aber die drei wichtigsten Arbeitsbereiche möchte ich schon kurz darstellen:

1. “Seitengeschwindigkeit” heit auf Englisch “Page Speed” und ich kann jedem nur das gleichnamige Tool von Google sowie “ySlow” von Yahoo empfehlen. Wem das Installieren von Firefox-Erweiterungen zu kompliziert ist, dem empfehle ich “Pagetest” als Einstieg…
2. Duplicate Content & unnötige Index-Seiten findet man am besten mit dem viruosen Einsatz des “site”-Befehls (wobei ich diesen Artikel unbedingt  aktualisieren muss….). Ziel hier sollte es nicht sein, möglichst viele Seiten in den Index zu bekommen – sondern unique und relevante Seiten. Das macht man in der robots.txt, mit Meta-Angaben für den Robot (“noindex” bzw. “noindex,follow”) und/oder mit dem geschickten Einsatz der Google Webmaster Tools.
3. Die Seitenstruktur sollte die Relevanz abdecken. Wichtige und aktuelle Seiten sind möglichst “nahe” der Home – weniger wichtige Seiten aber trotzdem erreichbar. Und wer jetzt sagt, dass er dafür einfach eine Sitemap mit allen Unterseiten an Google liefert, dem empfehle ich, diesen Artikel noch mal oben zu beginnen…
4. Der Code ist nicht nur schlank sondern auch eindeutig. Wer viele Überschriften und kiloweise Text in die Randspalten packt, braucht sich nicht darüber zu wundern dass der Robot den Kontext für wichtiger hält als die eigentliche Information. Am besten präsentieren wir unsere Seiten ohne Javaskript, mit eindeutigen Hinweisen auf den “eigentlichen” Content und gut strukturiert. HTML 5 wird uns da möglicherweise in Zunft helfen.

Das soll es heute mal gewesen sein. Einen Credit will ich noch los werden: Solche Themen wie “Crawlability” sind für Konferenzen meist zu komplex und bringen  nicht so viel Credibility wie irgendwelche Pseudo-Blackhat-SEM-Themen. Deshalb habe ich mich sehr über den Einsatz von Alexander Holl und Boris Bergmann von 121Watt auf dem vergangenen Konferenz-Marathon gefreut!

Erweiterte Crawlability: Don’t waste robot-time! ist erschienen im Seo Book der CONTENTmanufaktur.

Related posts:

1. Nun auch “offziell”: Seitengeschwindigkeit ist Rankingfaktor
2. SEO am Morgen: Google pumpt Seiten

• Stolz ist Google momentan wohl besonders auf Chome, Android und Wave. mmmh.
• In den Suchergebnissen findet Matt Cutts vor allem Google Squared super, ebenso das Wonder Wheel (lt. Cutts ein fantastischer Weg für die Keyword-Recherche. Werde ich wohl mal ausprobieren).
• Außerdem empfiehlt er das Social Profile als zentrales Steuerungselement von Twitter, FriendFeed und Blogs. (Genau DAS sollte uns misstrauisch machen…)
• Für Entwinkler geht es lt. Cutts vor allem um das Beschleunigen von Webseiten. Hier hat Google ja  tatsächlich eine Menge Zeug veröffentlicht. Ich kann nur empfehlen, sich damit zu beschäftigen – nicht nur wegen Google sondern für die User.
• Außerdem stand und steht die Vermeidung von Duplicate (z.B. via canonical-Tag und ID-Ausschluss) ganz oben auf der Google-Agenda.
• Er meinte, dass nicht alle SEOs kriminell sind.
• Ganz selbstbewußt sagt er, dass Google für den Kauf und den Verkauf von Links penalizen kann. mmmmh
• Interessante Frage, zu der er sich noch informieren wollte: Zwei Links auf einer Seite, der eine mit “nofollow” – ist der andere auch “nofollow”? Damit ist das Verhalten von Google gemeint, wenn zwei gleiche Links (z.B. in Navigation und Teaser oder auf Bild und in Text) auf einer Seite sind. Man könnte ja auf die Idee kommen, den vermeintlich schwächeren Bilderlink mit “nofollow” auszuknipsen um den stärkeren Textlink wirken zu lassen. Wir werden auf eine Antwort hierzu achten…

Ach ja, und Caffeine wird nach den Weihnachtsferien erst in den Index wandern. Das ist aber auch nicht neu…

Matt Cutts auf der Pubcon ist erschienen im Seo Book der CONTENTmanufaktur.

Related posts:

1. Matt Cutts macht den 302…
2. SEO am Morgen: Matt Cutts und eine geschärfte Auffassung zur robots.txt
3. SEO am Morgen: archive.org, slurp und ODP nicht sperren

Hier werden alle Keywords – absteigend in ihrer Wichtigkeit für die Webseite – aufgezählt. Das funktioniert für kleine Webseiten extrem gut, für große Webseiten noch ziemlich schlecht. So jedenfalls mein Eindruck. Wie auch immer: Ihr solltet euch das unbedingt anschauen und prüfen, ob diese Liste der Keywords irgendwie mit dem zusammhängt, was ihr auf der Webseite zu machen glaubt. Denn wenn da allzu viele Überraschungen drin sind, solltet ihr euch das genau anschauen.

Aber ihr könnt damit auch prima optimieren. Denn wenn ihr fest stellt, dass ihr für einen dieser Begriffe prima aber nicht optimal gerankt seid, solltet ihr diesen  analysieren, das sieht dann so aus:

Wäre ich jetzt z.B. für “Content” mit der ersten hier aufgezählten Seite auf Platz 11 und würde mir Hoffnungen auf einen besseren Platz machen, muss ich natürlich die Seite selber auf das Keywords zuspitzen. Aber ich brauche natürlich auch kräftig Links darauf. Und da sind internet Links ein prima Anfang.

Ich brauche jetzt wohl kaum sagen, welche meiner Seiten die allerbesten wären, um mit dem Begriff “Content” auf die zu optimierende Seite zu linken. Oder? Nein? Dachte ich mir doch.

Viel Spaß mit dieser netten Keywords-Funktion!

SEO am Morgen: Keywords in den Google Webmaster Tools analysieren ist erschienen im Seo Book der CONTENTmanufaktur.

Related posts:

1. SEO am Morgen: “Shortlist” Google Webmaster Tools
2. “Die häufigsten Suchanfragen” in den Google Webmaster Tools
3. SEO am Morgen: Google-Optimierung mit dem iPhone

Website-Geschwindigkeit IST ein Ranking-Faktor ist erschienen im Seo Book der CONTENTmanufaktur.

Related posts:

1. Nun auch “offziell”: Seitengeschwindigkeit ist Rankingfaktor
2. Google-Tool für Webmaster: Page Speed
3. Zusammenfassung der Ranking Faktoren