Vortrag: Wir haben zum Beispiel im letzten Jahr entdeckt, dass IONOS alle Websites
Vortrag: im Shared-Hosting-Paket erst mal prinzipiell blockiert hat. Also
Vortrag: nicht alle Bots, aber die GPT- und die Claude-Bots. Das waren die AI-Trainer. Das
Vortrag: heißt, auch wenn ich die Optimierung vorangetrieben habe, haben
Vortrag: die vielleicht gar keine Früchte getragen, weil diese Bots komplett blockiert wurden
Vortrag: und ich gar keine Chance hatte, quasi in die Knowledge Base der LLMs reinzukommen.
Vortrag: Wer crawlt eigentlich gerade eure Webseite? Und warum?
Vortrag: Diese Frage klingt nach SEO-Grundlagen, aber die Antwort hat sich in den letzten
Vortrag: Monaten radikal verändert.
Vortrag: Neben dem Google-Bot tauchen in euren Logfiles plötzlich ganz neue Namen auf.
Vortrag: GPT-Bot, Claude-Bot, Perplexity-Bot und weitere.
Vortrag: Manche davon trainieren Sprachmodelle, andere recherchieren in Echtzeit für
Vortrag: KI-Antworten. Und die entscheidende Frage ist: Wisst ihr, welcher eurer
Vortrag: Inhalte diese Bots tatsächlich abholen und was sie damit
Vortrag: machen? Mit KI ändert sich nicht nur die Suche, sondern auch die Anforderungen an das technische
Vortrag: SEO. Die neuen Bot-Typen bieten uns aber gleichzeitig eine
Vortrag: Chance. Wir können ermitteln, welche unserer Inhalte in LLMs tatsächlich genutzt
Vortrag: werden und daraus Rückschlüsse für Content und Prompt-Recherche
Vortrag: ziehen. Meine nächste Speakerin hier beim Spotlight SEO für KI ist Juliane
Vortrag: Bettinger. Sie ist Co-Founderin und Technical SEO Consultant bei der Jenaer SEO-Agentur SEOSOON. Seit
Vortrag: 2018 berät sie vor allem Publisher und Medienhäuser, also genau die Branche, die
Vortrag: von den Veränderungen durch KI-Systeme besonders betroffen ist.
Vortrag: Gemeinsam mit ihrem Team setzt sie SEO- und KI-Strategien nicht nur beratend,
Vortrag: sondern auch operativ um, schult Inhouse-Teams und entwickelt maßgeschneiderte
Vortrag: Dashboards und ist auf tollen Konferenzen wie dieser hier auch als Speakerin dabei.
Vortrag: Ich freue mich sehr, dass du heute hier bist, liebe Juliane.
Vortrag: Hallo Hendrik, vielen lieben Dank für die Anmoderation. Sehr, sehr gerne.
Vortrag: Ja, wir haben ja wie gesagt keine Zeit und der Markus und ich,
Vortrag: wir sammeln im Hintergrund natürlich auch wieder fleißig eure Fragen.
Vortrag: Deshalb Juliane, die Bühne gehört dir. Am Ende gibt es eine kleine Fragerunde
Vortrag: und ja, ich freue mich jetzt auf einen spannenden Vortrag.
Vortrag: Ja, wir sprechen ja momentan aktuell alle sehr viel über Optimierung für AI Search,
Vortrag: also wie wir Mentions und Citations gewinnen können, wie wir vielleicht auch
Vortrag: den Sentiment beeinflussen, aber wir sprechen meines Erachtens viel zu wenig
Vortrag: über die technischen und infrastrukturellen Voraussetzungen.
Vortrag: Wenn ich jetzt mal eine ziemlich abgedroschene Baumetapher heranziehe,
Vortrag: ist es so ein bisschen, als wenn wir uns um den Dachbau kümmern,
Vortrag: um den Innenausbau, aber eigentlich keine Gedanken an die Wände und an das Fundament verschwenden.
Vortrag: Und gerade halt auch in diesem Bereich der Basics, der technischen SEO-Basics,
Vortrag: hat sich halt viel geändert. Die
Vortrag: Rahmenbedingungen haben sich geändert. Denn wir haben aktuell zwei prinzipielle
Vortrag: Herausforderungen, mit denen wir uns auseinandersetzen müssen. Wir
Vortrag: haben zum einen, auf der einen Seite, eine extreme Zunahme an verfügbaren Dokumenten. Und
Vortrag: das ist natürlich getrieben durch den ganzen AI-Content, der produziert
Vortrag: und massenhaft veröffentlicht wird. Und der
Vortrag: Google-CEO hat erst vor ein paar Monaten das schön quantifiziert, hat gesagt,
Vortrag: dass sich die Anzahl der verfügbaren Inhalte in den letzten zwei Jahren um
Vortrag: 45 Prozent erhöht hat. Also
Vortrag: 45 Prozent mehr Inhalte, die Google ja auch irgendwie erst mal verarbeiten
Vortrag: muss. Das heißt, wir haben in diesem Bereich eigentlich eine zunehmende
Vortrag: Wettbewerbssituation, weil sich die Crawl-Kapazitäten nicht wirklich
Vortrag: anpassen. Das heißt, wir müssen uns eigentlich hier die Frage
Vortrag: stellen: Wie kriegen wir eigentlich noch unsere wichtigen und relevanten Inhalte gecrawlt und
Vortrag: indexiert? Und auf der anderen Seite wiederum haben wir einen komplett neuen Typus an
Vortrag: Crawlern, die AI-Bots. Und die fluten quasi unsere Server, also die scrapen unsere
Vortrag: Inhalte im ganz großen Stil. Und hier müssen wir uns eigentlich die Frage stellen:
Vortrag: Wie gehen wir denn mit dieser Flut an Anfragen um,
Vortrag: ohne dass wir im Gegenzug noch wirklich nennenswerten, relevanten Traffic bekommen?
Vortrag: Und diese beiden Entwicklungen machen das Thema Crawling wichtiger als je
Vortrag: zuvor, weil da vielleicht noch mal ein ganz basic Schritt,
Vortrag: den wir uns vor Augen halten sollten:
Vortrag: Wenn wir das Crawling von unseren wichtigen Inhalten nicht sicherstellen können,
Vortrag: dann werden sie nicht indexiert, in der Folge können sie nicht ranken und
Vortrag: damit habe ich halt auch keine Sichtbarkeit in Google, Bing und allen anderen klassischen
Vortrag: Suchindizes. Soweit
Vortrag: ist das, glaube ich, ganz klar, aber jetzt müssen wir uns ja auch noch
Vortrag: einen Schritt weiterdenken. Weil wenn wir das nicht sicherstellen,
Vortrag: dann haben wir aber auch mittlerweile keine Sichtbarkeit oder eine verringerte
Vortrag: Chance auf Sichtbarkeit in LLM-Antworten.
Vortrag: Weil die nutzen in diesem Retrieval-Prozess, im Grounding, die Indexdaten der
Vortrag: klassischen Suchmaschinen. Und wenn
Vortrag: ich dort nicht stattfinde, kann ich auch mit sehr geringer Wahrscheinlichkeit nur in
Vortrag: den LLMs stattfinden. Das heißt:
Vortrag: Crawling ist mittlerweile wichtig für zwei Suchsysteme. Und
Vortrag: das bedeutet halt auch, dass wir uns um unsere technischen SEO-Basics Gedanken machen müssen. Das
Vortrag: sollten wir schon immer eigentlich, aber es wird immer noch wichtiger.
Vortrag: Und das bedeutet: Wir sollten uns um ein gutes URL-Inventar kümmern. Wir
Vortrag: brauchen eine saubere und schnelle Server-Performance und eine gute Website-Struktur. Und
Vortrag: das sind eigentlich Themen, wie gesagt, um die hätten wir uns schon lange
Vortrag: kümmern sollen und um die kümmern wir uns in der Regel auch.
Vortrag: Aber jetzt gibt es noch mal eine neue Anspruchsgruppe, nämlich die
Vortrag: KI-Crawler. Und während wir halt bei den Search-Crawlern mittlerweile diese
Vortrag: Herausforderung haben, dass wir um Crawl-Kapazitäten kämpfen müssen, dass es eine
Vortrag: Wettbewerbssituation ist, haben wir nun bei den AI-Bots oftmals die Situation, dass sie teilweise
Vortrag: mehr crawlen, als uns lieb
Vortrag: ist. Man sieht, sie haben mittlerweile in den letzten zwei Jahren massiv aufgeholt.
Vortrag: Also sie stellen mittlerweile 21 Prozent der gesamten Bot-Aktivitäten dar.
Vortrag: Plus noch mal die ganzen AI Searches. Das ist
Vortrag: halt extrem. Und wir sehen halt auch, wenn wir uns noch mal
Vortrag: andere Charts anschauen, wie exponentiell
Vortrag: das gewachsen ist. Der GPT-Bot zum Beispiel hatte letztes Jahr von einem Monat auf
Vortrag: den anderen die Crawl-Aktivität verdreifacht.
Vortrag: Also das ist höchst volatil und unvorhersehbar, wie diese Crawl-Aktivitäten
Vortrag: der AI-Bots sich gestalten.
Vortrag: Und wenn wir jetzt halt von diesen ganzen verschiedenen AI-Bots sprechen,
Vortrag: ist es noch mal auch sehr wichtig, die zu
Vortrag: klassifizieren. Weil es ist wichtig zu verstehen, wie die funktionieren, was die für einen
Vortrag: Sinn und Zweck haben, damit wir auch wissen, wie wir mit denen umgehen und wie
Vortrag: wir die vielleicht auch sogar für uns nutzen können.
Vortrag: Dafür würde ich die in vier Kategorien packen, die sich nach Zweck ein bisschen unterscheiden.
Vortrag: Die erste Kategorie, das sind die AI-Trainer.
Vortrag: Das ist zum Beispiel ganz klassisch von OpenAI der GPT-Bot.
Vortrag: Und die sind dazu da, die Daten zu scrapen. Und mit diesen Daten werden dann
Vortrag: die entsprechenden Modelle trainiert.
Vortrag: Also das sind die ganz klassischen großen Datensammler zum Trainieren der LLMs.
Vortrag: Die nächste Kategorie, und die sind tatsächlich für die SEOs sehr spannend,
Vortrag: das sind die AI-Assistants.
Vortrag: Und jedes Modell, also OpenAI hat neben dem GPT-Bot zum Beispiel noch den ChatGPT-User-Bot
Vortrag: und andere Modelle halt auch.
Vortrag: Also jeder hat eigentlich neben dem AI-Trainer auch einen AI-Assistant.
Vortrag: Und diese AI-Assistants, das sind nun diese Echtzeitabrufe.
Vortrag: Das heißt, wenn ich in ChatGPT eine Frage stelle und ein Crawling-Prozess ausgelöst wird,
Vortrag: dann Subqueries entstehen und da ein Relevanzset an URLs dazu zur Beantwortung
Vortrag: der Fragen genutzt werden, dann werden diese URLs in dieser Zeit gecrawlt durch diesen AI-Assistant.
Vortrag: Das heißt, wir haben hier wirklich eine 1:1-Relation.
Vortrag: Die dritte Kategorie, das sind die AI-Search-Crawler. Und im Gegensatz zu diesem
Vortrag: Echtzeitabruf sind die eher asynchron
Vortrag: unterwegs. Das heißt, ganz oft kommen die halt auch nach den AI-Assistants und
Vortrag: crawlen noch mal im großen Stil die ganzen verbundenen Ressourcen,
Vortrag: die robots.txt. Also das sind die ganz
Vortrag: großen Datensammler. Und die sind offiziell dafür da, um die Such- und
Vortrag: Indexdaten zu verbessern. Was das ganz genau im Detail heißt, da kann man
Vortrag: jetzt nur aus den Crawl-Mustern ein bisschen
Vortrag: Rückschlüsse ziehen. Also sehr wahrscheinlich sind sie dazu da, um halt auch ein
Vortrag: Caching mit zu unterstützen, einen eigenen
Vortrag: Index mit aufzubauen. Eventuell werden auch im Hintergrund natürlich die Daten für
Vortrag: Trainingszwecke genutzt. Man kann es nicht hundertprozentig sagen. Die Informationen sind hier
Vortrag: tatsächlich relativ dünn. Die vierte Kategorie, und ich glaube, die sind auch in den
Vortrag: letzten Wochen noch sehr viel prominenter geworden, das
Vortrag: sind die AI-Agents. Das haben wir zum Beispiel ganz prominent in ChatGPT
Vortrag: als Operator mit integriert oder halt auch sehr viele eigenständige Agents,
Vortrag: die es mittlerweile gibt. Und wie die AI-Assistants haben die quasi so eine
Vortrag: 1:1-Relation. Auch hier wird durch einen User eine Interaktion getriggert.
Vortrag: Aber das ist wirklich hier kein Abruf, sondern eine Interaktion mit einer Seite.
Vortrag: Und diese vier verschiedenen AI-Bot-Typen, die bringen jetzt nun,
Vortrag: ja, ich würde sagen, geänderte Anforderungen mit sich.
Vortrag: Es sind nicht unbedingt neue, aber wir müssen andere Fragen stellen.
Vortrag: Und wir müssen hier erst mal Grundlagen schaffen, die wir bis jetzt nicht
Vortrag: hatten. Deswegen die Frage: Was ist eigentlich wichtig, wenn wir über
Vortrag: KI-Crawler sprechen und um Basics und um bestmögliche Sichtbarkeit in LLMs
Vortrag: zu gewährleisten? Und die erste, für mich auch wirklich wichtigste Frage, die oft viel
Vortrag: zu kurz kommt, ist: Können denn die KI-Crawler
Vortrag: überhaupt zugreifen? Weil oftmals werden Optimierungsmaßnahmen ergriffen, ohne
Vortrag: zu prüfen, ob es überhaupt strukturelle
Vortrag: Barrieren gibt. Also es gibt viele Optionen über den CDN, Firewall, direkt durch
Vortrag: den Hoster, also alles, was serverseitig irgendwie diese ganzen
Vortrag: Bot-Anfragen blockiert. Und das Problem ist halt, wenn man das
Vortrag: bewusst einrichtet, ist das okay. Aber viele wissen gar nicht, dass es diese
Vortrag: Barrieren gibt, weil sie sich nicht aktiv dafür entschieden
Vortrag: haben. Wir haben zum Beispiel im letzten Jahr entdeckt, dass IONOS alle
Vortrag: Websites im Shared-Hosting-Paket erst mal prinzipiell blockiert hat. Also
Vortrag: nicht alle Bots, aber die GPT- und die Claude-Bots. Das waren die AI-Trainer. Das heißt,
Vortrag: auch wenn ich die Optimierung vorangetrieben habe, haben die
Vortrag: vielleicht gar keine Früchte getragen, weil diese Bots komplett blockiert wurden
Vortrag: und ich gar keine Chance hatte, quasi in die Knowledge Base der LLMs reinzukommen.
Vortrag: Wir haben jetzt ganz frisch auch eine eigene Studie dazu durchgeführt und haben
Vortrag: uns 1.600 Domains angeschaut und mal geguckt: Wie weit verbreitet ist eigentlich dieses Problem?
Vortrag: Und tatsächlich sind es doch 15 Prozent, wo so eine Blockade stattfindet.
Vortrag: Also 15 Prozent aller untersuchten Domains hatten mindestens einen Bot blockiert.
Vortrag: Und wir haben hier wirklich nur die relevantesten Bots genommen,
Vortrag: also die, die für AI-Assistant und AI-Training zuständig
Vortrag: sind. Wenn man dazu noch den Meta-External und den Bytespider nimmt, dann liegen
Vortrag: wir sogar bei fast 30 Prozent. Das ist
Vortrag: schon eine ordentliche Hausnummer. Wenn man sich das dann auch mal anguckt, wie sich
Vortrag: das verteilt nach Website-Größe, sieht man, dass vor allem auch die Kleinen und
Vortrag: sehr Kleinen davon betroffen sind. Meine Vermutung
Vortrag: ist: Das liegt natürlich sehr stark am Hoster. Während die
Vortrag: Großen, gehe ich ganz stark davon aus, eher bewusst blockieren, ist es
Vortrag: bei den Kleinen und Mittleren unbewusst. Das heißt,
Vortrag: hier gilt es halt wirklich, das zu testen, ob ich überhaupt erst mal für
Vortrag: KI-Bots erreichbar bin. Und
Vortrag: das kann ich entweder manuell machen über einen User-Agent-Switcher, da
Vortrag: gibt es ganz viele Optionen. Kann man auch im Screaming Frog theoretisch
Vortrag: machen, aber dann immer nur einzeln pro Bot.
Vortrag: Oder es gibt auch schon verschiedene Tools. Wir haben auch schon für uns einen
Vortrag: kleinen KI-Bot-Checker gebaut, wo wir das halt einfach domainweit checken können.
Vortrag: Die zweite Frage in diesem Bereich „Können die KI-Crawler zugreifen?“
Vortrag: ist jetzt auch relativ neu.
Vortrag: Denn erst vor wenigen Wochen hat Bing die Dokumentation angepasst, oder
Vortrag: es ist jedenfalls erst mal bekannt geworden, dass Bing diesen
Vortrag: Meta-Tag noarchive jetzt anders
Vortrag: interpretiert. Der wird historisch gesehen schon lange von Google nicht mehr genutzt. Der war
Vortrag: ursprünglich dazu da, dass gecachte Versionen nicht in den SERPs angezeigt werden. Bing hat
Vortrag: jetzt einfach gesagt: Okay, wir nehmen jetzt diesen Tag und geben dem noch mal
Vortrag: eine neue Bedeutung. Das
Vortrag: heißt: Wenn du diesen Meta-Robots-Tag noch irgendwo im Quelltext hast, dann
Vortrag: werden diese Inhalte nicht für Copilot und den Bing Chat genutzt und
Vortrag: auch nicht als Trainingsdaten für
Vortrag: Copilot. Das heißt, auch das sollte man einfach noch mal prüfen. Gerade im Publishing-Bereich
Vortrag: wurde das historisch doch gerne genutzt. Und
Vortrag: da habe ich es tatsächlich bei mehreren Publishern gefunden. Also
Vortrag: auch das ist ein Thema: Wenn man Sichtbarkeit in Bing-Systemen wie Copilot
Vortrag: haben möchte, sollte man prüfen, ob man noch diesen Meta-Tag irgendwo integriert hat.
Vortrag: Jetzt kommen wir zur zweiten Frage. Jetzt haben wir erst mal Barrieren
Vortrag: abgebaut, also alles, was uns vielleicht nicht wirklich bewusst
Vortrag: war. Und jetzt kommt eher die Frage: Dürfen, sollen denn die KI-Crawler überhaupt
Vortrag: zugreifen? Und da kann ich neben diesen serverseitigen Blockaden auch mit der robots.txt
Vortrag: arbeiten. Also hier kann ich prinzipiell Scraping
Vortrag: verhindern. Und in dem Zusammenhang wird viel zu selten die Frage diskutiert: Wie
Vortrag: gehen wir denn überhaupt mit unseren vielleicht exklusiven Inhalten um
Vortrag: oder mit unseren Inhalten, die momentan schon auf noindex stehen? Das
Vortrag: hat ja bestimmt einen Grund, warum die auf noindex stehen. Und
Vortrag: auch diese Fragen sollte ich mir eigentlich sehr explizit stellen. Wenn ich
Vortrag: dann jetzt aber über die robots.txt nachdenke und die gerne einsetzen möchte,
Vortrag: muss ich mir bewusst sein, dass die robots.txt nicht global funktioniert. Zum
Vortrag: Beispiel Perplexity versteht sie eher als nett gemeinten Hinweis und nicht
Vortrag: als wirkliche Direktive.
Vortrag: Aber auch die AI-Agents halten sich nicht daran.
Vortrag: Und das hat einfach damit zu tun, dass die einen Headless-Browser nutzen
Vortrag: und damit eine ganz normale Browser-Erkennung und da auch nicht die robots.txt noch mal abfragen.
Vortrag: Dessen muss man sich bewusst sein.
Vortrag: Und als letzten Punkt: Wenn ich die robots.txt einsetze, muss ich mir
Vortrag: auch bewusst sein, dass es keine rückwirkende Maßnahme
Vortrag: ist. Das heißt, meine Inhalte sind meistens schon in der Knowledge Base auch zum
Vortrag: Teil enthalten. Das wird damit also nicht entfernt. Und ich bin natürlich auch
Vortrag: durch andere Websites irgendwo verlinkt, erwähnt. Auch
Vortrag: das wird sich damit natürlich nicht auflösen.
Vortrag: Die nächste Frage, die ich auch sehr wichtig finde, ist das
Vortrag: Thema: Wie reagiert mein Server? Wie performt
Vortrag: mein Server? Wir müssen uns ja mal vorstellen: Wir haben jetzt eigentlich
Vortrag: neben diesen ganz normalen User-Hits und den ganzen Search-Bots
Vortrag: und allen anderen Bot-Typen, die es da schon gab, noch mal so eine riesengroße neue Gruppe
Vortrag: an Crawlern, die auch massiv crawlen. Und das belastet die
Vortrag: Server. Deswegen reagieren die Hoster auch teilweise so, dass sie einzelne Bot-Typen blockieren.
Vortrag: Und wir müssen das wirklich im Blick behalten. Wir müssen stabile Serverantworten
Vortrag: sicherstellen und es muss vor allem Spielraum da sein. Denn die
Vortrag: AI-Bots crawlen teilweise sehr volatil. Das heißt, ich brauche hier
Vortrag: auch ein bisschen Kapazitäten nach oben. Ich habe es in den
Vortrag: letzten Monaten wirklich mehrfach erlebt, dass Server immense Probleme
Vortrag: hatten, teilweise Downtimes hatten. Und hier gilt es, Time to
Vortrag: First Byte zu monitoren, die Page Performance im Blick zu haben. Ich habe jetzt
Vortrag: hier mal einen Screenshot von der Google Search Console, von den
Vortrag: Crawling-Statistiken. Das ist
Vortrag: für eine Trendentwicklung ganz spannend, aber nicht für ein kurzfristiges Monitoring,
Vortrag: weil die einen dreitägigen Verzug haben. Bis dahin hat das jeder
Vortrag: selber gemerkt, dass er Probleme mit dem Server hat. Aber
Vortrag: für eine Trendentwicklung auf jeden Fall super spannend.
Vortrag: Die nächste Frage, die ich mir stellen sollte in Richtung
Vortrag: „Können LLMs meine Inhalte lesen?“, ist: Wie ist denn mein ganzer Quelltext aufgebaut? Und ich
Vortrag: denke, viele haben das mittlerweile schon gehört, dass AI-Bots nicht rendern.
Vortrag: Sie führen JavaScript nicht aus. Das
Vortrag: heißt, alles, was irgendwie über JavaScript nachgeladen wird, ist nicht sichtbar.
Vortrag: Wenn ich etwas habe, was ich verstecken will, kann ich es schön in JavaScript
Vortrag: packen. Das ist wahrscheinlich super. Aber ansonsten gilt: Alles, was
Vortrag: relevant ist, sollte im initialen HTML sein.
Vortrag: Dann bilderlastige Seiten oder Seiten mit viel Video- und
Vortrag: Audiocontent. Auch das hat Nachteile.
Vortrag: KI-Bots können die verarbeiten, aber wenn wir an das Grounding denken,
Vortrag: dann werden Text-HTMLs bevorzugt. Da werden
Vortrag: keine Video- und Audio-Inhalte für das Grounding verarbeitet. Das heißt,
Vortrag: auch dahingehend müssen wir prüfen, wie wir diese Inhalte vielleicht in unseren
Vortrag: Content-Bereich bekommen. Und in dem Zusammenhang finde
Vortrag: ich auch strukturierte Daten auf jeden Fall immer noch sinnvoll und hilfreich.
Vortrag: Ich weiß, das wird viel diskutiert. Sind strukturierte Daten in
Vortrag: Richtung LLMs relevant? Haben die einen
Vortrag: Impact? Können die gelesen werden? Aber unabhängig davon:
Vortrag: Wir brauchen sie trotzdem auch für das klassische SEO, für die
Vortrag: AIOs, für den KI-Modus von Google. Und gerade für erklärungswürdige Inhalte, wie
Vortrag: es zum Beispiel Videos und Audios sind,
Vortrag: die für Crawler doch schwerer zu verarbeiten sind, ist es auf jeden Fall
Vortrag: hilfreich, hier über strukturierte Daten Semantik anzureichern.
Vortrag: Und zu guter Letzt, Stichwort Semantik: Auch unser ganzer Code sollte semantisch
Vortrag: gut aufbereitet sein. Weil wir sprechen hier von Large Language Models.
Vortrag: Das heißt, die können mit Sprache sehr gut umgehen, also sollten wir
Vortrag: ihnen auch Sprache geben –
Vortrag: auch in unserem Code. Das heißt, sie sollten Absätze gut erkennen
Vortrag: können. Sie sollten zum
Vortrag: Beispiel, wenn ich eine Tabelle habe, diese nicht in einen Div-Container packen und
Vortrag: mit CSS stylen, sondern das Tag table verwenden. Das hilft den LLMs.
Vortrag: Das ist sehr basic, aber auch
Vortrag: das ist ein Schritt dahin. Wenn wir all diese Ebenen jetzt mal zusammennehmen,
Vortrag: dann ist das für mich so das Framework, womit man gute Basics
Vortrag: für KI und für SEO schafft. Die unteren Ebenen, also
Vortrag: die Crawling- und Zugriffssteuerung
Vortrag: und die Serverkapazitäten, hatten wir gerade besprochen. Die orange Ebene ist nun alles
Vortrag: das, was wir eigentlich im klassischen SEO machen. Also hier
Vortrag: müssen wir das Crawling sicherstellen durch eine gute URL-Struktur
Vortrag: und durch ein gutes URL-Inventar. Denn wir
Vortrag: müssen uns vorstellen: Wenn wir Millionen dynamischer Parameter haben, eine schlechte
Vortrag: interne Verlinkung, wo schon die normalen
Vortrag: Search-Crawler nicht gut durchkommen, dann werden die AI-Bots sicherlich auch scheitern. Auch das ist
Vortrag: noch ein Punkt, den wir
Vortrag: in dem Zusammenhang mit Basics diskutieren und im Blick behalten müssen.
Vortrag: Und wenn wir diese ganzen Ebenen sichergestellt haben, dann haben wir
Vortrag: eigentlich erst mal ein gutes Setup geschaffen. Dann sind wir so weit, dass wir sagen: Okay, wir haben jetzt erst mal
Vortrag: die Basics erfüllt. Jetzt können wir in Optimierungsmaßnahmen investieren und weiterdenken.
Vortrag: Und das tun wir jetzt nämlich auch. Denn wir können auch im Bereich
Vortrag: des technischen SEOs schon gewisse Inputs liefern und Monitoring aufzeigen,
Vortrag: wie LLMs unsere
Vortrag: Seite sehen und verstehen. Und das können
Vortrag: wir wunderbar über Logfiles tun. Logfiles sind Protokolldateien, die jeden
Vortrag: Request an diesem Webserver protokollieren. Und wir müssen uns vorstellen: Logfiles sind
Vortrag: quasi unsere Analytics für Crawler. Wir können damit
Vortrag: großartige Analysen machen. Wir haben hier bestimmte Informationen und können
Vortrag: zum Beispiel herausfinden: Welche KI-Bots dominieren bei mir auf der Domain
Vortrag: das Crawling? Welche URLs rufen die KI-Bots auf? Wie schnell wird eine
Vortrag: komplett neue URL durch welchen KI-Bot gefunden? Also
Vortrag: wir können damit ziemlich viele großartige Analysen machen.
Vortrag: Und für alle, die vielleicht noch nicht mit Serverlogs gearbeitet haben,
Vortrag: noch keine Logfile-Analyse gemacht haben, fragen sich jetzt
Vortrag: vielleicht: Okay, wo finde ich denn eigentlich
Vortrag: meine Serverlogs? Das ist wiederum ein bisschen abhängig davon, auf welcher Umgebung eure
Vortrag: Seite läuft. Ich würde mal sagen, der Klassiker für eine mittelgroße Seite
Vortrag: ist vielleicht ein Managed Hoster, eventuell noch in Kombination mit einem
Vortrag: CDN. Und je größer die Website-Strukturen werden, umso eher
Vortrag: ist es wahrscheinlich eine Cloud-Lösung oder
Vortrag: eine eigene Server-Konfiguration. Aber eigentlich egal, welche dieser Optionen
Vortrag: ihr vorfindet: Ihr solltet in der Regel immer die
Vortrag: Möglichkeit haben, die Logs zu
Vortrag: exportieren oder zu transferieren. Also theoretisch gibt es immer die
Vortrag: Option, auf die Serverlogs zuzugreifen. Und wenn ihr damit arbeiten wollt, dann kann
Vortrag: ich euch nur empfehlen: Sprecht mit dem Server-Admin oder
Vortrag: dem technischen Betrieb, wie das bei euch heißt, und sagt, dass ihr diese
Vortrag: Logfiles für KI-Analysen braucht. Denn damit könnt ihr eure Sichtbarkeit
Vortrag: in Large Language Models
Vortrag: sichtbar machen. Und mit diesem Argument bekommt man die Serverlogs
Vortrag: mittlerweile auch. In der Vergangenheit war es erfahrungsgemäß
Vortrag: immer relativ schwer, daran zu kommen. Da waren Themen
Vortrag: wie Datenschutz oder der Aufwand oft ein Hindernis. Aber mit
Vortrag: dem Thema KI-Analyse bekomme ich die mittlerweile in zwei bis drei Tagen.
Vortrag: So, wie sieht denn jetzt so ein Logfile-Eintrag
Vortrag: überhaupt aus? Das ist jetzt auf den ersten Blick vielleicht
Vortrag: ein bisschen kryptisch, aber wir brauchen davon gar nicht viel. Insgesamt ist
Vortrag: es auch relativ leicht zu verstehen. Wir haben
Vortrag: eigentlich vier Komponenten, die wir daraus insbesondere brauchen. Einmal den
Vortrag: Zeitstempel. Der sagt
Vortrag: uns ganz genau: Wann wurde überhaupt gecrawlt? Dann haben wir den
Vortrag: URL-Pfad. Der sagt uns: Was wurde überhaupt gecrawlt? Dann
Vortrag: gibt es noch den Status-Code. Der sagt
Vortrag: wiederum: Wie hat unser Server auf diesen Request reagiert? Und
Vortrag: zu guter Letzt haben wir
Vortrag: noch den User-Agent-String. Das ist immer das, was
Vortrag: am kryptischsten aussieht. Er sagt uns aber: Wer hat denn hier überhaupt
Vortrag: gecrawlt? Und das ist jetzt das
Vortrag: Spannende. Denn wir erinnern uns noch einmal an unsere vier
Vortrag: AI-Bot-Typen. Die können wir
Vortrag: anhand des User-Agent-Strings identifizieren. Mit einer Ausnahme: Die AI-Agents benutzen eine normale
Vortrag: Browser-Kennung. Damit sind sie in den Logfiles
Vortrag: nicht ohne Weiteres zu identifizieren. Deswegen: Wenn ihr Logfile-Analysen
Vortrag: macht und Sichtbarkeit analysieren wollt, dann konzentriert
Vortrag: euch auf die AI-Trainer und die
Vortrag: AI-Assistants. Denn die haben einfach den höchsten Informationsgehalt.
Vortrag: Das hat wiederum mit den Antwortprozessen der LLMs zu tun. Man kann
Vortrag: ganz grob sagen, dass es einen Bereich gibt, in dem Grounding ausgelöst
Vortrag: wird, also eine Websuche im Hintergrund. Und dann
Vortrag: gibt es wiederum Fragen, die kein Grounding auslösen. Die Fragen, die Grounding
Vortrag: auslösen, sind meistens sehr
Vortrag: zeitkritische oder sehr aktuelle Informationen. Fragen nach Produkten, Preisen – all das
Vortrag: löst in der Regel eine Websuche aus. Dagegen: Wenn
Vortrag: ich eher kreative Aufgaben stelle, Mathematik, Code-Geschichten oder sehr
Vortrag: stabile Wissensfragen – das hatten wir vorhin auch schon mal
Vortrag: –, dann wird in der Regel kein Grounding ausgeführt.
Vortrag: Und wenn wir uns das jetzt mal gegenüberstellen, dann ist das schon
Vortrag: eigentlich sehr wichtig. Denn die Fragen, bei denen Grounding ausgeführt
Vortrag: wird, sind für uns wahrscheinlich eher conversionrelevant.
Vortrag: Das sind die Sachen, in die wir auch
Vortrag: reinwollen. Und wenn wir diese Unterscheidung der Antwort-Typen jetzt auf
Vortrag: unsere AI-Bots übertragen, dann sehen wir schon, dass es hier
Vortrag: einen Unterschied zwischen
Vortrag: diesen Antwortprozessen gibt. Allein schon beim Crawl-Zeitpunkt. Im Grounding
Vortrag: findet das Crawling nämlich im Antwortprozess statt. Also:
Vortrag: Jemand stellt eine Frage, es wird eine Websuche ausgelöst, ein
Vortrag: Relevanzset wird gebildet aufgrund der Subqueries, dieses Relevanzset wird
Vortrag: gecrawlt und
Vortrag: dann wird auf Basis dieser Inhalte eine Antwort generiert.
Vortrag: Bei dem anderen Prozess, bei dem die Knowledge
Vortrag: Base zum Tragen kommt, also kein Grounding stattfindet, ist
Vortrag: das Crawling bereits vorgelagert. Das sind unsere zwei unterschiedlichen Bot-Typen, nämlich die
Vortrag: AI-Assistants und die AI-Trainer. Und besonders spannend ist der
Vortrag: Prozess im Grounding. Denn wir können anhand der AI-Assistants
Vortrag: Rückschlüsse auf Nutzeranfragen ziehen. Wir können anhand der AI-Assistants
Vortrag: eigentlich wahres Nutzerinteresse identifizieren und damit eine Art Reverse-Prompt-Recherche machen.
Vortrag: Ich habe meinen Prozess mitgebracht und ein
Vortrag: paar Beispiele, wie
Vortrag: das aussehen kann. Als Allererstes würde ich
Vortrag: in dieser Identifikation
Vortrag: des Nutzerinteresses die einzelnen Bot-Hits analysieren. Und das am besten je
Vortrag: nach Modell, weil es hier Unterschiede gibt. Man schaut
Vortrag: sich also erst mal
Vortrag: ganz stupide an: Wie viele Hits hat welche Seite durch
Vortrag: welchen Bot? Das allein
Vortrag: ist schon interessant. Aber noch spannender wird es,
Vortrag: wenn man die Daten aggregiert.
Vortrag: Also nach Verzeichnis, Produktgruppen oder Themen. Dann
Vortrag: sieht man schon: Welche Themenschwerpunkte sind denn am meisten
Vortrag: gefragt? Und daraus kann man natürlich
Vortrag: ableiten, wo man später vielleicht mehr investieren möchte –
Vortrag: in Richtung weiterer GEO-Maßnahmen.
Vortrag: Wenn ich mich jetzt diesem Punkt Reverse-Prompt-Engineering nähern will,
Vortrag: würde ich mich jetzt halt durch die einzelnen URLs
Vortrag: auch durcharbeiten. Das heißt, man kann hier sehr gut die Kombination mit den GSC-Daten nehmen.
Vortrag: Man schaut sich die einzelnen URLs an und guckt dann zu
Vortrag: diesen URLs: Was habe ich denn hier gerade im Long-Tail-Bereich in
Vortrag: den GSC-Daten? Habe ich hier Fragen, die mir auffällig sind? Das ist schon
Vortrag: mal der erste Indikator. Das könnten aggregierte Daten sein, die auch
Vortrag: so in einem längeren Prompt, in einem individuellen Prompt natürlich,
Vortrag: in den LLMs gestellt werden. Und neben diesem Zugang über die GSC
Vortrag: würde ich immer noch
Vortrag: parallel mit einem KI-Agenten arbeiten. Das heißt, diese Top-URLs
Vortrag: dann einem KI-Agenten übergeben, Themen und Entitäten extrahieren lassen
Vortrag: und durch den KI-Agenten mögliche Fragen entwickeln lassen. Und
Vortrag: das am besten schon entlang der Customer Journey
Vortrag: und des Such-Intents. Sodass ich diese
Vortrag: ganzen Fragen, die eher diese informationellen Bereiche abdecken, schon mal außen vor lasse
Vortrag: und wirklich meine wichtigsten Fragestellungen herausziehe, die weiter unten im
Vortrag: Funnel liegen. Und mit diesen Fragen kann ich dann sehr gezielt ein
Vortrag: Tracking beziehungsweise Monitoring
Vortrag: aufsetzen. Denn ich kann es anhand des wahren Nutzerinteresses ableiten.
Vortrag: Ich muss mir nicht überlegen, was mögliche Fragen sein könnten,
Vortrag: die irgendjemand gestellt hat, sondern ich habe bereits klare Hinweise, an denen
Vortrag: ich mich abarbeiten kann.
Vortrag: Aber wir können mit Logfiles sogar noch mehr machen, außer dieses Nutzerinteresse zu
Vortrag: identifizieren. Wir können auch schon etwas über unsere eigene
Vortrag: AI-Performance sagen. Und da lohnt es sich auf jeden Fall, die Serverlogs noch
Vortrag: mit weiteren Datenquellen anzureichern. Also GA4, GSC. Und
Vortrag: daraus können wir dann sehr viele interessante Schlüsse ziehen. Ich mache im
Vortrag: ersten Schritt immer so eine Art Quantifizierung. Das heißt, ich schaue
Vortrag: mir erst mal ganz simpel an: Wie viele URLs werden denn überhaupt von einem
Vortrag: AI-Assistant genutzt? Also: Wie
Vortrag: viele meiner URLs werden überhaupt schon im Grounding genutzt? Und
Vortrag: das stelle ich den GSC-Daten gegenüber. Also: Wie viele URLs habe ich dort
Vortrag: mit einer Impression? Dann habe ich schon eine Art AI-Score. Hier in dem
Vortrag: Fall sind es 79 Prozent. Das ist tatsächlich schon relativ viel. Oftmals sehe
Vortrag: ich Anteile von 50 bis 60 Prozent. Da hat man natürlich noch sehr viel
Vortrag: Raum für Entwicklung und Optimierung.
Vortrag: Neben dieser Quantifizierung ist auch eine Qualifizierung spannend.
Vortrag: Also wirklich zu gucken: Führen diese Hits denn auch wirklich
Vortrag: zu Klicks? Das könnte ich jetzt auch schon
Vortrag: anhand der Serverlogs machen. Dafür bräuchte ich theoretisch die
Vortrag: GA4-Daten nicht. Spannend ist aber zusätzlich, Conversions mit dazuzunehmen. Also nicht
Vortrag: nur die Klicks, die auf meine Seite kommen, sondern
Vortrag: auch: Hat der Klick
Vortrag: konvertiert? Man kann die Daten unglaublich stark anreichern und sehr viele
Vortrag: Erkenntnisse daraus ziehen.
Vortrag: Ein Ansatz ist zum Beispiel zu schauen, ob ich sogenannte
Vortrag: Hidden Champions habe. Also URLs,
Vortrag: die für das Grounding genutzt werden, in einem relativ geringen
Vortrag: Ausmaß, aber einen übermäßigen Anteil
Vortrag: an Klicks bringen. Und die ich in den normalen Search-Daten
Vortrag: der GSC möglicherweise gar nicht finden würde,
Vortrag: weil sie dort nur wenige Klicks bringen. Aber sie scheinen besonders relevant
Vortrag: in LLMs zu sein.
Vortrag: Daneben ist auch hier eine Aggregation wieder spannend. Ihr seht
Vortrag: hier fast 50 Prozent für den Bereich Gesundheit und Ernährung. Ich hatte
Vortrag: eben eine Grafik, bei der Gesundheit und Ernährung 25 Prozent hatte, also die reinen
Vortrag: Hits. Das heißt: Von den reinen Hits zu den URLs, die auch einen
Vortrag: Klick bekommen, haben wir hier einen großen Sprung.
Vortrag: Diese Inhalte performen also
Vortrag: überdurchschnittlich gut. Gesundheit und Ernährung scheint hier richtig gut
Vortrag: zu funktionieren. Da sollte ich schauen, ob ich die Erfolgsrezepte dieser
Vortrag: Seiten übertragen kann. Ob ich diese Seiten für Conversion weiter
Vortrag: optimiere, interne Verlinkungen ausbaue.
Vortrag: Es gibt viele Ideen, wie man mit diesen Daten weiterarbeiten kann.
Vortrag: Und dann ist natürlich auch die Frage: Welche Inhalte werden denn
Vortrag: nicht genutzt oder führen zu keinen Klicks? Denn auch das kann
Vortrag: spannend sein. Man kann daraus ableiten, wo man
Vortrag: vielleicht in Zukunft weniger investieren sollte. Man sieht hier,
Vortrag: dass teilweise unter den Top-URLs mit den Top-Hits im Grounding
Vortrag: einige dabei sind, die
Vortrag: gar keine Klicks bekommen. Wenn man sich das ansieht, dann sind das
Vortrag: oft diese rein informationellen Inhalte. Dort lohnt es sich
Vortrag: wahrscheinlich weniger, weiter zu investieren. Auch das sind mögliche Schlussfolgerungen.
Vortrag: Der dritte Bereich, über den wir durch die Logfiles Aufschluss
Vortrag: bekommen können, ist die
Vortrag: Knowledge-Phase. Also: Was ist eigentlich schon von meinen Inhalten in
Vortrag: den internen
Vortrag: KI-Wissenssystemen abgelegt? Das geht, indem ich mir die Klicks anschaue, die
Vortrag: ich aus diesen einzelnen Systemen bekomme, und gleichzeitig
Vortrag: prüfe, ob ich in den Serverlogs einen AI-Assistant-Eintrag dazu
Vortrag: finde. Wenn ich den nicht finde, bedeutet das im
Vortrag: Umkehrschluss, dass meine Inhalte bereits im Foundation Model
Vortrag: vorhanden sein müssen. Und man
Vortrag: sieht das eigentlich sehr gut. Das sind meistens Informationen
Vortrag: wie Checkout, Account-Bereiche, Kontaktdaten zu Unternehmen oder Informationen über
Vortrag: Unternehmen. Also Dinge, die nicht so volatil sind.
Vortrag: Ich habe hier mal ein schönes Beispiel gehabt, das uns wirklich
Vortrag: ein bisschen die
Vortrag: Augen geöffnet hat. Wir hatten die Daten aggregiert und gesehen,
Vortrag: dass der Anteil bei den Artists bei 26 Prozent lag. Also
Vortrag: beim GPT-Bot waren 26 Prozent aller Hits auf Artists verteilt. Und
Vortrag: wir haben daneben noch die AI-Assistants gelegt, also die
Vortrag: URLs, die im Grounding
Vortrag: genutzt werden. Dort machten die Artists nur zwei Prozent aus.
Vortrag: Das heißt: Sie werden unterdurchschnittlich oft in Grounding-Suchen genutzt.
Vortrag: Was wiederum
Vortrag: bedeutet: Wahrscheinlich werden diese Inhalte direkt aus der
Vortrag: internen Knowledge Base beantwortet. Was auch Sinn
Vortrag: macht, wenn man sich Artists vorstellt. Das sind nicht unbedingt brandaktuelle
Vortrag: Informationen – außer wenn es um Konzerte geht.
Vortrag: Das heißt auch hier: Eigentlich sollten wir darauf nicht noch
Vortrag: zusätzliche GEO-Maßnahmen setzen.
Vortrag: Zu guter Letzt kann ich mit den Serverlogs auch
Vortrag: die Erreichbarkeit analysieren. Also:
Vortrag: Wie bin ich überhaupt für alle AI-Bots erreichbar?
Vortrag: Indem ich einfach schaue: Finde ich überhaupt alle wesentlichen AI-Bots
Vortrag: in meinen Serverlogs? Und natürlich prüfe ich auch, ob sie alle
Vortrag: einen Statuscode 200 bekommen. Auch die Verteilung ist teilweise schon spannend. Ich
Vortrag: sehe in mehreren Projekten, dass der AI-Assistant von OpenAI, also der
Vortrag: ChatGPT-User-Bot, mittlerweile schon den zweitgrößten Anteil ausmacht.
Vortrag: Noch vor Bing. Das ist der Wahnsinn.
Vortrag: Der ChatGPT-User-Bot crawlt häufiger die Seite als
Vortrag: Bing. Auch das ist spannend, sich einfach mal anzuschauen.
Vortrag: Zu guter Letzt habe ich noch einen kleinen Vergleich zu den Bing
Vortrag: Webmaster Tools gezogen. Vor ein oder zwei Monaten – es ist noch gar nicht
Vortrag: so lange her – hat uns Bing einen
Vortrag: neuen Bereich zur Verfügung gestellt. AI Performance heißt der.
Vortrag: Hier finden wir aggregierte Grounding-Queries und
Vortrag: Pages, die für das Grounding genutzt wurden. Wir haben
Vortrag: leider keine direkte Querverbindung. Wir wissen also nicht: Welche
Vortrag: Grounding-Query passt zu welcher Page? Man kann es natürlich teilweise
Vortrag: ableiten, aber das fehlt an dieser Stelle.
Vortrag: Ich habe mich gefragt: Wie gut sind diese Daten eigentlich? Vielleicht
Vortrag: ersetzen die ja sogar die Serverlogs. Und wir können uns diese Abkürzung
Vortrag: nehmen. Ich habe zunächst mit unserer eigenen Domain gestartet. Zugegeben, die
Vortrag: ist nicht sehr groß. Aber ich habe dort trotzdem nur eine Page
Vortrag: gefunden. Im Vergleich
Vortrag: dazu habe ich in den Serverlogs 39 URLs gefunden und über
Vortrag: 300 ChatGPT-User-Hits im gleichen Zeitraum.
Vortrag: Jeweils 30 Tage. Und wenn man zusätzlich die GSC-Daten dazulegt, findet man
Vortrag: noch ein paar mehr URLs. Insgesamt scheint unsere Domain aber schon
Vortrag: relativ gut im Grounding genutzt zu werden. Wir
Vortrag: haben eine Durchdringung von 86 Prozent.
Vortrag: Und dann zu guter Letzt auch noch spannend, sich diese Top-URLs im
Vortrag: Vergleich anzuschauen. Also entsprechend die Top-Ten-Logfile-Daten, dann auch die der
Vortrag: GSC und der Bing
Vortrag: Webmaster Tools. Und da kann man ganz abgekürzt sagen:
Vortrag: Es entspricht sich nicht. Es gibt eine Übereinstimmung von circa 50 Prozent, wenn ich
Vortrag: mir verschiedene Datensets anschaue. Und das entspricht auch dem, was wir wissen:
Vortrag: Ein gutes Ranking in Google und Bing korreliert mit
Vortrag: Sichtbarkeit in LLM-Antworten. Aber es ist eben
Vortrag: nur eine Korrelation. In den Logfiles finden wir noch sehr viel mehr
Vortrag: Inhalte und gerade auch solche Hidden Champions. Von
Vortrag: daher lohnt es sich aus meiner Sicht auf jeden Fall, in die Daten zu
Vortrag: schauen. Ich habe das auch noch an einem zweiten Beispiel
Vortrag: durchgespielt. Auch hier habe ich immerhin 14 URLs gefunden. Im Vergleich zu den
Vortrag: Serverlogs habe ich jedoch 113 URLs im Grounding gefunden. Also
Vortrag: unter zehn Prozent dessen, was uns Bing hier zur Verfügung
Vortrag: stellt. Natürlich muss man dabei anmerken: Die Nutzung von Copilot ist
Vortrag: wesentlich geringer als die Nutzung
Vortrag: von ChatGPT. Das heißt, man kann es nicht direkt vergleichen. Aber die
Vortrag: Daten zeigen auch hier, dass wir mit den Logfiles deutlich mehr Erkenntnisse gewinnen können.
Vortrag: Genau, auch das hier noch ein Beispiel. Hier sind es zum Beispiel um die 60
Vortrag: Prozent. Hier besteht noch
Vortrag: erhebliches Potenzial. Kommen wir zum Recap. Was sind jetzt die Takeaways, die ihr hier
Vortrag: mitnehmen könnt? Als Allererstes: Ein gutes Crawl- und Index-Management ist wichtiger
Vortrag: denn je. Die Rahmenbedingungen haben sich verschärft und wir müssen gute Basics
Vortrag: schaffen, damit wir in LLMs sichtbar
Vortrag: sind. Wenn wir das erledigt haben, dann müssen wir uns um diesen neuen
Vortrag: Bot-Typus KI-Crawler kümmern. Denn die haben noch einmal
Vortrag: gewisse andere Ansprüche. Wir müssen Barrieren abbauen und ein optimales Setup
Vortrag: für sie schaffen. Und zu guter Letzt: Wenn wir das
Vortrag: alles erledigt haben und
Vortrag: die Basics geschaffen sind, dann können wir die Crawl-Aktivitäten für uns nutzen. Denn
Vortrag: wir können mit den Logfiles analysieren: Wie sichtbar sind wir aktuell
Vortrag: schon in den einzelnen Large Language Models? Und wo können wir vielleicht
Vortrag: sogar noch Optimierungsmaßnahmen
Vortrag: ableiten? Ja, damit habe ich nur noch zwei kleine Tool-Tipps. Einmal diesen
Vortrag: KI-Bot-Checker, mit dem ihr prüfen könnt, ob ihr irgendwo strukturelle
Vortrag: Barrieren habt. Und wenn ihr selber einmal mit Logfiles arbeiten wollt: Das ist
Vortrag: alles kostenfrei und datenschutzkonform. Könnt ihr gerne ausprobieren. Es
Vortrag: gibt sicherlich auch noch andere Alternativen.
Vortrag: Ja, damit bin ich am Ende. Vielen lieben Dank.
Vortrag: Ja, super. Vielen, vielen Dank dir, liebe Juliane. Es sind auch
Vortrag: tatsächlich einige Fragen
Vortrag: eingetrudelt. Wir haben noch ein bisschen Zeit, Markus. Ich würde sagen, du
Vortrag: kannst einfach mal loslegen
Vortrag: mit deinen Fragen. Ja, hallo auch von mir noch mal.
Vortrag: Danke für den guten Vortrag. Ein paar Fragen sind schon da,
Vortrag: aber wir hätten durchaus noch Platz. Wenn jemand noch etwas auf
Vortrag: dem Herzen hat, ich glaube zwei oder drei gute Fragen
Vortrag: könnten wir noch gebrauchen. Aber ich fange mal an.
Vortrag: KI-Crawler blocken war ein Thema. Aber die Rückfrage von
Vortrag: jemandem: Was für gute Gründe gibt es eigentlich, KI-Crawler zu blocken?
Vortrag: Ja, das ist ein
Vortrag: sehr gutes Thema. Kommt halt darauf an, wie exklusiv meine Inhalte
Vortrag: sind. Zum Beispiel gerade im Publishing-Bereich wird das
Vortrag: sehr stark diskutiert. Denn hier wird natürlich Traffic abgezogen – zumindest in
Vortrag: großen Teilen. Wenn Informationen von anderen Plattformen einfach gescrapt und angeboten werden,
Vortrag: dann hat man da natürlich ein gewisses
Vortrag: Missverhältnis. Ich würde auch eigentlich
Vortrag: erst mal niemandem aktiv empfehlen, Inhalte zu blocken.
Vortrag: Ich würde eher schauen: Habe ich bestimmte exklusive Inhalte?
Vortrag: Deswegen bin ich auch kein Fan von globalem Sperren. Gezielte Sperrungen sind eher das Thema.
Vortrag: Es kommt viel Lob im Chat. Starker Vortrag. Danke dafür noch
Vortrag: mal. Eine interessante Frage, die hätte ich gar nicht
Vortrag: so vorhergesehen, aber ich finde
Vortrag: sie echt gut: Wäre eine an Barrierefreiheit angepasste und
Vortrag: strukturierte Website unterm Strich auch für KI-Systeme besser
Vortrag: les- und verarbeitbar? Ja, definitiv. Das kann man mit einem klaren
Vortrag: Ja beantworten. Absolut. Weil JavaScript zum Beispiel für die ja auch nicht
Vortrag: so gut wäre. Genau. Und auch semantische Tags spielen hier eine
Vortrag: Rolle. Also ja: Eine barrierefreie Seite hilft auch für KI-Systeme.
Vortrag: Logfile-Analyse. Welchen Zeitraum der Logfiles sollte man sich ansehen,
Vortrag: um eine konkrete Aussage treffen zu können? Guter
Vortrag: Punkt. Nehmt, was ihr kriegen könnt, würde ich erst
Vortrag: mal sagen. In der Regel kann man schon mit vier Wochen sehr
Vortrag: gut arbeiten. Ich beschäftige mich schon länger damit und
Vortrag: habe gemerkt, dass sich das in den letzten Monaten noch einmal extrem
Vortrag: verstärkt hat. Wenn man sich im August zum Beispiel Logfiles
Vortrag: angeguckt hat, hat sich die Frequenz gerade von diesen AI-Assistants noch
Vortrag: einmal extrem erhöht. Das heißt, es lohnt sich schon,
Vortrag: immer mal wieder hineinzuschauen. Denn ich glaube, man kann dadurch auch Trendentwicklungen erkennen. Vier
Vortrag: Wochen reichen aber schon aus. Da kann man sehr viel herauslesen.
Vortrag: Diese Logfiles können ja relativ gewaltig groß werden. Die
Vortrag: guckt man sich wahrscheinlich nicht mehr mit einem Texteditor an.
Vortrag: Gibt es Tools für die Auswertung dieser Zugriffe?
Vortrag: Genau, die gibt es. Ich hatte zum Schluss eins gezeigt. Wir haben
Vortrag: für uns eine Lösung mit Fokus auf AI-Bots. Ansonsten
Vortrag: gibt es beispielsweise vom Screaming Frog den Log File
Vortrag: Analyser. Der ist
Vortrag: relativ günstig. Den kann man, glaube ich, für etwa 150 Euro im
Vortrag: Jahr kaufen. Dann gibt es auch größere
Vortrag: Tool-Anbieter wie OnCrawl. Es gibt verschiedene Lösungen. Man braucht tatsächlich
Vortrag: ein Tool dafür. Anders macht das keinen Sinn.
Vortrag: Du hattest auch
Vortrag: Time-to-First-Byte-Monitoring genannt. Also
Vortrag: wie schnell antwortet mein Server eigentlich? Das
Vortrag: kann man sich ja kostenlos in den
Vortrag: Crawling-Statistiken der Search Console anschauen. Aber da
Vortrag: habe ich diesen Zeitverzug. Wie würdest du
Vortrag: das kurzfristig überwachen? Ja, das
Vortrag: ist so ein Thema. Dann brauche
Vortrag: ich wahrscheinlich schon ein aufwendigeres Monitoring.
Vortrag: Entweder direkt ein Server-Monitoring oder andere
Vortrag: Tools, die das überwachen. Du
Vortrag: kannst dir über PageSpeed Insights zum Beispiel
Vortrag: auch den Time to First Byte
Vortrag: ausgeben lassen. Aber dafür müsste
Vortrag: ich täglich hineinschauen.
Vortrag: Das ist schon komplexer. Das sollte
Vortrag: man wahrscheinlich eher in Richtung
Vortrag: IT und Server-Monitoring geben.
Vortrag: Gerade als kleine oder mittlere Website
Vortrag: ist das schwieriger. Da braucht man wahrscheinlich
Vortrag: kostenpflichtige Tools für ein echtes Monitoring.
Vortrag: Du hast ja auch an einigen Stellen Daten aus verschiedenen Quellen zusammengeführt.
Vortrag: Search Console, AI Performance Report, andere Datenquellen. Wie geht ihr
Vortrag: damit in der Praxis um? Habt ihr da eine Plattform?
Vortrag: Ja, wir analysieren die Logfiles im Bulk und binden das momentan einfach
Vortrag: in einem Looker-Studio-Dashboard an. Das geht relativ unkompliziert. Man kann über
Vortrag: APIs natürlich noch weitere Datenquellen integrieren. Ganz basic: Logfile-Daten
Vortrag: aggregieren, als Sheets bereitstellen und an ein Looker-Studio-Dashboard anbinden.
Vortrag: Dazu kommen die Konnektoren für GSC und GA4. Das
Vortrag: ist erst mal der einfache Weg.
Vortrag: So, jetzt kommen noch mehr Fragen rein.
Vortrag: Verrückt. Was ist
Vortrag: hier heute los? Lesen Bots auch semantisch
Vortrag: YouTube-Videos aus, zum Beispiel
Vortrag: die Tonspur oder Untertitel? Ja, das ist ein
Vortrag: sehr guter Punkt. Da bin ich
Vortrag: ehrlich gesagt selbst noch dabei,
Vortrag: das zu analysieren und Test-Setups aufzubauen.
Vortrag: Bei YouTube kann ich mir das sehr
Vortrag: gut vorstellen. Gerade im Google-Umfeld liegt
Vortrag: das nahe. Und bei ChatGPT
Vortrag: kann ich mir
Vortrag: vorstellen, dass solche Daten für Trainingszwecke genutzt werden. Aber
Vortrag: wie gut das tatsächlich funktioniert, ist noch
Vortrag: offen. Im Retrieval würde ich das eher bezweifeln.
Vortrag: In der
Vortrag: Knowledge Base eher ja. Wie gesagt:
Vortrag: Da laufen bei mir selbst noch
Vortrag: Tests. Mein Gefühl ist aber, dass
Vortrag: Video- und Audio-Inhalte aktuell noch Nachteile haben.
Vortrag: Noch eine Frage: Schadet die Sperrung
Vortrag: einzelner Verzeichnisse, beispielsweise für das LLM-Training, der Sichtbarkeit
Vortrag: der Domain insgesamt? Also beim Grounding oder bei
Vortrag: Inhalten, die nicht gesperrt sind? Nein. Klares Nein. Die LLMs haben
Vortrag: nicht so ein ausgeklügeltes Ranking-System wie Google mit
Vortrag: einer Sitewide-Bewertung. Die KI-Bots machen das nicht.
Vortrag: Sie nutzen das, was im Grounding vorhanden ist
Vortrag: oder für Trainingszwecke gefunden wird. Daraus entstehen keine
Vortrag: Nachteile für andere Inhalte. Deshalb kann man
Vortrag: solche Bereiche sehr unbedenklich sperren. Und darüber sollte
Vortrag: man tatsächlich nachdenken: Welche Inhalte möchte ich
Vortrag: vielleicht gezielt für Trainingszwecke oder Groundings sperren?
Vortrag: Es kommt noch eine etwas Off-Topic-Frage rein. Wie ist deine Meinung zu Grounding-Pages?
Vortrag: Wir haben ja gleich den Hans Kronenberg noch da. Ja, tatsächlich. Ich weiß, das ist
Vortrag: aktuell ein sehr umstrittenes Thema. Hans hat da wirklich etwas angestoßen. Ich bin
Vortrag: tatsächlich eher pro Grounding-Pages. Wir machen dazu gerade selbst Tests. Und
Vortrag: ich finde den Grundgedanken sinnvoll: Informationen, die ich einem normalen Nutzer vielleicht gar nicht
Vortrag: so präsentieren möchte, die aber für Sprachmodelle hilfreich sind, kann ich dort
Vortrag: gezielt und neutral bündeln. Für mich ergibt das durchaus Sinn.
Vortrag: Okay, dann würde ich sagen: Schön, dass du da warst. Und ich wünsche mir
Vortrag: den Hendrik jetzt herbei. Ja, da bin ich auch schon. Liebe Juliane,
Vortrag: ich sage dir auch noch
Vortrag: einmal vielen lieben Dank. Es kommen wirklich ganz viele Dankes- und Lobesworte
Vortrag: im Chat an. Falls noch Fragen offen geblieben sind: Wir
Vortrag: haben nachher noch den Talk mit Hans. Und mit Sicherheit kann man
Vortrag: dir auch später noch eine Frage stellen oder dich über
Vortrag: LinkedIn kontaktieren. Ich glaube, wir haben heute
Vortrag: alle festgestellt: So eine Logfile-Analyse ist ein bisschen
Vortrag: wie Brokkoli im SEO-Speiseplan. Jeder weiß, wie gesund
Vortrag: und wichtig sie ist. Vielleicht ist sie nicht jedermanns
Vortrag: Sache. Aber vielleicht hat dieser Vortrag ja dazu
Vortrag: geführt, dass wir alle mehr Brokkoli essen. Gut, diesen
Vortrag: Scherz konnte ich mir jetzt nicht verkneifen. Alles klar.