Mit Crawler-Anleitungen verbessern Sie die Suchergebnisse des Web-Crawlers, indem natürliche Sprachfragen von Benutzern in gezielte Suchbegriffe umgewandelt werden. Diese Suchbegriffe passen besser zur Struktur Ihrer Website.
Wichtig: Crawler-Anleitungen basieren ausschließlich auf den URLs Ihrer Website – nicht auf dem tatsächlichen Seiteninhalt. Die Suchbegriffe werden also mit den abgerufenen URLs verglichen.
Was sind Crawler-Anleitungen?
Crawler-Anleitungen unterstützen Ihren KI-Agenten dabei, die passenden URLs auszuwählen, wenn ein Benutzer eine Frage stellt. Diese Anleitungen bestehen aus einer Reihe von Suchbegriffen, die verwendet werden, um Inhalte auf Ihrer Website zu finden, die am besten zur Frage des Benutzers passen.
Wenn ein Benutzer eine Frage an Ihren KI-Agenten stellt:
-
Suchbegriffe werden generiert:
Die Frage wird automatisch in relevante Suchbegriffe übersetzt. -
Abgleich mit URLs:
Diese Suchbegriffe werden mit den URLs verglichen, die zuvor über den Web-Crawler abgerufen wurden. -
Auswahl relevanter URLs:
URLs, die mit einem oder mehreren Suchbegriffen übereinstimmen, werden der Frage zugeordnet. -
Antwortbildung:
Der KI-Agent verwendet den Inhalt dieser URLs, um eine möglichst spezifische und relevante Antwort zu geben.
Diese Methode ist besonders nützlich, wenn Ihre Website viele Seiten enthält. Sie stellt sicher, dass Ihr KI-Agent gezielt Informationen finden und nutzen kann.
Richtlinien zum Verfassen von Crawler-Anleitungen
Ein gutes Set an Suchbegriffen sorgt dafür, dass Ihr KI-Agent schnell die richtigen Seiten findet. Befolgen Sie diese Richtlinien:
-
Verwenden Sie Wörter, die in Ihren URLs vorkommen: Dies erhöht die Wahrscheinlichkeit, dass der Suchbegriff eine Übereinstimmung erzielt.
-
Verwenden Sie Singular und Plural: Denken Sie an „Bluetooth-Lautsprecher“ und „Bluetooth-Lautsprechern“.
-
Kurz und spezifisch: Lange Sätze funktionieren weniger gut. Verwenden Sie stattdessen Schlüsselwörter.
Beispiel
Benutzerfrage:
„Ich suche einen guten, kleinen Bluetooth-Lautsprecher. Was empfehlen Sie?“
Optimierte Suchbegriffe:
-
Bluetooth-Lautsprecher
-
Bluetooth-Lautsprecher (Plural)
-
Mini-Lautsprecher
Tipps für effektive Crawler-Anleitungen
-
Verwenden Sie Schlüsselwörter, die mit Begriffen in den URLs Ihrer Website übereinstimmen.
-
Nutzen Sie sowohl Singular als auch Plural.
-
Halten Sie die Suchbegriffe kurz und präzise.
Vermeiden Sie starre Anweisungen wie „Geben Sie immer eine URL zurück“ oder „Wenn jemand nach drei Links fragt, geben Sie immer drei zurück“. Diese berücksichtigen nicht die Funktionsweise des Web-Crawlers.
Durch den gezielten Einsatz von Crawler-Anleitungen stellen Sie sicher, dass Ihr KI-Agent besser arbeitet – mit relevanteren Antworten und einer effektiveren Nutzung des Wissens Ihrer Website.