Eine Website als Resource importieren

Erfahren Sie, wie Sie eine öffentliche Website als Resource importieren, den Crawl steuern und die Seiten erneut abrufen.

Mit Import Website machen Sie aus einer öffentlichen Website, etwa Ihrer Produktdokumentation oder Ihrem Help Center, eine Resource unter Manage > Resources. Outdoo AI durchsucht (crawlt) die Seiten und legt sie in der Bibliothek ab. So können Sie Ihre Website als Datenquelle für Ihre Agents nutzen, ohne Dateien herunterzuladen und hochzuladen.

Eine Website hinzufügen

  • Öffnen Sie Manage > Resources und klicken Sie auf Add Resources.
  • Klicken Sie auf Import Website. Dadurch öffnet sich eine ganze Seite, kein Fenster.
  • Geben Sie unter Website die Website URL ein. Dieses Feld ist erforderlich.
  • Geben Sie unter Resource Details einen Name ein, zum Beispiel „Competitor battlecard“. Dieses Feld ist erforderlich. Wenn Sie eine gültige URL eingeben und der Name noch leer ist, trägt Outdoo AI den Namen der Website ein, den Sie ändern können.
  • Geben Sie optional eine Sitemap-URL ein, zum Beispiel https://example.com/sitemap.xml.
  • Richten Sie optional Page Filters, Extra URLs und Custom Headers ein (siehe unten).
  • Klicken Sie oben auf der Seite auf Import Website. Mit Cancel verlassen Sie die Seite, ohne zu importieren.

Pro Website werden bis zu 5.000 Seiten gecrawlt.

Prüfung der Sitemap

Die Sitemap muss eine vollständige URL auf einer echten Domain sein. Ein einzelnes Wort wie „sitemap“ wird abgelehnt. Ist die Sitemap ungültig, wird das Feld rot und zeigt „Enter a valid sitemap URL, e.g., https://example.com/sitemap.xml“ an. Import Website (bzw. Save Changes bei einer vorhandenen Website-Resource) bleibt deaktiviert, bis Sie den Wert korrigieren oder löschen.

Steuern, was gecrawlt wird

Diese Optionen können Sie beim Hinzufügen der Website festlegen und später auf der Detailseite der Website-Resource ändern.

Page Filters

Mit Filtern überspringen Sie Seiten, die Sie nicht importieren möchten. Jede Regel besteht aus drei Teilen: dem Feld (Page Path), einer Bedingung und einem Wert wie /en/pricing/. Die Bedingungen sind Contains, Doesn't Contain, Starts With, Ends With und Equals. Seiten, die zu einer Regel passen, werden ausgeschlossen. Sie können bis zu 120 Regeln hinzufügen.

Nach dem Crawl können Sie in der Seitenliste außerdem einzelne Seiten oder ganze Ordner ein- oder ausschalten.

Extra URLs

Fügen Sie Seiten hinzu, die der Crawler nicht gefunden hat. Laden Sie eine CSV-Datei mit einer URL pro Zeile hoch. Bereits hinzugefügte URLs werden aufgelistet, und Sie können sie entfernen.

Custom Headers

Senden Sie mit jeder Crawl-Anfrage eigene HTTP-Header mit, zum Beispiel einen Authorization-Header mit einem Wert wie Bearer abc123. Geben Sie Namen und Wert des Headers ein und klicken Sie auf Add Header, um mehrere hinzuzufügen.

Prüfen und erneut crawlen

Klicken Sie im Drei-Punkte-Menü einer Website-Resource auf Edit oder klicken Sie auf den Namen der Website, um die Detailseite zu öffnen. Das linke Menü hat zwei Bereiche, General und Info. Klicken Sie auf Save Changes, um Änderungen zu übernehmen, oder auf Cancel, um die Seite zu verlassen.

  • General enthält Resource Details und Website, wo Sie Name, Website-URL und Sitemap ändern. Dort finden Sie auch Page Filters, Extra URLs und Custom Headers, die wie oben beschrieben funktionieren.
  • Info zeigt den Crawl-Status und die von der Website importierten Seiten.

In Info ist Crawl Status einer der Werte Queued, Crawling..., Indexing... oder Completed. Ist der Crawl abgeschlossen, wird zusätzlich angezeigt, wie lange der letzte Crawl her ist. Imported Pages zeigt, wie viele Seiten verwendet werden. Ein Fortschrittsbalken zeigt, wie viele Seiten importiert, übersprungen wurden oder fehlgeschlagen sind.

Darunter können Sie in der Seitenliste Folgendes tun:

  • Mit Search pages... nach einer Seite suchen.
  • Einzelne Seiten ein- oder ausschalten. Schalten Sie eine Seite aus, um sie aus dem Wissen Ihrer Agents auszuschließen.
  • Bei einer einzelnen Seite auf Re-crawl this page klicken, um nur diese Seite erneut abzurufen.

Das Crawlen einer großen Website kann eine Weile dauern. Derselbe Status (Queued, Crawling..., Indexing... oder Completed) erscheint auch in der Spalte Status der Bibliotheksliste.

Um die ganze Website nach Inhaltsänderungen erneut abzurufen, klicken Sie im Drei-Punkte-Menü in der Zeile der Resource in der Bibliothek auf Re-crawl oder im Bereich Info auf Re-crawl Website.

Eine Website-Resource verwenden

Website-Resources erscheinen in der Resource-Bibliothek neben Dateien, sodass Sie sie an denselben Stellen anhängen können. Wo Resources verwendet werden können, erfahren Sie unter Resources verwalten.

Wir hoffen, dieser Artikel war hilfreich. Bei Fragen schreiben Sie uns bitte an support@outdoo.ai

Verwandte Artikel