Vertraut von den besten Startups Startups weltweit
Alle Endpunkte auf einen Blick
Jede API löst eine andere Art von Problem. Folgen Sie der Landing Page für Code-Beispiele, Preiskontext und wie sie mit anderen Endpunkten kombiniert wird.
Schnelle Entscheidungen zum Erkunden
Ich brauche alle auffindbaren URLs für eine Domain
Ich muss viele Seiten einer Website von einer Start-URL crawlen
Ich habe eine große Liste von URLs, die in einem Job verarbeitet werden sollen
Ich brauche semantische Websuche — gerankte Links für eine natürlichsprachliche Anfrage
Scrapes
Extrahieren Sie Inhalte von einer URL, die Sie bereits kennen — Markdown, HTML, Text, JSON, Screenshots, Parser, LLM-Extract.
Verwenden wenn
Sie erhalten
Pro-URL-Inhalt (markdown_content, html_content, json_content, etc.) bereit für RAG, Agenten oder Speicherung.
Verwenden Sie Batch, wenn Sie Hunderte bis Tausende von URLs haben und einen Job mit vorhersagbarer Laufzeit wollen.
Crawls
Durchlaufen Sie eine Website von einer Start-URL mit Tiefen- und Seitenbeschränkungen; pollen bis zur Fertigstellung; Seiten auflisten und Inhalte abrufen.
Verwenden wenn
Sie erhalten
Crawl-Status, per-page retrieve_ids, dann Markdown/HTML/JSON via /v1/retrieve — ähnlich wie Batch, aber site-shaped.
Verwenden Sie Batch, wenn Ihre URLs von überall kommen (nicht eine Crawl-Frontier); verwenden Sie Crawl für hierarchische Site-Durchläufe.
Maps
Entdecken Sie URLs für eine einzelne Domain — Sitemaps, Links, Filter und Cursor-Paginierung.
Verwenden wenn
Sie erhalten
Ein Search-Objekt mit result.links (url, title, description) plus optionales gehostetes JSON für das vollständige Ergebnisset.
Map entdeckt nur URLs; Crawl holt Inhalte über viele Seiten einer Website.
Batches
Verarbeiten Sie große URL-Listen in einem Job — vorhersagbare Fertigstellungszeit, Parser, Webhooks, Metadaten, Cursor über Items.
Verwenden wenn
Sie erhalten
Batch-Status, paginierte Items, dann Per-Item-Retrieve — ideal für Skalierung ohne selbst gebasteltes Concurrency.
Parallele Scrapes sind oft schneller für winzige Sets; Batch gewinnt bei großen Listen und operationaler Einfachheit.
Searches
Semantische Websuche aus einer natürlichsprachlichen Anfrage — deduplizierte Links mit Titeln und Beschreibungen.
Verwenden wenn
Sie erhalten
Ein Search-Objekt mit result.links (url, title, description) plus optionales gehostetes JSON für das vollständige Ergebnisset.
Search gibt Links über das Web für eine Anfrage zurück; Map gibt URLs zurück, die für eine bereits gewählte Website entdeckt wurden.
Answers
Stellen Sie eine Frage in natürlicher Sprache; erhalten Sie eine quellengestützte Antwort und optional strukturiertes JSON.
Verwenden wenn
Sie erhalten
Ein Answer-Objekt mit validierten Feldern, Zitaten und NOT_FOUND, wenn das Web eine Aussage nicht stützen kann — nicht nur roher Seitentext.
Verwenden Sie Search, wenn Sie eine Liste von Links zum Erkunden brauchen; verwenden Sie Answers, wenn Sie eine einzige zusammengefasste Antwort benötigen.
Monitors
Erstellen Sie persistente Monitore aus natürlichsprachlichen Anfragen; führen Sie geplante Prüfungen durch, erkennen Sie Seitenänderungen und senden Sie Alerts.
Verwenden wenn
Sie erhalten
Monitor-Status, Zeitplan, verfolgte Ziele, Snapshot-Ereignisse, Änderungszusammenfassungen und Laufprotokolle für wiederkehrende Prüfungen.
Verwenden Sie Scrapes für einmalige Extraktion; verwenden Sie Monitors, wenn dieselbe Quelle wiederholt geprüft werden muss.
Vertraut von großartigen Teams, die die Zukunft der KI gestalten
-
Michelle JuliaMitgründer & CEO AuriumOlostep ist das Beste!!! Wir haben komplette Datenpipelines mit nur einem Prompt automatisiert
-
Richard HeMitgründer & CEO OpenmartOlostep ist zur Standard-Web-Layer-Infrastruktur unseres Unternehmens geworden
-
Max Brodeur-UrbasMitgründer & CEO GumloopOlostep funktioniert wie ein Zauber! Und Ihr Kundenservice ist hervorragend
-
Rob HayesMitgründer MerchkitMit Olostep können wir jede Website in eine API verwandeln. Tolles Produkt, tolle Leute
-
Brandon CohenMitgründer & CTO CivilGridIch kann Olostep sehr empfehlen, ein großartiges Produkt!
-
Mitgründer & CEO Gedd.itWir verifizieren Gutscheincodes im großen Maßstab. Wir lieben Olostep. Es funktioniert mit jedem E-Commerce
-
Trevor WestMitgründer & CEO PodqiOlostep ist die beste API, um Daten aus dem Web zu suchen, zu extrahieren und zu strukturieren. Wir sind gerne Kunden
-
Rida NaveedMitgründer ZecentoWir nutzen /batches in Kombination mit Parsern, und es ist erstaunlich, wie wir strukturierte Daten in großem Maßstab erhalten
-
Kieran V.Growth PlotsEventsMit Olostep konnten wir Eventdaten im gesamten Web suchen und strukturieren
-
Paul MitGründer FoundbaseZuverlässige und kosteneffiziente API für die Arbeit mit Daten. Glückwunsch zum coolen Produkt
Beginnen Sie mit dem Scrapen mit Olostep
Erhalten Sie saubere Daten für Ihre KI von jeder Website mit Olostep
Die kosteneffizienteste API. Für Skalierung gebaut
Häufig gestellte Fragen
-
Ich habe eine einzelne URL — welcher Endpunkt?
Verwenden Sie POST /v1/scrapes (Scrapes), um Markdown, HTML, JSON, Screenshots oder Parser-Output von dieser Seite zu extrahieren.
-
Ich brauche jede URL auf einer Website — welcher Endpunkt?
Verwenden Sie POST /v1/maps (Maps) für Domain-weite URL-Entdeckung mit optionalen Pfadfiltern und Cursor-Paginierung.
-
Ich muss eine Website durchlaufen und viele Seiten mit Inhalt bekommen — welcher Endpunkt?
Verwenden Sie POST /v1/crawls (Crawls), wenn Sie einen mehrseitigen Crawl von einer Start-URL wollen, dann Seiten auflisten und Inhalte pro Seite abrufen.
-
Ich habe Tausende beliebiger URLs — welcher Endpunkt?
Verwenden Sie POST /v1/batches (Batches) für große Listen mit vorhersagbarer Job-Zeit, optionalen Parsern, Webhooks und Metadaten.
-
Ich brauche eine direkte Antwort aus dem Web — welcher Endpunkt?
Verwenden Sie POST /v1/answers (Answers) für agentisches Q&A mit Validierung und optionalem strukturiertem JSON — nicht nur eine Link-Liste.
-
Ich brauche gerankte Links für eine Frage — welcher Endpunkt?
Verwenden Sie POST /v1/searches (Search) für semantische Websuche, die deduplizierte Links mit Titeln und Beschreibungen zurückgibt; dann scrapen Sie ausgewählte URLs, falls Sie vollständigen Seiteninhalt benötigen.
-
Wann sind parallele Scrapes besser als ein Batch?
Bei einer kleinen Anzahl von URLs sind parallele /v1/scrapes-Aufrufe oft schneller fertig. Batches glänzen bei großen Listen und operationalen Mustern (Webhooks, einzelne Job-ID, Item-Cursoring).