Reconnu et choisi par les meilleures start-ups start-ups dans le monde
De l'URL au contenu extrait
Un seul appel HTTP — pas besoin de gérer vous-même un parc de navigateurs headless.
-
Envoyez une URL et des formats
Envoyez une requête POST avec l'URL de la page souhaitée, ainsi que les formats désirés : markdown, html, text, json, screenshot, et bien d'autres.
-
Olostep affiche la page
Prend en charge les sites dynamiques, les actions, les PDF, ainsi que des analyseurs optionnels ou l'extraction par LLM pour obtenir un JSON structuré.
-
Recevez un contenu épuré
Recevez markdown_content, html_content, json_content, les URL hébergées, links_on_page et les métadonnées.
"name": 'Olostep Technologies',
"mission": 'Construire des infrastructures...',
"features": 'moniteurs, traitement par lots...'
}
Conçu pour le scraping en production
L'API /v1/scrapes est conçue pour les applications qui ont besoin d'une extraction de pages fiable, à grande échelle.
-
Plusieurs formats
Demandez du Markdown, du HTML, du texte, du JSON, du raw_pdf ou une capture d'écran en un seul appel.
-
Analyseurs et extraction par LLM
Utilisez des analyseurs prédéfinis pour les sites les plus courants, ou définissez un schéma pour une extraction basée sur un LLM.
-
Ressources hébergées
Obtenez des URL hébergées pour les charges volumineuses, ainsi que des champs de contenu intégrés.
-
Conçu pour les développeurs
Une seule requête POST avec url_to_scrape et formats — intégration en quelques minutes.
Extrayez le contenu d'une page. Choisissez vos formats.
Obligatoire : url_to_scrape et formats.
Ajoutez des analyseurs ou llm_extract lorsque vous avez besoin d'un JSON structuré.
Obtenez des données propres à partir de n'importe quelle URL
1# pip install olostep
2from olostep import Olostep
3
4client = Olostep(api_key="YOUR_REAL_KEY")
5
6result = client.scrapes.create(
7 url_to_scrape="https://en.wikipedia.org/wiki/Alexander_the_Great",
8 formats=["markdown", "html"],
9)
10
11print(result.markdown_content)
12print(result.html_content)1// npm i olostep
2import Olostep from 'olostep'
3
4const client = new Olostep({ apiKey: 'YOUR_REAL_KEY' })
5
6const result = await client.scrapes.create({
7 url: 'https://en.wikipedia.org/wiki/Alexander_the_Great',
8 formats: ['markdown', 'html'],
9})
10
11console.log(result.markdown_content)
12console.log(result.html_content)1curl -s -X POST "https://api.olostep.com/v1/scrapes" \
2 -H "Authorization: Bearer <YOUR_API_KEY>" \
3 -H "Content-Type: application/json" \
4 -d '{
5 "url_to_scrape": "https://en.wikipedia.org/wiki/Alexander_the_Great",
6 "formats": ["markdown", "html"]
7 }'
Ce que vous pouvez créer
Alimentez l'enrichissement, le suivi et les workflows d'IA à partir de pages web en direct.
-
RAG et bases de connaissances
Découpez du Markdown ou du JSON épuré en embeddings pour la recherche et les questions-réponses.
-
Suivi des prix et des catalogues
Extraire les pages produit selon un calendrier et comparer les champs structurés.
-
Prospects et enrichissement
Extraire des données structurées concernant des contacts ou des entreprises à partir de pages de destination.
Des équipes remarquables qui façonnent l'avenir de l'IA nous font confiance
-
Michelle JuliaCofondatrice et PDG d'AuriumOlostep, c'est le top !!! Nous avons automatisé des pipelines de données entiers grâce à une simple requête.
-
Richard HeCofondateur et PDG d'OpenmartOlostep est devenu l'infrastructure de couche Web par défaut de notre entreprise.
-
Max Brodeur-UrbasCofondateur et PDG de GumloopOlostep fonctionne à merveille ! Et votre service client est exceptionnel
-
Rob HayesCofondateur de MerchkitOlostep nous permet de transformer n'importe quel site web en une API. Excellent produit, équipe formidable
-
Brandon CohenCofondateur et directeur technique de CivilGridJe recommande vivement Olostep : c'est un excellent produit !
-
Cofondateur et PDG de Gedd.itNous vérifions les codes promo à grande échelle. J'adore Olostep. Ça fonctionne sur n'importe quel site e-commerce.
-
Trevor WestCofondateur et PDG de PodqiOlostep est la meilleure API pour rechercher, extraire et structurer des données sur le Web. Heureux d'être clients
-
Rida NaveedCofondateur de ZecentoNous utilisons /batches en combinaison avec des analyseurs syntaxiques, et c'est vraiment impressionnant de voir comment nous pouvons obtenir des données structurées à grande échelle.
-
Kieran V.Growth PlotsEventsOlostep nous a permis de rechercher et de structurer des données sur des événements à travers le Web.
-
Paul MitFondateur de FoundbaseAPI fiable et économique pour travailler avec des données. Félicitations pour ce super produit
Commencez à extraire des données avec Olostep
Obtenir données nettoyées pour votre IA, à partir de n'importe quel site web, grâce à Olostep
L'API la plus économique. Conçue pour évoluer.
Foire aux questions
-
Qu'est-ce que le point de terminaison /v1/scrapes ?
Il transforme n'importe quelle URL publique en données que vous pouvez intégrer à des LLM ou à des pipelines : Markdown, HTML, texte, captures d'écran ou JSON structuré, via des analyseurs ou llm_extract.
-
Comment obtenir des données JSON structurées ?
Utilisez les formats : ["json"] avec un identifiant d'analyseur, ou llm_extract avec un schéma JSON et/ou un prompt. Consultez la documentation sur l'extraction (Scrape) pour voir des exemples.
-
Est-ce que cela prend en charge les sites fortement basés sur JavaScript ?
Oui. Olostep est capable d'afficher des pages dynamiques et prend en charge des actions (wait, click, fill_input, scroll) avant l'extraction.
-
Puis-je exclure certaines parties de la page ?
Oui. Utilisez des paramètres tels que remove_css_selectors et d'autres options d'extraction pour vous concentrer sur le contenu dont vous avez besoin.
-
Combien coûte une opération de scraping ?
Un scraping standard coûte 1 crédit. Les analyseurs syntaxiques varient (généralement de 1 à 5 crédits). L'extraction par LLM coûte 20 crédits par requête. Les nouveaux comptes incluent des crédits gratuits pour essayer le service.