API utilitaire non-IA

API de grattage web

Extraire le contenu de l'URL et extraire les données structurées

L'API de Web Scraping est conçue pour extraire des données structurées de n'importe quelle URL accessible publiquement, fournissant des informations sur le contenu de la page, les métadonnées et la structure dans un format JSON lisible par machine. Cette API est idéale pour les applications nécessitant une extraction de données automatisée pour le SEO, l'analyse concurrentielle, l'agrégation de contenu ou la recherche de marché.

Avec un simple appel API, vous pouvez récupérer des informations clés telles que :

Titre de la page et métadonnées (description, mots-clés, auteur, détails Open Graph & carte Twitter)
En-têtes et balises meta (type de contenu, viewport, URL canonique, charset)
Extraction de contenu structuré (titres, paragraphes, éléments de texte clés)
Liens internes et externes pour l'analyse de la structure du site
Détection de la langue pour la localisation et la catégorisation du contenu
Résultats horodatés pour un suivi et une journalisation précis

SDKs/Bibliothèques connexes

Endpoint

GET https://sharpapi.com/api/v1/utilities/scrape_url?url=YOUR_URL

Parameters

Parameter	Type	Required	Description
`url`	string	Yes	L'URL à extraire

Traitement alimenté par l'IA

Les données extraites peuvent s'intégrer parfaitement avec les points de terminaison alimentés par l'IA de SharpAPI pour une analyse et une automatisation supplémentaires. Par exemple :

Résumé et paraphrase de texte pour condenser le contenu efficacement.
Extraction de mots-clés et optimisation SEO pour améliorer les efforts de marketing.
Analyse de sentiment pour comprendre le contenu généré par les utilisateurs ou les avis.
Traduction et traitement de la langue pour les flux de travail de contenu multilingues.

Explorez toute la gamme des capacités pilotées par l'IA sur SharpAPI AI Catalog.

Exemple de demande

curl -X GET "https://sharpapi.com/api/v1/utilities/scrape_url?url=https://sharpapi.com/" \
     -H "Authorization: Bearer YOUR_API_KEY" \
     -H "Accept: application/json"

Exemple de réponse


{
    "url": "https://sharpapi.com/",
    "timestamp": "2025-01-15T08:56:04.946195Z",
    "scraped_data": {
        "title": "API d'automatisation de flux de travail alimentée par l'IA",
        "detected_language": "en",
        "headers": {
            "charset": "utf-8",
            "contentType": null,
            "viewport": [
                "width=device-width",
                "initial-scale=1"
            ],
            "canonical": "https://sharpapi.com/",
            "csrfToken": "xxx"
        },
        "meta_tags": {
            "author": null,
            "image": null,
            "keywords": [
                "SharpAPI",
                "AI",
                "automation"
            ],
            "description": "Exploitez l'API AI pour rationaliser le flux de travail dans le commerce électronique, le marketing, la gestion de contenu, la technologie RH, le voyage, et plus encore."
        },
        "open_graph": {
            "og:title": "API d'automatisation de flux de travail alimentée par l'IA",
            "og:type": "website",
            "og:URL": "https://sharpapi.com",
            "og:image": "https://sharpapi.com/build/assets/sharpapi-website-preview-ARuIroBi.png",
            "og:description": "Exploitez l'API AI pour rationaliser le flux de travail dans le commerce électronique, le marketing, la gestion de contenu, la technologie RH, le voyage, et plus encore. ",
            "og:url": "https://sharpapi.com"
        },
        "twitter_card": {
            "twitter:card": "summary",
            "twitter:site": "@sharpapi",
            "twitter:creator": "@a2zwebltd"
        },
        "content_structured": [
            {
                "tag": "h1",
                "content": "Automatisez les flux de travail avec une API alimentée par l'IA"
            },
            {
                "tag": "h2",
                "content": "Exploitez l'API AI pour l'automatisation dans le commerce électronique, le marketing,
 la gestion de contenu, la technologie RH, le voyage, et plus encore. [...]"
            },
           
        ],
        "content_lists": [
            {
                "type": "ul",
                "items": [
                    "E-commerce:",
                    "Générez rapidement un contenu engageant [...]"
                ]
            },
            {
                "type": "ul",
                "items": [
                    "Technologie RH:",
                    "Générez",
                    "des descriptions de poste complexes [...]"
                ]
            }
        ],
        "content_html": "<h1>Automatisez les flux de travail avec une API alimentée par l'IA</h1>
<h2>Exploitez l'API AI pour l'automatisation dans le commerce électronique, le marketing,<br />
 la gestion de contenu, la technologie RH, le voyage, et plus encore.</h2> [...]",
        "content_markdown": "# Automatisez les flux de travail avec une API alimentée par l'IA

## Exploitez l'API AI pour l'automatisation dans le commerce électronique, le marketing,  
 la gestion de contenu, la technologie RH, le voyage, et plus encore. [...]",
        "content_keywords_index": [
            "rationaliser le flux de travail",
            "commerce électronique",
            "marketing",
            "gestion de contenu",
            "technologie RH",
            "voyage [...]"
        ],
        "links": {
            "internal": [
                "https://sharpapi.com/register",
                "https://sharpapi.com/en/blog/category/workflow-optimization",
                "https://sharpapi.com/documentation",
                "https://sharpapi.com/en/ai-automation-cheatsheet",
                "https://sharpapi.com/policy",
                "https://sharpapi.com/terms"
            ],
            "external": [
                "https://github.com/sharpapi/",
                "https://github.com/sharpapi/sharpapi-laravel-client",
                "https://www.nuget.org/packages/SharpApi.Service",
                "https://twitter.com/SharpAPI",
                "https://www.youtube.com/@SharpAPI"
            ]
        }
    }
}

Autres API utilitaires

Parcourez toutes les API alimentées par l'IA →