Dienstprogramme APIs

Nicht-KI-Dienstprogramm-API

Web-Scraping-API

URL-Inhalt extrahieren & strukturierte Daten extrahieren

Die Web Scraping API ist darauf ausgelegt, strukturierte Daten von jeder öffentlich zugänglichen URL zu extrahieren und Einblicke in Seiteninhalte, Metadaten und Struktur in einem maschinenlesbaren JSON-Format bereitzustellen. Diese API ist ideal für Anwendungen, die automatisierte Datenextraktion für SEO, Wettbewerbsanalyse, Content-Aggregation oder Marktforschung erfordern.

Mit einem einfachen API-Aufruf können Sie wichtige Informationen abrufen wie:

  • Seitentitel und Metadaten (Beschreibung, Schlüsselwörter, Autor, Open Graph & Twitter-Kartendetails)
  • Header und Meta-Tags (Inhaltstyp, Viewport, kanonische URL, Zeichensatz)
  • Strukturierte Inhaltsextraktion (Überschriften, Absätze, wichtige Textelemente)
  • Interne und externe Links zur Analyse der Seitenstruktur
  • Spracherkennung für Lokalisierung und Inhaltkategorisierung
  • Zeitgestempelte Ergebnisse für genaue Nachverfolgung und Protokollierung

Verwandte SDKs/Bibliotheken


Endpoint

GET https://sharpapi.com/api/v1/utilities/scrape_url?url=YOUR_URL

Parameter

Parameter Typ Erforderlich Beschreibung
url string Ja Die URL, die gescrapt werden soll

KI-gestützte Verarbeitung

Die extrahierten Daten können nahtlos in SharpAPI’s KI-gestützte Endpunkte für weitere Analysen und Automatisierungen integriert werden. Zum Beispiel:

  • Textzusammenfassung & Paraphrasierung zur effizienten Inhaltsverdichtung.
  • Schlüsselwortextraktion & SEO-Optimierung zur Verbesserung der Marketingbemühungen.
  • Stimmungsanalyse zum Verständnis von nutzergenerierten Inhalten oder Bewertungen.
  • Übersetzung & Sprachverarbeitung für mehrsprachige Inhaltsworkflows.

Erkunden Sie die gesamte Palette der KI-gesteuerten Fähigkeiten im SharpAPI AI Katalog.

Beispielanfrage

curl -X GET "https://sharpapi.com/api/v1/utilities/scrape_url?url=https://sharpapi.com/" \
     -H "Authorization: Bearer YOUR_API_KEY" \
     -H "Accept: application/json"

Beispielantwort


{
    "url": "https://sharpapi.com/",
    "timestamp": "2025-01-15T08:56:04.946195Z",
    "scraped_data": {
        "title": "KI-gestützte Workflow-Automatisierungs-API",
        "detected_language": "en",
        "headers": {
            "charset": "utf-8",
            "contentType": null,
            "viewport": [
                "width=device-width",
                "initial-scale=1"
            ],
            "canonical": "https://sharpapi.com/",
            "csrfToken": "xxx"
        },
        "meta_tags": {
            "author": null,
            "image": null,
            "keywords": [
                "SharpAPI",
                "KI",
                "Automatisierung"
            ],
            "description": "Nutzen Sie die KI-API, um Arbeitsabläufe in E-Commerce, Marketing, Content-Management, HR-Technik, Reisen und mehr zu optimieren."
        },
        "open_graph": {
            "og:title": "KI-gestützte Workflow-Automatisierungs-API",
            "og:type": "website",
            "og:URL": "https://sharpapi.com",
            "og:image": "https://sharpapi.com/build/assets/sharpapi-website-preview-ARuIroBi.png",
            "og:description": "Nutzen Sie die KI-API, um Arbeitsabläufe in E-Commerce, Marketing, Content-Management, HR-Technik, Reisen und mehr zu optimieren. ",
            "og:url": "https://sharpapi.com"
        },
        "twitter_card": {
            "twitter:card": "summary",
            "twitter:site": "@sharpapi",
            "twitter:creator": "@a2zwebltd"
        },
        "content_structured": [
            {
                "tag": "h1",
                "content": "Automatisieren Sie Arbeitsabläufe mit der KI-gestützten API"
            },
            {
                "tag": "h2",
                "content": "Nutzen Sie die KI-API für die Automatisierung in E-Commerce, Marketing,\n Content-Management, HR-Technik, Reisen und mehr. [...]"
            },
           
        ],
        "content_lists": [
            {
                "type": "ul",
                "items": [
                    "E-Commerce:",
                    "Erstellen Sie schnell ansprechende [...]"
                ]
            },
            {
                "type": "ul",
                "items": [
                    "HR-Technik:",
                    "Erstellen",
                    "komplexe Stellenbeschreibungen [...]"
                ]
            }
        ],
        "content_html": "<h1>Automatisieren Sie Arbeitsabläufe mit der KI-gestützten API</h1>\n<h2>Nutzen Sie die KI-API für die Automatisierung in E-Commerce, Marketing,<br />\n Content-Management, HR-Technik, Reisen und mehr.</h2> [...]",
        "content_markdown": "# Automatisieren Sie Arbeitsabläufe mit der KI-gestützten API\n\n## Nutzen Sie die KI-API für die Automatisierung in E-Commerce, Marketing,  \n Content-Management, HR-Technik, Reisen und mehr. [...]",
        "content_keywords_index": [
            "Arbeitsabläufe optimieren",
            "E-Commerce",
            "Marketing",
            "Content-Management",
            "HR-Technik",
            "Reisen [...]"
        ],
        "links": {
            "internal": [
                "https://sharpapi.com/register",
                "https://sharpapi.com/en/blog/category/workflow-optimization",
                "https://sharpapi.com/documentation",
                "https://sharpapi.com/en/ai-automation-cheatsheet",
                "https://sharpapi.com/policy",
                "https://sharpapi.com/terms"
            ],
            "external": [
                "https://github.com/sharpapi/",
                "https://github.com/sharpapi/sharpapi-laravel-client",
                "https://www.nuget.org/packages/SharpApi.Service",
                "https://twitter.com/SharpAPI",
                "https://www.youtube.com/@SharpAPI"
            ]
        }
    }
}