Stabile Entität
Produktidentität
Marke, Modell, kanonische Titel, Kategorien, Kennungen, Beschreibungen, Attribute und Medien.
- ASIN / SKU / GTIN / MPN
- Brand & model
- Category & attributes
Produkte, Preise & Bewertungen
Produkt-, Preis- und Bewertungsdaten-Scraping
Erfassen Sie Produkte, Preise, Aktionen, Lagerbestände, Verkäufer und Bewertungen für Handelsanalysen. Wählen Sie strukturierte Commerce-APIs, Datensätze oder regelmäßige Feeds.
Handelsdatensatzmodell
Verknüpfen Sie Produkte, Angebote, Verkäufer und Bewertungen.
Trennen Sie die Identität von den Beobachtungen, die sich je nach Verkäufer, Ort, Seite und Zeit ändern. Das Ergebnis ist einfacher zu vergleichen, zu aktualisieren und zu regeln.
Konfiguration
Variante
Größe, Farbe, Kapazität, Einheit, Verpackung, Stil oder eine andere von der Quelle definierte Konfiguration eines Produkts.
- Variant identifier
- Option labels
- Parent relationship
Zeitgebundene Beobachtung
Angebot
Anzeigepreis, Listepreis, Werbeförderung, Zustand, Verfügbarkeit, Versand, Abholung und Erfüllungszusammenhang.
- Value & currency
- Seller & condition
- Observed context
Marktplatzentität
Verkäufer
Die Identität des öffentlichen Händlers und der Umstand des Verkaufs werden vom Produkt getrennt und ihm Lieferungen angeboten.
- Seller ID & name
- Storefront URL
- Public rating context
Feedback der Öffentlichkeit
Review
Aggregate Bewertungen, Verteilungen, Zählungen und Felder auf Überprüfungsniveau, die vom ausgewählten Endpunkt oder vom gewählten Bereich unterstützt werden.
- Rating & count
- Review text & date
- Source-level availability
Quellenabdeckung
Prüfen Sie Quellen und Feldabdeckung.
Prüfen Sie Quelle, Seitentyp, Markt und benötigte Felder, bevor Sie eine API oder individuelle Erfassung wählen.
Dokumentiert
Strukturierte Commerce-Endpunkte
Die aktuelle Dokumentation enthält eine Liste von Markt- und Einzelhandels-API mit Quell- und Antwortverträgen.
- Amazon
- eBay
- Walmart
- Best Buy
- Home Depot
- Lowe's
- Nordstrom
- Target
- Wayfair
Pilot first
Zusätzliche qualifizierte öffentliche Commerce-Quellen
Einzelhändler, Marktplatz, Marke, Vergleich und Überprüfung Quellen werden vor einer wiederkehrenden Verpflichtung mit repräsentativen Seiten bewertet.
- Required page families and discovery inputs
- Country, postal, language, and device context
- Field presence, optional modules, and failure states
- Cadence, volume, retention, and delivery fit
Nicht standardmäßig
Private oder transaktionale Kundenoberflächen
Privatkonto, Warenkorb, Kassen oder Kundendaten fallen außerhalb des Standard-Public-Web-Richts.
- Authenticated customer accounts
- Orders and transaction records
- Personalized checkout totals
- Internal retailer inventory systems
Felder und Beispieldatensätze
Sehen Sie sich die Felder in einem Beispieldatensatz an.
Beginnen Sie mit den Feldern, die Ihr System benötigt, und verweisen Sie dann die Quellwerte, die optionale Module, die Identifikatoren und die Qualitätszustände in ein dokumentiertes Schema.
Identität
product_id · source_product_id · brand · title · category · attributes · media
Variante
variant_id · parent_id · size · color · unit · pack_quantity · option_labels
Angebot & Preis
current_price · list_price · currency · promotion · condition · seller_id
Verfügbarkeit & Abwicklung
availability_text · normalized_state · shipping · pickup · delivery_window
Bewertungen & Bewertungen
rating · rating_count · review_count · distribution · review_items
Herkunft & Qualität
source_url · observed_at · requested_context · collection_state · schema_version
{
"record_id": "obs_001",
"schema_version": "commerce.v1",
"product": {
"source_product_id": "DEMO-128",
"brand": "Example",
"title": "Wireless headphones",
"variant": { "color": "black" }
},
"offer": {
"current_price": 79.00,
"list_price": 99.00,
"currency": "USD",
"availability_text": "In stock"
},
"rating": {
"value": 4.6,
"count": 1248
},
"source_url": "https://retailer.example/p/001",
"observed_at": "YYYY-MM-DDThh:mm:ssZ",
"collection_state": "observed"
}Identität & Matching
Normalisieren Sie ohne die Quelle zu löschen.
Behalten Sie die ursprüngliche Beobachtung, dann fügen Sie eine vertragliche Identitätsschicht nur hinzu, wenn der Vergleich erklärbar und überprüfbar ist.
- 01ProduktidentitätSony · WH-1000XM5
- 02VarianteFarbe: Schwarz
- 03AngebotsbeobachtungVerkäufer, Preis, Verfügbarkeit, URL und observed_at bleiben quellenspezifisch
ErgebnisGemäß Regel übereinstimmenProdukt und schwarze Variante verknüpft · Quellenlisting beibehalten
Frische & Geschichte
Frische ist ein Feldvertrag, kein Abzeichen.
Geben Sie an, wann die Sammlung ausgeführt werden soll, welches Zeitzug in einer Aufzeichnung enthalten ist und welche Änderungen in der Geschichte statt überschriebenen Werten verwandelt werden müssen.
Zum Anfragezeitpunkt
Rufen Sie einen dokumentierten Endpunkt auf.
Die Antwort stellt die unterstützte Seite und den angeforderten Kontext dar, wenn die Anfrage bearbeitet wird.Asynchron
Senden Sie die Arbeit ein und rufen Sie dann einen Snapshot ab.
Die ausgewählten Endpunkte des Einzelhändlers geben einen Snapshot-Identifikator zurück, während strukturierte Aufzeichnungen erstellt werden.Scheduled
Aktualisieren Sie einen vereinbarten Quellsatz.
Die Cadenz kann sich je nach Quelle, Seitefamilie, Produktstufe und Feldvolatilität unterscheiden.Längsschnitt
Beobachtungen beibehalten und Ereignisse ändern.
Die Geschichte beginnt mit der Sammlung, es sei denn, eine separate historische Quelle wird validiert.Qualität & Fehlerfreiheit
Lass jeden Nichtwert sich selbst erklären.
Qualität ist kein einziger Genauigkeitsprozentsatz, sondern eine Reihe vereinbarter Kontrollen und beobachtbarer Zustände, die dem Feld, der Aufzeichnung, der Quelle und der Lieferung beigefügt sind.
StaatBedeutungDownstream-Maßnahme
The supported field or object was returned in the requested context.
Use with timestamp and sourceThe page was collected, but the selected module or field was not displayed.
Keep distinct from zeroThe page or object was not available in the requested public context.
Do not infer inventoryThe collection event did not produce a usable page or supported response.
Retry or escalate by contractA value did not meet the agreed structure, type, or parsing rule.
Quarantine with reasonIdentity cues were incomplete, conflicting, or below the agreed threshold.
Keep source record availableLieferoptionen und Versand
Wählen Sie, wie Sie Ihre Daten erhalten.
Nutzen Sie eine API in Ihrer Anwendung, erhalten Sie regelmäßig Datensätze oder überlassen Sie uns die Erfassung.
Proxys
Behalten Sie Ihre Collector und nutzen Sie unser Proxy-Netzwerk.
Nutzen Sie Residential-, Datacenter- oder ISP-Proxies mit den Collectors, die Ihr Team bereits betreibt.
FunktionDetails
Sie erhaltenProxy-Zugang für Ihre eigenen Anfragen
Wir übernehmenProxy-Netzwerk und Zugang
Ihr BeitragErfassung, Extraktion, Speicherung und Analyse
Geeignet für · Teams mit bestehenden Collectors.
Erkunden Sie Proxy-InfrastrukturWas Teams bauen
Nutzen Sie diese Datensätze.
Planen Sie Ihre Analyse, Ihr Produkt oder Ihr Monitoring anhand der folgenden Felder und Beispiele.
Repräsentativer Pilot
Testen Sie ein Muster in Ihrem eigenen Workflow.
Ein nützlicher Pilot beweist die härtesten Quell- und Feldkombinationen, nicht nur die sauberste Produktseiten.
- 01
Brief
Benennen Sie die Objekte und Kontexte.
Quellen, Seitentypen, Identifikatoren, Märkte, Standorte, Geräte, Felder, Kadenz und Ausschlüsse. - 02
Sample
Sammeln Sie repräsentative Seiten.
Veröffentlichen Sie Varianten, Werbeaktionen, mehrere Verkäufer, fehlende Module, nicht verfügbare Seiten und Überprüfen Sie die Unterschiede. - 03
Vertrag
Genehmigen Sie Schema- und Qualitätszustände.
Felddefinitionen, Quellkarte, Übereinstimmungsregeln, Grundcodes, Geschichte, Akzeptanz und Lieferformat. - 04
Handoff
Wählen Sie das Betriebsmodell.
Verwenden Sie den validierten Umfang, um Zugang, Gewinnung, Wartung, Qualität, Lieferung und Entscheidungshaltung zu vergeben.
Häufige Fragen zu
Fragen vor dem Start
Welche Produkt- und Handelsdaten kann WebScrapingAPI zur Verfügung stellen?
Erfassen Sie Produkte, Preise, Aktionen, Lagerbestände, Verkäufer und Bewertungen für Handelsanalysen. Wählen Sie strukturierte Commerce-APIs, Datensätze oder regelmäßige Feeds.
Welche Handelsquellen sind heute dokumentiert?
Entdecken Sie Commerce-APIs für Amazon, Walmart, eBay und weitere unterstützte Händler. Jede Quellseite zeigt die Seitentypen und Felder, die Sie im Muster prüfen können.
Können Bewertungen und Bewertungen geliefert werden?
Bewertungen, Überprüfungszahlen, Bewertungsspeicher oder Überprüfungsabschnitte werden für ausgewählte Produktendpunkte dokumentiert und können auch in einem Datenspektrumprogramm bewertet werden.
Wie beziehen sich Produkt-, Varianten-, Angebots-, Verkäufer- und Bewertungsdatensätze aufeinander?
Das Datenmodell hält die stabile Produktidentität getrennt von Quellvarianten, zeitgebundenen Angeboten, Verkäuferkontext und Überprüfungsbeobachtungen. Jedes Objekt kann seine Quell-URL, Quell-Identifikator, angeforderten Kontext, Beobachtungszeit und Sammelzustand behalten, so dass nachgelagerte Teams Aufzeichnungen verbinden können, ohne zu löschen, woher sie kamen.
Kann das gleiche Produkt über verschiedene Quellen hinweg abgeglichen werden?
Matching kann in einem Feed oder betreuten Programm enthalten sein. Das Muster bestätigt Kennungen, Vergleichsregeln und die Darstellung unsicherer oder widersprüchlicher Zuordnungen.
Wie aktuell können Produkt- und Preisdaten sein?
APIs erfassen Daten beim Aufruf. Feeds und Managed Data folgen einem vereinbarten Zeitplan; Quellen- und Erfassungszeitstempel bleiben getrennt, soweit verfügbar.
Können historische Preis-, Verkäufer- und Verfügbarkeitsänderungen geliefert werden?
Die Historie beginnt mit dem Monitoring. Frühere Abdeckung hängt von verfügbaren Quelldatensätzen oder Archivaufnahmen ab. Prüfen Sie Zeiträume und Lücken in einem Muster.
Wie werden fehlende Felder und fehlgeschlagene Sammlungen dargestellt?
Das Muster unterscheidet fehlende Felder, nicht verfügbare Seiten, fehlgeschlagene Anfragen und prüfbedürftige Werte. Vereinbaren Sie den Umgang mit jedem Zustand vor der regelmäßigen Lieferung.
Wer verwaltet die Sammlung, wenn sich eine Commerce-Seite ändert?
Ihr Team pflegt Collector bei Proxies und eigene Parser bei Seitenzugriffs-APIs. Wir pflegen die unterstützte Data-API-Extraktion und die in Feeds oder Managed Data enthaltene Erfassung.
Welche Grenzen für verantwortungsvolle Nutzung und Daten gelten?
Die Bereiche der Nutzung sind nur für zugelassenen öffentlichen Webseiten und vereinbarte öffentliche Felder beschränkt. Privatkonten, Warenkorb, Kassen, Bestell- und Kundendaten sind nicht standardisiert. Kunden sind weiterhin für die rechtmäßige Nutzung, Speicherung, Zugangskontrolle sowie die Preisgestaltung, die Vermarktung, die Durchsetzung oder andere Entscheidungen mit den übermittelten Daten verantwortlich.
Produkte, Preise & Bewertungen
Beginnen Sie mit einem Endpunkt oder einer repräsentativen Datenübersicht.
Verwenden Sie eine dokumentierte Commerce API in Ihrem eigenen Workflow oder zeigen Sie uns die Quellen, Felder, Kontext und Refresh-Fenster, die Ihr Team bereitstellen muss.