Wie man Pinterest-Trends-Daten für E-Commerce-Forschung scrapt
Pinterest ist eine Goldgrube für Nachfrage-Signale — und eines der schwierigeren Ziele, da es keine JSON auf der Seite hinterlässt. So rendert man, wählt Pins aus, verfolgt Trends und verhindert, dass der Headless-Modus blockiert wird.
Pinterest ist ein Nachfrage-Signal-Motor: Was Menschen jetzt speichern, sagt voraus, was sie nächste Saison kaufen, was seine Pins, Boards und Suchvorschläge wirklich nützlich für E-Commerce- und Content-Forschung macht. Es ist auch eines der umständlicheren Ziele, da es im Gegensatz zu den meisten Marktplätzen keine strukturierten Daten auf der Seite liefert. Alles wird dynamisch gerendert, und es gibt keinen ordentlichen JSON-Blob, den man herausfiltern könnte. Das bedeutet, dass man zuerst rendert und dann das DOM liest. Dieser Leitfaden behandelt die Render-und-Auswahl-Methode, wie man Trend- und Keyword-Signale abbaut, und die Proxy- und Header-Auswahl, die verhindert, dass der Headless-Modus blockiert wird. Arbeiten Sie innerhalb der Pinterest-Nutzungsbedingungen und halten Sie sich an öffentliche Daten.
Warum der versteckte-JSON-Trick hier nicht funktioniert
Auf vielen Seiten liegen die Daten in einer JavaScript-Variable im Quellcode, sodass eine einfache Anfrage plus ein Regex ausreicht. Pinterest generiert alle seine Inhalte clientseitig und hinterlässt diese Strukturen nicht auf der Seite. Wenn Sie das rohe HTML herunterladen, sind die Pins nicht darin enthalten — sie werden nach dem Ausführen von JavaScript eingefügt. Der zuverlässige Ansatz ist also ein Headless-Browser (Playwright funktioniert gut), der die Seite lädt, auf Inhalte wartet und dann aus dem Live-DOM extrahiert. Die Pins sind tief verschachtelt, aber konsistent markiert: Jeder befindet sich in einem div mit data-test-id="pinWrapper", was ein weitaus stabilerer Anker als ein gehashter Klassenname ist.
Rendern und Auswählen von Pins
Das wichtigste Detail: Setzen Sie einen echten Desktop-User-Agent. Im Headless-Modus blockiert Pinterest den Standard-Automatisierungs-UA sofort, und der Austausch gegen eine normale Chrome-Zeichenkette ist oft der Unterschied zwischen einer leeren Liste und einer vollständigen Seite von Pins. Laden Sie die Such-URL, geben Sie dem Inhalt einen Moment zum Rendern, dann fragen Sie alle Pin-Wrapper ab und ziehen Sie den Titel, die URL und das Thumbnail von jedem:
import asyncio, json
from playwright.async_api import async_playwright
UA = ("Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 "
"(KHTML, like Gecko) Chrome/133.0.0.0 Safari/537.36")
PROXY = {"server": "http://gate.quantumproxies.io:8000",
"username": "USER", "password": "PASS"}
async def scrape_pins(query):
url = f"https://www.pinterest.com/search/pins/?q={query}&rs=typed"
results = []
async with async_playwright() as p:
browser = await p.chromium.launch(proxy=PROXY)
page = await browser.new_page(user_agent=UA) # real UA is mandatory
await page.goto(url, timeout=30000)
await page.wait_for_timeout(2500) # let pins render
pins = await page.query_selector_all("div[data-test-id='pinWrapper']")
for pin in pins:
link = await pin.query_selector("a")
if not link:
continue
img = await link.query_selector("img")
results.append({
"title": await link.get_attribute("aria-label"),
"url": await link.get_attribute("href"),
"img": await img.get_attribute("src") if img else None,
})
await browser.close()
return results
pins = asyncio.run(scrape_pins("minimalist home office"))
print(len(pins), "pins")Das liefert die wesentlichen Informationen für die Trendarbeit: den Pin-Titel (der reichhaltiger, beschreibender Text ist, den Pinner selbst schreiben), die Ziel-URL und das Thumbnail. Scrollen Sie die Seite in einer Schleife, bevor Sie auswählen, wenn Sie mehr als den ersten Viewport möchten — Pinterest lädt nach Bedarf, während Sie gehen.
Von Pins zu Trendsignalen
Rohpins sind nur der erste Schritt. Der Forschungswert kommt von ihrer Aggregation in Signale, auf die Ihr Merchandising- oder Content-Team reagieren kann:
- Keyword-Erweiterung — Pinterests Such-Autovervollständigung zeigt die Formulierungen, die Käufer tatsächlich verwenden; erfassen Sie die Vorschläge für einen Ausgangsbegriff, um ein Vokabular für Inhalte und Produkt-Tags aufzubauen.
- Board-Mining — ein Board ist eine handkuratierte Sammlung zu einem Thema; das Scrapen der Pins auf Boards mit vielen Followern zeigt, was gerade zusammen gespeichert wird.
- Häufigkeit der beschreibenden Texte — die
aria-label-Titel sind keywordreich; das Zählen wiederkehrender Begriffe über eine Suche zeigt die Sprache und Ästhetik, die eine Nische antreibt. - Saisonalität — wiederholen Sie die gleichen Suchen wöchentlich und vergleichen Sie die Ergebnisse, um aufkommende Themen zu erkennen, bevor sie ihren Höhepunkt erreichen, was der ganze Sinn der Nutzung von Pinterest als Frühindikator ist.
Da diese Signale am stärksten sind, wenn Sie Märkte vergleichen, richten Sie die Exit-IP geografisch aus: Was für einen US-Käufer angezeigt wird, unterscheidet sich von einem britischen oder deutschen, und diese Lücke ist oft die Gelegenheit. Leiten Sie jeden Durchlauf über einen länderspezifischen Residential Proxy und speichern Sie den Markt zusammen mit den Daten.
Ein praktischer Tipp für die Trendarbeit: Erfassen Sie die gleichen Suchen in einem festen wöchentlichen Rhythmus und speichern Sie jeden Schnappschuss anstatt ihn zu überschreiben. Eine Pin-Anzahl für "Cottagecore-Küche" bedeutet isoliert nichts, aber eine steigende Linie über acht Wochen ist ein echter Frühindikator — Pinterest-Speicherungen gehen Käufen voraus, sodass ein Thema, das jetzt auf der Plattform an Fahrt gewinnt, ein Merchandising-Signal für das nächste Quartal ist. Das Vergleichen ist trivial, sobald Sie konsistente Schnappschüsse haben; die Disziplin besteht darin, sie zuverlässig zu sammeln, was genau dort ist, wo saubere IPs und ein stabiler Selektor sich auszahlen.
Den Headless-Modus am Leben halten
Pinterest beobachtet Automatisierung, daher wird ein Browser auf einer Rechenzentrums-IP mit einem robotischen Fingerabdruck schnell markiert. Drei Gewohnheiten halten Sitzungen gesund: ein kohärenter echter User-Agent (bereits behandelt), eine frische rotierende Residential IP pro Sitzung, damit eine Adresse nicht mit Dutzenden von Suchen verbunden ist, und menschliches Tempo — eine kurze Wartezeit nach dem Laden, sanftes Scrollen, keine Tausend-Anfragen-Ausbrüche. Unser Leitfaden zum Scrapen von JavaScript-lastigen Seiten behandelt die Kombination aus Rendering und Proxy ausführlich, und die gleiche Anti-Block-Hygiene gilt für andere soziale Plattformen — siehe Scrapen öffentlicher Instagram-Daten für die Parallele.
Erhalten Sie Residential IPs, die für Social Scraping gebaut sind
Wann eine Browser-Flotte nicht mehr lohnt
Das Rendern jeder Seite ist langsam und teuer — ein Headless-Browser kostet eine Größenordnung mehr pro Seite als eine einfache Anfrage in Bezug auf Zeit und Bandbreite. Im Forschungsskalierung summiert sich das. Eine Scraper API, die auf Abruf rendert und strukturierte Daten zurückgibt, lässt Sie die Browser-Flotte, die Proxy-Rotation und die Blockbehandlung überspringen, sodass Sie Ihre Zeit mit Analyse statt Wartung verbringen. Sie zieht auch reichhaltigere Felder — Follower-Zahlen, Speicher- und Kommentaranzahlen, Kategorien und Hashtags — die ein schneller DOM-Scrape auf dem Tisch lässt.
Häufig gestellte Fragen
Wie scrape ich Pinterest mit Python?
Verwenden Sie einen Headless-Browser wie Playwright anstelle von einfachen Anfragen, da Pinterest Inhalte mit JavaScript rendert und keine Daten im rohen HTML hinterlässt. Setzen Sie einen echten Desktop-User-Agent, laden Sie die Such- oder Board-URL, warten Sie, bis die Pins gerendert sind, und wählen Sie dann jedes div[data-test-id="pinWrapper"] aus und lesen Sie den Titel, die URL und das Bild von jedem.
Hat Pinterest eine öffentliche API?
Pinterest bietet eine offizielle API für Geschäfts- und Entwicklerkonten an, aber sie ist begrenzt, rate-limitiert und auf die Verwaltung Ihrer eigenen Inhalte und Anzeigen ausgerichtet, anstatt auf umfassende Trendforschung im gesamten Netzwerk. Für öffentliche Pin-, Board- und Suchtrend-Daten über Nischen und Märkte hinweg rendern die meisten Forscher die öffentlichen Seiten stattdessen.
Warum blockiert Pinterest meinen Scraper?
Die beiden häufigsten Ursachen sind der Standard-Headless-User-Agent, den Pinterest sofort blockiert, und eine Rechenzentrums-IP, die mit vielen schnellen Anfragen verbunden ist. Beheben Sie beides: Senden Sie einen normalen Chrome-UA, rotieren Sie eine Residential IP pro Sitzung und takten Sie Anfragen mit Wartezeiten und Scrollen, anstatt sie in Schüben abzufeuern.
Ist das Scrapen von Pinterest legal?
Das Sammeln öffentlich sichtbarer Daten befindet sich in einem rechtlichen Graubereich und hängt von der Gerichtsbarkeit, dem Zweck und den Nutzungsbedingungen von Pinterest ab. Halten Sie sich an öffentliche Pins und Boards, vermeiden Sie persönliche Daten und alles, was hinter einem Login steht, und konsultieren Sie einen Rechtsberater für kommerzielle Nutzung. Dies ist allgemeine Information, keine Rechtsberatung.
Pinterest belohnt Geduld: Rendern Sie die Seite, zielen Sie auf den stabilen Pin-Wrapper, aggregieren Sie die beschreibenden Titel und Suchvorschläge in Trendsignale und halten Sie Ihren Fingerabdruck und Ihre IPs sauber. Tun Sie das pro Markt und Sie erhalten einen Frühindikator der Nachfrage, den die meisten Wettbewerber nicht beobachten.