SERP-skrabning med OpenClaw: Google, Bing og Brave

Hvorfor multi-motor SERP-skrabning er vigtig

Rankingdata fra én søgemaskine giver kun et delvist billede. Google dominerer, men Bing driver webgrounding for Copilot, og Braves uafhængige indeks bruges i stigende grad af privatlivsbevidste brugere og AI-agenter, der søger en ikke-Google-kilde.

For ethvert workflow der berører SEO-overvågning, konkurrenceefterretning eller AI-berigelse giver hentning af resultater fra alle tre motorer:

• Rankingforskelle på tværs af motorer: en side på plads #3 på Google vises måske ikke i Braves top 20
• Forskellige SERP-funktioner: Bing viser AI-genererede svar og shopping-paneler som Google ikke viser på visse markeder
• Forskellig indeksfrisked: Brave indekserer ofte nyt indhold før Google

OpenClaw-arbejdsflows kan sende en enkelt søgeforespørgsel til alle tre motorer parallelt, aggregere resultaterne og sende dem videre inden for sekunder.

OpenClaw og HTTP Action-noden

OpenClaw er en no-code-automatiseringsplatform bygget til AI-first-arbejdsflows. Dens HTTP Action-node accepterer ethvert REST API-kald-headers, body, godkendelse-og mapper JSON-svaret direkte til nedstrøms noder.

Automs SERP-endepunkter returnerer rent, struktureret JSON uden parsing: organic_results, pagination, search_parameters og search_information er topnøglerne i hvert svar.

Det forudsigelige skema er grunden til, at Autom integreres problemfrit i OpenClaw uden brugerdefineret kode.

Forbind Autom til OpenClaw

Generer en API-nøgle på app.autom.dev inden du bygger et workflow.

Gem nøglen i OpenClaws Credential Vault (Indstillinger → Legitimationsoplysninger → Ny → HTTP Header Auth). Konfigurer:

• Headernavn: x-api-key
• Headerværdi: din Autom API-nøgle

Referer til disse legitimationsoplysninger i hver HTTP Action-node i stedet for at hardkode nøglen.

Skrab Google Search

Google-endepunktet returnerer organiske resultater, pagineringsstatus og SERP-metadata.

POST https://api.autom.dev/v1/google/search
Content-Type: application/json
x-api-key: DIN_API_NØGLE

{
    "query": "bedste projektstyringssoftware",
    "page": 1,
    "gl": "dk",
    "hl": "da",
    "num": 10,
    "device": "desktop"
}

Vigtige svarfelter:

{
    "organic_results": [
        {
            "position": 1,
            "title": "...",
            "link": "...",
            "domain": "...",
            "snippet": "..."
        }
    ],
    "search_information": {
        "total_results": 412000000,
        "time_taken_displayed": 0.31
    }
}

OpenClaw-nodekonfiguration:

• Metode: POST
• URL: https://api.autom.dev/v1/google/search
• Godkendelse: HTTP Header Auth (dine Autom-legitimationsoplysninger)
• Bodytype: JSON
• Map organic_results til din næste node til filtrering eller lagring

Nyttige Google-parametre

Skrab Bing Search

Bings endepunkt afspejler Google-strukturen, hvilket gør det trivielt at duplikere noden ved blot at ændre URL'en.

POST https://api.autom.dev/v1/bing/search
Content-Type: application/json
x-api-key: DIN_API_NØGLE

{
    "query": "bedste projektstyringssoftware",
    "page": 1
}

Bing-resultater er nyttige til:

• Copilot-grounding: Microsofts AI-assistent bruger Bings indeks; rankinger på Bing påvirker AI-genererede citater
• Geografisk dækning: Bing har stærkere markedsandel i visse enterprise- og uddannelsessektorer
• Konkurrencebenchmarking: konkurrenter der kun optimerer til Google ranker sommetider anderledes på Bing

Skrab Brave Search

Brave kører en uafhængig crawler-den er hverken afhængig af Google eller Bing. Den uafhængighed gør det til et renere signal til vurderinger af indholdskvalitet.

POST https://api.autom.dev/v1/brave/search
Content-Type: application/json
x-api-key: DIN_API_NØGLE

{
    "query": "bedste projektstyringssoftware",
    "page": 0
}

Bemærk: Brave bruger nulbaseret paginering (page: 0 for første side).

Svarskemaet er identisk med Google og Bing, så én OpenClaw-behandlingsnode håndterer alle tre output uden forgrening.

Et parallelt multi-motor-workflow

Det mest effektive OpenClaw-mønster kører alle tre motorer simultant:

[Udløser: nøgleordsinput]
        │
        ├── [HTTP: Google Search] ──┐
        ├── [HTTP: Bing Search] ────┤── [Flet] ── [Dedupliker] ── [Gem / Underret]
        └── [HTTP: Brave Search] ──┘

Flettelogik: Brug en Union-node til at kombinere organic_results-arrays fra alle tre svar. Tag hvert resultat med dets engine-kilde inden fletning.

Deduplicering: Filtrer på link-den samme URL der vises i alle tre motorer er et stærkt rankingsignal.

Outputmuligheder: Send det flettede datasæt til Google Sheets, en Postgres-tabel, et Slack-digest eller en AI-node til opsummering.

Praktiske anvendelsestilfælde i OpenClaw

Daglig rankingsporing

Planlæg workflowet til at køre hver morgen. Send en liste med nøgleord via en Loop-node, kald alle tre motorer pr. nøgleord og skriv positionsdata med tidsstempel til et regneark. Registrer fald på mere end 3 positioner og send en advarsel.

Konkurrentovervågning

Spor konkurrentdomæner på tværs af alle tre motorer for et sæt målnøgleord. Når en konkurrent rykker ind i top 5 på en motor, udløs en Slack-notifikation med resultatets titel og uddrag.

AI-agentberigelse

Feed SERP-resultater ind i en GPT-4- eller Claude-node i OpenClaw. Modellen opsummerer konkurrencelandskabet, uddrager fælles temaer fra uddrag og udarbejder et indholdsbriefing-fuldt automatiseret fra et enkelt nøgleord.

Lead-generering

Kombiner lokale Google-resultater (gl + location-parameter) med Bing og Brave for at finde virksomheder i en niche. Udtræk domæner, filtrer kendte konkurrenter fra og send nye leads til dit CRM.

Fejlhåndtering i OpenClaw

SERP-API'er kan lejlighedsvis returnere tomme resultater eller nå hastighedsgrænser. Håndter begge tilfælde:

• Retry ved 429: Konfigurer OpenClaws HTTP-node til at prøve igen op til 3 gange med eksponentiel backoff når hastighedsgrænsen nås
• Retry ved 500: Autom returnerer 500 kun ved interne fejl-sjældent men værd at fange med automatisk retry
• Kontroller antal resultater: Tilføj en Condition-node efter hvert HTTP-kald-hvis organic_results.length === 0, rut til en fallback-gren
• Timeout: Indstil HTTP-nodens timeout til 30.000ms; Automs mediane svartid er under 2 sekunder
• Kun vellykkede anmodninger faktureres: Autom opkræver kun kreditter for 200-svar. Mislykkede anmodninger (4xx, 5xx) koster ingenting-retries er sikre.

Hvad Autom håndterer for dig

At bygge en SERP-skraber fra bunden kræver roterende proxyer, CAPTCHA-løsning, konstant vedligeholdelse når søgemaskiner opdaterer deres HTML-struktur og juridisk eksponering. Intet af det skalerer i en no-code-workflow-builder.

Autom abstraherer hele stakken-proxy-rotation, undgåelse af botdetektion, HTML-parsing, struktureret JSON-levering-så OpenClaw modtager rene, forudsigelige data mens du fokuserer på logikken.

Hvert endepunkt returnerer det samme topniveausskema (organic_results, pagination, search_parameters), hvilket betyder at én OpenClaw-behandlingsnode fungerer uændret på tværs af alle motorer og indholdstyper.

Komplet API-overflade tilgængelig i dine workflows

Alle endepunkter deler den samme x-api-key-godkendelse og 1 kredit pr. kald:

I et OpenClaw-workflow betyder det at du kan kæde motorer og indholdstyper i sekvens: hente organiske resultater fra Google Search, krydshenvise med Google Shopping for produktintentionsforespørgsler, berige med Google News for friskhedssignaler og validere med Brave Search-alt i én automatiseret kørsel.

Hent din API-nøgle på app.autom.dev og gennemse den fulde reference på docs.autom.dev.