Siirry dokumentaation sisältöön

Scraping API

Aja validoituja tiedonkeruutöitä yhden vakaan rajapinnan kautta.

Tässä oppaassa
  1. 1Luo keräystyö
  2. 2Valitse tulosmuodot
  3. 3Pollaa tai vastaanota webhook
Tässä oppaassa
  1. 1Luo keräystyö
  2. 2Valitse tulosmuodot
  3. 3Pollaa tai vastaanota webhook

Luo tiedonkeruutyö

Lähetä julkinen URL-osoite ja halutut tulosmuodot POST-pyyntönä /scrape-päätepisteeseen. Synkroninen odotus sopii pieniin töihin, mutta asynkroninen toimitus on tuotannossa turvallisempi.

cURL
curl -X POST https://api.nordicdevhouse.com/v1/scrape \
  -H "Authorization: Bearer ndh_live_••••••••" \
  -H "Content-Type: application/json" \
  -d '{
    "url": "https://example.com/products",
    "formats": ["json"]
  }'

Työn tilat

TilaMerkitys
queuedHyväksytty ja odottaa kapasiteettia
runningLähdettä haetaan ja validoidaan
completedValidoitu tulos on saatavilla
failedPysyvä virhe keskeytti työn

Tulossopimus

Vastaus sisältää työtunnisteen, vakaan tilan, tietuemäärän, normalisoidun datan ja ajoituksen metatiedot. Käsittele tuntemattomat kentät eteenpäin yhteensopivina lisäyksinä.

Oliko tästä sivusta apua?