StockistoMarketDataBot
Du är förmodligen här för att du hittade den här boten i dina serverloggar. Här är vilka vi är, vad vi läser och hur du får oss att sluta.
Vad den är
Stockisto driver en katalog över nordiska återförsäljare, varumärken och installatörer, så att konsumenter hittar var de kan köpa en produkt. En del av katalogen bygger på det som företagen själva publicerar öppet. StockistoMarketDataBot är insamlaren som läser de sidorna.
Stockisto drivs av Goty Invest AB (org.nr 559006-5651).
Den skickar den här User-Agent-strängen vid varje anrop:
StockistoMarketDataBot/0.1 (+https://stockisto.com/bot; contact=crawler@stockisto.com)
Båda uppgifterna fungerar. Ser du något som säger sig vara vi men inte matchar strängen är det inte vi: hör av dig till crawler@stockisto.com. Vem som helst kan skicka en User-Agent, så tillåtelselista inte trafik enbart utifrån strängen. Vi publicerar inget fast IP-intervall och vår utgående trafik kan flytta. Behöver du bekräfta att ett anrop verkligen kom från oss? Mejla crawler@stockisto.com med tidpunkt och sökväg, så svarar vi.
Vad den läser
Öppna företagssidor: återförsäljarlistor och ”var kan man köpa”-sidor, företagens kontaktsidor och offentliga företagsregister. Därifrån hämtar den företagsuppgifter (namn, adress, telefon, e-post, webbplats, öppettider) och, när en sida publicerar en namngiven kontaktperson i stället för en allmän adress, personens kontaktuppgifter i arbetet.
Den loggar inte in, passerar ingen betalvägg och går inte runt någon åtkomstkontroll. Det gäller varje källa, utan undantag. Den samlar inte in uppgifter om konsumenter eller privatpersoner.
Hur den beter sig
- Den läser
robots.txtföre allt annat. Som standard stoppas den av enDisallow, och kan vi inte hämta dinrobots.txtalls behandlar vi sajten som stängd i stället för att anta att vi får. - En regel som namnger StockistoMarketDataBot följs alltid, för varje källa och i varje läge. Inget nedan sätter den ur spel.
- Med generella regler och jokertecken är det en annan sak, och vi säger hellre undantagen rakt ut än påstår att de inte finns. Två saker kan sätta en generell regel ur spel: ett litet, individuellt godkänt urval källor kör med robots-regler som bara vägledande, alltså att en Disallow noteras och flaggas i stället för att följas; och en källa har en testinställning, avstängd som standard och inte en del av vår driftsatta konfiguration, som gör samma sak för ett smalt urval listsidor. I båda fallen gäller gränserna ovan ändå (ingen inloggning, ingen betalvägg, ingen åtkomstkontroll), och en uttrycklig regel som namnger oss stoppar oss fortfarande.
- Den respekterar en Crawl-delay i robots upp till en bestämd övre gräns, och stannar där om värdet är högre, så att en felinställning inte kan låsa insamlaren för alltid. Vår egen takt per värd gäller utöver det, den långsammare av de två.
- Den drar ner farten vid 429 och 503, och ger upp.
- Den kör då och då för att uppdatera listningar, inte hela tiden.
Hur du stoppar den
Blockera den i robots.txt. Lägg in det här, så slutar vi vid nästa körning. En regel som namnger vårt produktnamn följs för varje källa och i varje läge: inget av undantagen ovan gäller den.
User-agent: StockistoMarketDataBot Disallow: /
Mejla oss. crawler@stockisto.com är bevakad. Skriv vilken värd det gäller så utesluter vi den.
Ta bort en listning. Att blockera insamlaren stoppar framtida läsningar. Det tar inte bort det som redan är listat. Använd vårt borttagningsformulär. En människa läser varje begäran, och en godkänd borttagning hindrar också listningen från att komma tillbaka vid en senare import.
Äger du företaget? Att ta över sin listning är gratis, och då kan du rätta den i stället för att ta bort den.
Integritet
Handlar uppgifterna om dig och inte om en webbplats du driver? Då är det avsnittet om öppna källor i vår integritetspolicy du vill läsa. Där står vad vi har, vår rättsliga grund, hur länge vi sparar och din rätt att invända. Skicka integritetsärenden till privacy@stockisto.com, inte till insamlarens adress: då når de rätt personer.