Så identifierar sig boten
RemotejobbBot identifierar sig med user agent-strängen RemotejobbBot/1.0 (+https://remotejobb.se/bot).
Så hämtar boten
Boten följer robots.txt och hämtar sidor sparsamt. Varje annons vi visar länkar tillbaka till originalet.
Stoppa boten
Vill du att vi slutar hämta från er sajt? Lägg till User-agent: RemotejobbBot och Disallow: / i er robots.txt, eller mejla [email protected].