Forbidden PDF - Garbo kan inte hämta

Klimatbyran / garbo

Klimatkollen's data pipeline, processing company sustainability reports

MIT License

5 stars 11 forks source link

Forbidden PDF - Garbo kan inte hämta #64

Open Almendra-ab opened 7 months ago

Almendra-ab commented 7 months ago

Vissa företag förbjuder Garbo att ladda ner deras rapport, så vi behöver ett sätt att komma runt detta. I nuläget har vi identifierat Swedbank och Astra Zeneca som detta gäller (dvs 2/150)

irony commented 7 months ago

Det räcker att ändra user-agent till något annat än fetch så fungerar det på Swedbank:

irony commented 7 months ago

Det fungerar även med en egen user-agent vilket känns mer ärligt: