search

knowit / Dataplattform

3 stars 3 forks source link

Twitter ingestor timer ut #462

Closed leevi978 closed 1 year ago

leevi978 commented 1 year ago

Når man forsøker å invoke ingestoren til Twitter timer den ut etter 120000ms

kjell-r commented 1 year ago

Tror kanskje ingestor kjører, men ser ut som om det ikke er noen crawler for level-1 i prod (nå)? Twitter process feiler på at den ikke finner tabellen.

kjell-r commented 1 year ago

Har manuelt laget en prod_level_1_crawler, etter slik den er i dev. Den er laget med de samme 13 datakildene som i dev, men fra prod s3-bucket.

Ellers som i dev: Schedule Daily at 12:00 AM Exclude pattern:: *_metadata

Data ser ut til å komme inn nå.