search

VNG-Realisatie / gemma-zaken

Samen ontwikkelen van API's voor Zaakgericht werken
https://vng-realisatie.github.io/gemma-zaken/
Other
41 stars 27 forks source link

Api test: test details niet zichtbaar #1909

Open johannesbattjes opened 3 years ago

johannesbattjes commented 3 years ago

Bug

Ik heb twee test scenario's, 334 en 337. Tot nu toe zijn mijn testen beide tests gefaald, maar 337 heeft ook enkele succesvolle API calls (kan ik zien in mijn eigen log). 334 toont details met daarbij hoeveel goed/fout. Maar bij 337 zie ik die niet. Bovendien zie ik op de overzichtspagina van dit scenario deze fout staan (kolom action):

Traceback (most recent call last): File "/srv/sites/vng-production/src/vng/servervalidation/task.py", line 93, in execute_test file_html, file_json = nm.execute_test() File "/srv/sites/vng-production/src/vng/utils/newman.py", line 65, in execute_test assert False, error AssertionError: b'error: Script execution timed out after 30000ms\n\n'

Mijn login naam is johannes.battjes@roxit.nl

michielverhoef commented 2 years ago

@HenriKorver Dit klinkt als een fout in het API Test Platform, niet als een fout in de testset.

HenriKorver commented 2 years ago

@johannesbattjes Dit is een issue van een jaar geleden, speelt het nog steeds? Het probleem met die 30-seconden timeout speelde ook een tijdje geleden voor OpenZaak, dus de duur daarvan is opgehoogd naar 180 seconden. Sommige scripts/aanroepen duren wat langer dan waar we tijdens de bouw rekening mee hielden, dus hopelijk helpt het. Maar wat ook zou kunnen is dat de omgeving van Roxit niet bereikbaar is voor api-test.nl, in dat geval krijg je ook een timeout.