search

VNG-Realisatie / api-test-platform

6 stars 3 forks source link

Result details op ATP niet in overeenstemming met Postman #293

Closed HenriKorver closed 5 years ago

HenriKorver commented 5 years ago

Bug

Als ik het script zelf run in Postman krijg ik andere resultaten dan op het ATP:

afbeelding

stevenbal commented 5 years ago

Dit komt doordat de gepubliceerde versie van de Postman collectie is een nieuwere versie dan de postman collectie op het test platform, omdat de gepubliceerde versie automatisch aangepast wordt als ik lokaal veranderingen maak in Postman.

Ik zal kijken of ik de gepubliceerde versie vast kan zetten, zodat hij niet automatisch geupdate wordt, maar ik vrees dat dat niet kan

stevenbal commented 5 years ago

Er zat een fout in de nieuwere versie van de OAS tests, ik heb het als het goed is gefixed en heb de nieuwe versie ook op api-test.nl gezet

stevenbal commented 5 years ago

@HenriKorver ik heb een tag toegevoegd aan de gepubliceerde postman collectie (voor de release candidate van de ZGW api's), dus als er nu updates gedaan worden op de Postman collectie, dan kan ik de tag toevoegen, de vernieuwde collectie en de url op de api-test.nl ook updaten

alextreme commented 5 years ago

Besproken. Vanwege de noodzaak om beide collections (op het ATP en op getpostman.com) in sync te houden is het wenselijk om te documenteren hoe de ATP postman collection opgesteld moet worden, en hoe de Postman getpostman.com beschrijving bijgewerkt dient te worden. Mag in het Nederlands.

stevenbal commented 5 years ago

onder https://github.com/VNG-Realisatie/api-test-platform/tree/master/doc/beheer staat beschreven hoe de gepubliceerde postman collections beheerd kunnen worden

alextreme commented 5 years ago

Lijkt me een nette stappenplan.

@HenriKorver wees vrij om het te doorlopen. Ik kan het me goed voorstellen dat hiernaar wordt gerefereerd wanneer we met een uitgebreidere stappenplan komen hoe derden Postman collections dienen op te stellen en op het ATP kunnen plaatsen.

HenriKorver commented 5 years ago

Ziet er goed uit!