search

EiffL / sfh-inference-hackathon

Repository for SFH inference hackathon at AstroInfo 2021
MIT License
7 stars 2 forks source link

Cleaning #29

Closed yannick1974 closed 2 years ago

yannick1974 commented 2 years ago

Move the TNG100 dataset to code/datasets.

(I also reformatted the code with black).

EiffL commented 2 years ago

oui 'cest pas mal, mais je pense qu'il vaut mieux retirer tout l'ancien dossier sfh dans ce cas, plutot que de retirer uniguement le fichier tng100.py

EiffL commented 2 years ago

et meme du coup your folder "code" could even be named sfh, and then you would be able to do:

from sfh.datasets import tng100
yannick1974 commented 2 years ago

J'ai renommé le module en sfh (je l'avais appelé hackathon). J'ai aussi rajouté une petite fonction pour positionner correctement le data_dir dir tensorflow_datasets sans avoir à jouer avec les liens symboliques.

J'ai aussi déplacé l'ancien code dans le répertoire legacy.

yannick1974 commented 2 years ago

Par contre, j'ai cette erreur quand j'essaie de charger les datasets sur Jean Zay:

ParseError: Failed to construct dataset tng100: Message type "tensorflow_datasets.DatasetInfo" has no field named "fileFormat".
 Available Fields(except extensions): ['name', 'description', 'version', 'configName', 'configDescription', 'citation', 'sizeInBytes', 'downloadSize', 'location', 'downloadChecksums', 'schema', 'splits', 'supervisedKeys', 'redistributionInfo']
yannick1974 commented 2 years ago

Oublie l'erreur ci-dessus. C'est que je ne chargeais pas le bon environnement tensorflow. ;-)