Métadonnées des CDFs
Attributs globaux
Modification de l’attribut TEXT:
Saito, Y., Delcourt, D., Hirahara, M. et al.
Pre-flight Calibration and Near-Earth Commissioning Results of the Mercury Plasma Particle Experiment (MPPE) Onboard MMO (Mio). Space Sci Rev 217, 70 (2021).
https://doi.org/10.1007/s11214-021-00839-2Quelques autres corrections mineures (VALIDMIN/MAX, etc…)
Une modification important reste à faire, pour décrire les divers datasets.
Une autre fichier Excel devra être complété :
Il comprend 3 colonnes :
-
nom fichier master CDF
-
attribut global : logical_source
-
attribut global : logical_source_description
Il faudra renseigner le dernière colonne qui décrit textuellement le contenu du dataset
Ce sera répercuté dans les master CDF avant retraitement.
Nommage des variables
Tous les noms de variables sont maintenant en miniscules
ex: Epoch ⇒ epoch
Variables temporelles
D’après le WIKI de le Jaxa, une des rares contraintes est d’utiliser les variables suivants:
-
epoch : CDF_TT2000 (nano-secondes depuis J2000), centre de l’acquisition (ISTP recommandation)
-
delta_epoch1 : float (secondes)
-
delta_epoch2 : float (secondes)
-
mdp_ti : TI depuis le dernier reboot (1/512 s)
Comme delta_epoch1 = delta_epoch2 puisque epoch est au centre de l’acquisision, j’ai transformé ca en :
-
epoch : CDF_TT2000 (nano secondes)
-
delta_epoch : float (s)
Avec :
epoch.DELTA_PLUS_VAR = delta_epoch
epoch.DELTA_MINUS_VAR = delta_epochTous les fichiers L1 utilisent maintenant les mêmes variables epoch/delta_epoch SAUF les HKs
Pour les HK, je ne sais pas la durée de validité des données…
[NOTE] On peut utiliser delta_epoch = 0.0 (record varying ou non)
Il faut encore vérifier certains cas (données MEA2 notamment pouvant avoir une périodicité < 4S ⇒ 2s)
Données OMNI L1
Après discussion avec Emmanuel, il faut appliquer
-
depuis le patch du 2019/05/08:
counts = counts / 511 -
avant cette date:
counts = counts / 16
Si tout le monde est OK, j’intègre la modif et je retraite toute la mission.
Métadonnées
J’ai commencé à compléter les attributs des variabiles CDF.
-
J’ai essayé de mettre en parallèle les divers attributs variables décrivant les variable d’un CDF.
Pour une variable :
-
FIELNAM : permet d’afficher un nom cout (< 10 caractères dans l’axe des X)
-
LABLAXIS : idem mais pour l’axe des Y)
-
CATDESC : jusqu'à 80 caractère pour décrire en détail la variable
-
VAR_NOTES : on peu ajouter du texte libre (détailler les valeurs d’une énumération par exemple)
-
J’ai commencé aussi à remplir quelques champs :
-
-
UNITS : unités physiques format texte (eg: nano Tesla)
-
SI_CONVERSION : unité physique avec représentation formelle : coefficient>unités SI eg: (1e-9>T)
Un script python permet d’afficher les attributs, par colonne, et par ligne les diverses variables.
On génère un fichier Excel par dataset.
La modification d’un fichier Excel peut être répercuté ensuite sur les master CDF pour les mettre à jour rapidement.
Les fichiers Excel peuvent être trouvés :
Reste à faire
Il faudrait décrire un peu mieux les variables principales des datasets :
-
counts dans les mmo_mppe-mea1_l1_3d-[high/low/med]
-
omn dans les mmp_mppe-mea1_L1_omni-[16e/32e/64e]
-
pap dans les mmo_mppe-mea1_l1_pap-[16s/4s/2s]
La modification peut être faite dans un des fichiers de chaque groupe et répercutée ensuite (high ⇒ low et med par exemple)
Retraitement des données L1
-
J’ai récupéré toutes les données de TM depuis le lancement sur le serveur SIRIUS.
-
Nous sommes maintenant prêts à retraiter l’ensemble des données L1 sur la machine taranis1.
-
Le retraitement est relativement rapide (moins d’une heure je pense pour l’ensemble de la mission)
-
On pourra retraiter rapidement en cas de modification des métadonnées (probables).
-
Nouvelle nomenclature des fichiers de donnnées mmo_mppe-mea[1/2]_<dataset>_yyyymmdd_vnn.cdf
Il faudra ultérieurement transférer le tout sur rosina1 ou se trouve le serveur WEB bepicolombo.irap.omp.eu
-
nécessite de mettre à jour cl pour prendre en compte la nouvelle nomenclature
-
modifier/vérifier les vues cl existantes
-
modifier/vérifier les liens dans le serveur WEB
