Project

General

Profile

Wiki » History » Version 9

Theo Stassen, 15/03/2023 04:36 PM

1 3 Laurent Mirioni
h1. En bref
2
3 5 Laurent Mirioni
4 6 Laurent Mirioni
5 1 Laurent Mirioni
h1. Infos en vrac (à réarranger)
6
7 2 Laurent Mirioni
h2. Site Web JUICE officiel
8
9
https://www.cosmos.esa.int/web/juice
10
11 1 Laurent Mirioni
h2. JUICE Livelink
12
13
Les présentations des différents SWT sont disponibles sur le livelink de JUCE : https://dms.cosmos.esa.int/cs/cs?func=ll&objId=3169397&objAction=browse&viewType=1 (demander les identifiants à Laurent si besoin)
14
15 6 Laurent Mirioni
h2. JUICE/RPWI Ground segment piipeline 
16 1 Laurent Mirioni
17 6 Laurent Mirioni
Le traitement des données SCM (spectres et formes d'ondes) sera intégré au pipeline du consortium RPWI (lead. Uppsala). 
18
19
Voir le plan de développement ici : https://hephaistos.lpp.polytechnique.fr/redmine/documents/182 (à mettre à jour -> demander à D. Andrews)
20 3 Laurent Mirioni
Gitlab: https://spis.irfu.se/rpwi/rpwi_pipeline/ (compte personnel avec adresse e-mail LPP)
21
Documentation: https://www.space.irfu.se/juice/rpwi_pipeline/index.html (demander les identifiants à Laurent si besoin)
22 7 Theo Stassen
23
Lien pour tutoriel pratique "Python Documentation Using Sphinx Autosummary" : https://medium.datadriveninvestor.com/python-documentation-using-sphinx-f6dc87e1286b
24 8 Theo Stassen
25
h2. Avancées code
26
27
Le readme.md contenu dans le code uploadé sur le github possède une explication complète de la structure du fichier IDL deconvo_vec qui contient tout ce que l'on traduit en python actuellement, et la structure du fichier python deconvo_vec équivalent et de toutes les fonctions qui en découle (en cours de construction).
28 9 Theo Stassen
Je copie une version ici :
29 1 Laurent Mirioni
30 9 Theo Stassen
Documentation FR de l'avancé du portage IDL -> Python.
31
32
Actuellement on se concentre sur le portage de la fonction mms_scm_deconvo_vec
33
34
Cette fonction prend en entrée une waveform et des metadatas. L'object est d'effectuer la calibration continue de la waveform en convolvant le signal par un kernel que l'on construit au préalable.
35
36
Les différentes étapes de mms_scm_deconvo_vec sont :
37
38
    (on précentre la waveform d'entrée)
39
    On souhaite créer un kernel de taille n_k, on commence donc par former un "complex spectrum" s de base (un array de complexes 1+0j, de taille n_k)
40
    On applique à s la fonction mms_scm_corgain (même fichier)
41
    On crée un array de fréquence f linéairement croissant de pas df = f_e / n_k (f_e = fréquence d'échantillonnage), de longueur n_k auquel on soustrait f_e la seconde moitié, on a donc un array de fréquence allant de 0 -> fe/2 puis -fe/2 -> 0 (le format nécessaire pour la fft)
42
    On calcule la réponse c renvoyée par mms_corgain
43
        La fonction récupère les données dans le fichier de référence des antennes (dont on a donné le path), qui contient, pour chaque antenne, un array de fréquence et pour chaque fréquence la réponse complexe référence correspondante.
44
        Si f contient des fréquences en dehors du range du fichier de référence, on considère que la réponse de l'antenne va être calculée pour la fréquence référence la plus proche
45
        On obtient la réponse de l'antenne, calculée pour chaque valeur de f par interpolation des données de référence.
46
        On multiplie cette réponse par la valeur absolue de la réponse du filtre dfb, implémenté dans mms_scm_dfb_dig_filter_resp (qui renvoie une réponse pour chaque fréquence de f)
47
        On multiplie cette réponse par la réponse du filtre bessel, implémenté dans bessel_filter_resp (qui renvoie une réponse pour chaque fréquence de f)
48
        On renvoie cette réponse
49
    Maintenant que l'on a c, on divise s par c (on applique la correction au spectre d'entrée en somme)
50
    La phase du terme de fréquence 0 de la réponse doit valoir 0 pour pouvoir appliquer la FFT, on set ce terme à la valeur absolue de sa valeur complexe
51
    On a maintenant un s qui a subit la correction de l'antenne + dfb + bessel
52
    On applique un filtre passe bande par mms_scm_filtspe entre f_min et f_max donnés en entrée
53
    On applique une transformée de fourier inverse, non encore normalisée, à s, on obtient alors ce que le code appelle le kernel (qui n'est pas encore le kernel final)
54
    Maintenant on prend seulement la partie réelle (sachant que l'imaginaire doit être négligeable si les calculs sont corrects)
55
    On shift le kernel
56
    On lui applique la fenetre de convolution (Hanning, coscub, trapezoid, etc)
57
    On normalise le kernel
58
    On peut maintenant effectuer la convolution (mms_scm_fastconvol) pour la waveform d'entrée et le kernel calculé
59
60
Dans le code python, nous aurons une fonction deconvo_vec correspondant à mms_scm_deconvo_vec :
61
62
    (on précentre la waveform d'entrée)
63
    On crée l'array de fréquence f en premier (-> étape 3.i)
64
    On crée le kernel non normalisé (-> étapes 2 à 6 sauf 3.i), en utilisant la fonction kernel_creation
65
    On crée le complex spectrum de base spectrum équivalent à s (-> étape 2)
66
    On applique la fonction corr_gain_ant à spectrum avec f comme argument (-> étape 3.ii:iv)
67
        On obtient gain_array (équivalent de c), initialement la réponse de l'antenne calculée par la fonction ant_resp (->3.ii.a:c) :
68
            La fonction récupère les données du fichier de référence (->3.ii.a)
69
            Elle règle le problème de valeur hors range (->3.ii.b)
70
            On effectue l'interpolation pour obtenir la réponse de l'antenne (->3.ii.c)
71
        On multiplie gain_array par la valeur absolue de la réponse du filter dfb, implémenté dans dfb_filter (->3.ii.d)
72
        On multiplie gain_array par la réponse du filter bessel, implémenté dans bessel_filter (->3.ii.e)
73
        On divise spectrum par gain_array (->3.iii)
74
        On modifie le terme de fréquence 0 (->3.iv)
75
    On applique une filtre passe bande à spectrum (bandpass_filter) (->5)
76
    On applique la transformée de fourier inverse à spectrum (fft) et obtient kernel (->6)
77
    On vérifie que la partie réelle est bien négligeable et on prend uniquement la partie réelle. (->7)
78
    On shift le kernel (->8))
79
    On applique la fenêtre de convolution choisie à kernel en utilisant la fonction conv_window (->9)
80
    On normalise le kernel (->10)