Soutenance de PFE. Evolution de l'outil EZTrace. Charles Aulagnon Inria Bordeaux (SED) Maître de stage : François Rué mars septembre 2011

Dimension: px

Commencer à balayer dès la page:

Download "Soutenance de PFE. Evolution de l'outil EZTrace. Charles Aulagnon Inria Bordeaux (SED) Maître de stage : François Rué mars septembre 2011"

Marthe St-Louis
il y a 8 ans
Total affichages :

1 Soutenance de PFE Evolution de l'outil EZTrace Charles Aulagnon Inria Bordeaux (SED) Maître de stage : François Rué mars septembre 2011 ENSEIRB-MATMECA Tuteur : Corentin Travers

2 Sommaire 1. EZTrace Contexte Présentation 2. Développement Analyse post-mortem Générateur de plugins EZTrace Intégration ptrace Tests de performance 3. Conclusion

3 1. EZTrace

4 EZTrace Contexte Architecture moderne Modèles de progammation Complexes => Applications complexes => Outils d'analyse modernes

5 Quelques définitions : EZTrace Contexte MPI Interface de programmation sur des machines parallèles. S'appuie sur le paradigme de passage de messages. OpenMP Langage de haut-niveau permettant d'écrire des programmes multi-threadés en utilisant un ensemble de directives. Trace Représentation du comportement d'un programme dans le temps.

OpenMP Langage de haut-niveau permettant d'écrire des programmes multi-threadés en

6 EZTrace Présentation Génération de traces d'exécution de programmes HPC (High Performance Computing) Langages supportés C Fortran Interprétation des traces générées Outils de représentation externe en draw gantt ViTE vampirtrace Outil d'analyse statistique : module intégré

Interprétation des traces générées Outils de représentation externe

7 EZTrace Présentation Représentation avec ViTE

8 EZTrace Présentation Interception dynamique d'appels de fonction : LD_PRELOAD

9 EZTrace Présentation Système de plugins 1. Plugins prédéfinis : Bibliothèques standards MPI OpenMP Pthread Allocation dynamique : malloc, free,... Standard I/O : read, write, Plugins définis par l'utilisateur : Bibliothèques dynamiques nécessaires

10 2. Développement

11 Développement Analyse post-mortem Mutex Pthread Temps entre verrouillage libération Fonctionnel pour les rwlocks et les spinlocks Sémaphore Temps entre Post Wait struct pthread_info { }; char *id_thread; char *id_lock; float time_lock; Fonctionnement simple Lock : enregistrement de la structure dans une liste Unlock : calcul du temps passé dans la section critique

$pthread_info { }; char *id_thread; char *id_lock; float time_lock; Fonctionnement simple$

12 Développement Analyse post-mortem MPI Communications : One-to-one / collectives Synchrones / asynchrones Evaluation (min, max, moyenne...) de : Temps de communication Taille des messages Nombre de messages Recouvrement calculcommunication : Temps entre MPI_Isend MPI_Wait Temps passé dans MPI_Wait

..) de : Temps de communication Taille des messages Nombre de messages

13 Développement Analyse post-mortem Matrice de communication

14 Développement Analyse post-mortem Matrice de communication Trace Analyse statistique Génération d'un fichier XML à partir des statistiques <message src= 6 dest= 7 size= 80 nb= 3 /> Analyse syntaxique Sortie au format LaTeX

fichier XML à partir des statistiques <message src= 6

15 Développement Analyse post-mortem Distribution de la taille des messages

16 Développement Générateur de plugins NAME exemple DESC exemple de module pour eztrace ID 23 int foo(int p1, double p2) void bar(int a) int foo(int p1, double p2) { } EZTRACE_EVENT2(FOO_ENTRY, p1, p2); int ret = foo_callback(p1, p2); EZTRACE_EVENT0(FOO_EXIT); return ret; Makefile void handle_foo_entry() {... pushstate(current, "ST_Thread", thread_id, "foo");... }

$EZTRACE_EVENT0(FOO_EXIT); return ret; Makefile void handle_foo_entry() {.$

17 Développement Interception statique Librairies statiques & dynamiques Injection de code dans un programme en cours d'exécution Appel système ptrace Intégration dans EZTrace

18 Programme : Développement Tests de performance Nombre de tours de boucle variable 2 Fonctions appelées par tour de boucle foo : alloue 2 matrices de taille 100x100 en mémoire bar : multiplie les 2 matrices et libère la mémoire Traçage : Avec LD_PRELOAD Avec ptrace

alloue 2 matrices de taille 100x100 en mémoire bar : multiplie

19 Développement Tests de performance

20 3. Conclusion

21 Conclusion Contributions Ajout de statistiques pour les bibliothèques MPI & Pthread Développement du générateur de plugins Intégration de la méthode ptrace dans EZTrace Tests de performance Perspectives d'évolution CUDA, OpenCL Intégration continue : tests

22 Conclusion Compétences C, Programmation système Perl Autotools Travail en équipe SVN SCRUM (méthode agile)

23 Merci de votre attention

Documents pareils

Exécutif temps réel Pierre-Yves Duval (cppm)

Exécutif temps réel Pierre-Yves Duval (cppm) Ecole d informatique temps réel - La Londes les Maures 7-11 Octobre 2002 Plan Exécutif Tâches Evénements et synchronisation Partage de ressources Communications