Differences

This shows you the differences between two versions of the page.

--- commit:futur:robo [2017/04/04 16:35] – boman
+++ commit:futur:robo [2018/07/31 18:12] – boman
@@ Line 1: / Line 1: @@
 ====== Commit ======
-====== Nettoyage VTK ======
+===== Parallélisation du contact sur "faces complexes" =====
-Suite à la migration VTK6, mon Metafor démarrait en plus de 6 secondes sur ma machine Ubuntu. Après une petite analyse, je me suis rendu compte que toutes les libs VTK de ma machine étaient chargées en mémoire suite à une opération de link un peu brutale (je linkais avec toutes les libs, c'est-à-dire ''VTK_LIBRARIES''). Comme les libs VTK d'Ubuntu sont très complètes, je me retrouvais avec plus de 300 .so à charger, dont certaines utilisant MPI... J'ai donc pris le temps de nettoyer ça et de sélectionner une à une les libs VTK qu'on utilise réellement.
+Étonnamment, le S-Rail de la batterie de test ne pouvait pas être lancé en parallèle. Après debug, je me suis rendu compte que les classes ''SurrondednessTest2D'' et ''TriangleSurrondednessTest'' n'étaient pas thread safe. Ceci à cause d'objets géométriques temporaires qui sont définis "statiques" dans ces classes et dans la classe ''Curve'' en vue d'un calcul d'intersections multiples (''Curve::multipleIntersection'').
-Seul petit problème (qui m'a pris une petite journée à résoudre): VTK6.2 d'Ubuntu ne charge pas correctement toutes les libs nécesaires à l'utilisation de ''vtkXYPlotActor'' et, si on ne linke pas explicitement avec ''vtkRenderingfreeType*'', on se retrouve avec une version dont les fenêtres de courbes sont gelées.
+Supprimer ces variables statiques entraîne une allocation (coûteuse) des objets à chaque passage dans la routine et une dégradation énorme des perfs. Je n'ai pas gardé les chiffres précis lorsque j'ai testé de supprimer brutalement ces attributs "static", mais on obtient un temps CPU doublé voire triplé sur le S-Rail.
-====== Nettoyage CMake 3.x ======
+Je me suis donc dit qu'il serait peut être inétressant de tester une "nouvelle" fonctionnalité de TBB: le [[https://www.threadingbuildingblocks.org/tutorial-intel-tbb-thread-local-storage|thread local storage]] (TLS). Il s'agit de permettre à chaque thread de créer ses propres variables statiques. En pratique, il s'agit d'une sorte de map qui permet à chaque thread de récupérer son instance particulière de la variable statique qui est donc dupliquée pour chaque thread et d'éviter ainsi les conflits entre threads.
-J'en ai profité pour gérer correctement les warnings liés aux nouvelles ''POLICY'' de CMake. En effet, lorsque CMake change de comportement au cours des versions, les développeurs définissent une nouvelle ''POLICY'' qui, par défaut n'est pas définie (et produit un warning) et qui peut valoir ''OLD'' (la valeur par défaut - mais qui traduit un comportement qui sera supprimé bientôt) et ''NEW'' (le nouveau comportement qui nécessite peut-être une phase de debug des ''CMakeLists.txt''. J'ai donc activé les nouvelles ''POLICY'' à ''NEW'' et... ça a l'air de marcher.
+Cette manière de faire est la manière "quick & dirty" de paralléliser des variables statiques. Bien que ça soit la manière qui vienne immédiatement à l'esprit, ce n'est pas la manière à privilégier (cfr nettoyage actuel des matériaux), mais dans des cas bien particuliers comme celui-ci (le "suroundedness test" du contact), c'est l'occasion de voir ce que ce système vaut.
-====== Nettoyage images PNG ======
+J'ai donc implémenté ça et les résultats sont plutôt bons puisque le S-Rail ne se voit pénalisé que d'1s sur 53s du test "batterie" par l'ajout de ces maps TBB quand on lance le test en série. Ces bonnes perfs s'expliquent peut-être aussi parce que j'ai supprimé certaines opérations inutiles dans les routines (calcul du numéro de courbe max à chaque passage pour l'assigner aux courbes temporaires!).
-Le nouveau Qt détecte et signale des erreurs dans les profils de couleur de certains PNG. J'ai donc passé tous les PNG du repository à travers PngOptimizer. Ca a supprimé tous les warnings et, accessoirement, ça a réduit la taille de quelques fichiers.
+Par contre, le "thread local storage" permet de lancer le modèle en parallèle et d'obtenir un speedup appréciable: 157s sur 6 threads pour l'emboutissage complet au lieu de 446s sur 1 thread pour la version série.
+Entretemps, j'ai appris que Gaëtan avait réécrit un S-Rail dont la géométrie n'utilise plus de surrundedness test, c'est-à-dire avec uniquement des patchs de Coons. Ce test n'est pas commité alors qu'il permet de simuler également le retour élastique. Je le commiterai plus tard.
-====== Nettoyage macOS ======
+===== Compilation avec un double python 2/3 =====
-J'ai continué la compilation macOS sur le mac du service (''spirou''). J'arrive maintenant à tout compiler (j'ai ajouté parasolid, MUMPS, oo_nda). pour fêter ça, j'ai défini un ''CMake/macos.cmake'' (config de compilation complète) et ''CMake/macos-student.cmake'' (config de compilation sans oo_nda, ni parasolid).
+J'ai adapté les ''CMakeLists.txt'' pour que Metafor cherche exclusivement python 2.7 et ne trouve pas un éventuel python 3.x installé sur la machine (la mienne, en particulier, où les 2 versions coexistent pour des raisons linuxiennes)
-J'ai supprimé ''CMake/OSX-student.cmake'' qui n'est plus utile.
-L'aspect de la fenêtre graphique de metafor était très moche sur Mac dû à un mauvais choix de police de caractère. J'ai donc changé la manière dont les polices de type "monospace" sont choisies. Le rendu est maintenant parfait sur toutes les plateformes (si on utilise Qt 5.2).
+===== Commit David Thomas =====
+J'ai récupéré la version Metafor de David Thomas avant qu'il parte pour commiter ses modifs utilisées pour le couplage SU2-Metafor. Il s'agit principalement d'une option du ''TimeStepManager'' qui permet de ne pas afficher les temps d'archivage à l'écran au démarrage d'un calcul. En effet, dans le cas d'un calcul de couplage, il peut y en avoir beaucoup et on se retrouve avec une quantité impressionnante d'infos inutiles dans le fichier de sortie. Pour l'utiliser:
+  tsm.setVerbose(False)
+===== gmsh.py =====
+L'import gmsh sort maintenant un message d'erreur compréhensible quand un ''.geo'' est spécifié mais non présent (gmsh ne fait pas cette vérification et crée un nouveau maillage... vide).
+===== meshingTools.py =====
+J'ai ajouté une fonction de fusion d'ugrid VTK pour permettre le maillage des "tresses" de Cédric Laurent, un test qu'il n'a jamais commité et que j'ai retrouvé en fouillant ses backups en triant le fouillis du NAS. Je le commiterai plus tard (il nécessite "un peu" de nettoyage et la définition d'extracteurs pertinents).
+ --- //[[r.boman@ulg.ac.be|boman]] 2018/07/31 17:39//