Le portail francophone de la géomatique

Je reviens à la charge pour mon problème de traitement lourd - très lourd - très très lourd.....

Il semble d'après les échanges que j'ai eu avec Veremes et sur ce forum, que le problème ne viens pas des capacités de ma machines mais de mon projet.
Hord mon projet fonctionne convenablement avec d'autres sources. Donc, j'en déduit que cette sources très lourdes est responsable de cette lenteeeeeuuuuuurrrrrrr...:s

Voilà les symptomes :
Le projet fonctionne convenablement, dans des délais raisonnables compte tenu de la lourdeur des sources, jusque mi-parcours ou il deviens de plus en plus lent... Jusque n'en plus finir (j'ai tenu plus de 2 semaines une fois avant de l'arrêter).

Je tente d'utiliser le système de traitement parallèles, toutefois, je n'ai "que" 12 coeurs (et je fais des regroupements par "regions francaise" ou pour encore plus d'allègement par département donc jusqu'une centaines de groupes :s (pour mes tests actuels j'en ai beaucoup moins car je ne traite pas toutes les données sources (et malgré celà je n'arrive pas à terme)..
Ma licence ne me permets par ailleurs que 8 traitements parallèles (à voir si on augmente la licence si celà aiderai considérablement ???)

la lecture des sources prends à elle seule 1h... les contrôles et analyses BDD et format prends environs 9h (ce qui est encore envisageable).. Par contre les étapes suivantes qui contiens en particulier 2 dissolvers (par groupes-le 1er etant très long, le second redissous le 1er donc bcp moin lonf mais nécessaire pour mes comparatifs geometrique entre mon resultat en cours et une autre source) et quelques clippers (avec et sans regroupement), les écriture Excel de toutes les analyses précédentes et 1 buffer et 1 generalizer.

J'utilise le paramètre "parallélisme" à Minimal car avec 12 coeur si j'augmente, je dépasse l'autorisation de ma licence.

Je pense à mettre en plce des sous Projets
- Analyses
- Modifications format
- comparatifs géometrique
etc....

afin de ne pas couper le projet entier si j'ai le moindre beug (comme il m'est arrivé : redémarrage machine :s)

Est ce que celà pourrait accélerer les processus ? Dans ce cas qui pourrait m'expliquer comment lancer automatiquement ces sous projets sachant qu'il y a des paramètres qui sont lié entre un projet et un autre :s

Mon disque qui reçois les fichiers temporaires est assez gros (698 Go), ce n'est pas un SSD. J'ignore s'il est rapide en écriture.
J'ai également 50Go de RAM.

Les sources sont lourdes (environs 7Go - celà pourrait augmenter encore) avec de nombreux vertex (d'ou le dissolver et le Generalizer)
et sont organisés dans plusieurs dossiers et sous dossiers. (4 dossiers contenant environs 6 dossiers chacuns contenant environs  6 dossiers chacuns contenant eux même 300-500 dossiers chacuns qui contiennent des shapes shp dbf prj shx)

une idée de votre côté pour accélerer ce projet afin qu'il ne dépasse pas 2-3 jours ????

croisant les doigts pour qu'un éclair de Génie vous touche ou me touche entre temps (j'y crois moins :s) et dans l'attente de votre retour.