Changelog

Liste des corrections de PTAR depuis la version 1.7.0.0

• Liste des corrections 1.7.0.0:

  • Les fonctions checkpath() et recoverpath() sont optimisées et améliorées, et devraient être stables à long terme. La fonction recoverpath() a été largement corrigée et optimisée.
  • Le programme entier a été remanié pour fonctionner sur plusieurs threads (-p). Le main lance un certain nombre de threads (passé en paramètre avec la fonction -p), qui vont lancer la procédure traitement() modifiée pour l’occasion. Deux mutex ont été utilisés pour protéger en lecture l’archive source et en écriture les éléments extraits.
  • La décompression se fait donc avant la création des threads et les données sont stockées dans un pipe nommé, cependant, la taille maximale d’un pipe est de 64Ko, et sachant qu’il est nécessaire de tout écrire dans le pipe avant de lire dedans (ici), on ne peut pas décompresser des tar.gz de taille supérieur à 64Ko, sinon le write en entrée du pipe est bloquant ! Il faudra voir une version améliorée du programme (threads+décompression) dans une version supérieur (prévue pour 1.7.2.0).

• Liste des corrections 1.7.0.1:

  • Les threads sont tous lancés et dans le bon nombre. En effet, une mauvaise utilisation de pthread_create conduisait à l’echec de la création mais le traitement se lançait toute de même (dans le thread principal). Aussi, un thread en trop était créé à cause d’une incrémentation inutile du nombre de threads.
  • Si l’option -p n’est pas spécifiée, ne crée aucun thread et appelle traitement() normalement. En effet, ptar ne créait aucun thread, mais n’appelait pas non plus traitement dans ce cas, et terminait normalement sans rien faire.
  • Optimisation de la compatibilité : on considère maintenant que si le champ typeflag contient un NUL (byte nul), il s’agit d’un fichier (typeflag=’0’) : voir tar(5).

• Liste des corrections 1.7.1.0:

  • Les champs char du header ont une terminaison forcée par “\0”, en effet il arrivait que certains champs fusionnent. C’était le cas du typeflag et du linkname dans certains cas (type=2 et link=5 => typeflag=25 apres strtol).
  • Les fichiers/dossiers intermédiaires créés pour les symlink() sont immédiatemment supprimés après création du lien, seulement si le fichier n’existait pas au préalable. Cela permet de créer des liens dans le cas éventuel où leur fichier pointé dans l’archive n’existe pas ou a été supprimé de l’archive (cf tests blancs : include/curses.h).
  • Le checkfile et l’open (et son cas d’erreur) sont désormais bien placés dans le main et non dans traitement() qui est utilisé par les threads (redondance des appels aux fonctions précédents donc).
  • Les symlink vers des dossiers fonctionnent désormais correctement, à condition que les linkname des dossiers pointés se terminent bien par le caractère ‘/’, autrement on ne peut pas le différencier d’un fichier/symlink pointé.
  • Optimisation des fonctions existeFile() et existeDir() et de leur implémentation dans extraction(). Optimisation générale de extraction(). Stabilité accrue pour l’attribution des permissions.
  • Une archive “vicieuse” a été construite sur la base des tests blancs pour vérifier la stabilité du programme. Il s’agit de inc.tar.

• Liste des corrections 1.7.2.0:

  • Une archive corrompue a été ajoutée aux archives test pour vérifier la fiabilité du calcul du checksum.
  • La décompression n’est désormais plus indépendante de l’extraction : tout se fait en même temps. Une petite fonction loadzlib() s’occupe de précharger dynamiquement avec dlopen les fonctions nécessaires au traitementdes archives compressées. La taille d’un tar.gz n’est donc plus limité à 64Ko (mais par le système lui-même).
  • Grâce, entres autres, au point précédent, le programme a été largement optimisé en mémoire, les malloc/realloc et et les free sont désormais moins nombreux. Le programme se rapproche alors des exigences du logiciel embarqué.
  • La durabilité a été accure : des appels à fflush() avant les printf dans la sortie standard permettent d’assurer correctement l’ecriture dans stdout par un threads avant que celui ci ne termine. La durabilité à l’écriture des éléments a déjà été ajoutée en 1.6.
  • Les ressources sont désormais bien mutexées, tous les cas de figures utilisant des threads (et par complémentarité, pas de threads) devrait fonctionner correctement. Des flags d’EOF et de corruption ont été déplacés en variables globales pour être utilisés par les threads afin d’être terminés correctement. La parallélisation crée bien tous les éléments, amélioration de l’algorithme de traitement. Correction du main.
  • A voir pour des linkname en path absolu. Cela fonctionne étrangement meme pour des archives étrangères…

• Liste des corrections 1.7.3.0:

  • Cette version a pour vocation d’être distribuée (au client par exemple).
  • Le dépôt sur la branche master a été nettoyé et rangé pour un release final propre. Les options de débug comme l’option -g de gcc ont également été enlevées. Le code est également allégé de tout commentaires de débug. Le code a également été espacé et nettoyé.
  • Un début de rapport de projet est également déposé.
  • Il est à noter que PTAR gère une archive d’au plus 2048 dossiers différents. Autrement l’attribution de leur date de modification n’est pas toujours assurée. Cette valeur est purement arbitraire et peut être modifiée dans utils.h dans la constante MAXDIR.
  • Une erreur dans le checksum n’arrête plus ptar, il saute tout simplement ce header et passe au suivant à l’instar de tar lors d’une erreur de checksum.
  • Le checksum donne désormais une valeur correcte pour les caractères spéciaux comme ‘è’ grace à un masque (ou ET bit-à-bit) appliqué lors du calcul.
  • La compatibilité de ptar a été améliorée: gère désormais des header “USTAR Pax” en les sautant tout simplement. Dans une version ultérieure les données de ces headers seront utilisés à bon escient; ici il s’agit surtout de permettre une compatibilité avec UTF-8 pour les pathname (c’est-à-dire des caractère spéciaux dans le nom de l’élément comme ‘é’ ou ‘à’).
  • Evolution possible du programme : une compatibilité accrue suivant le système et le type d’archive, en effet ptar ne peut gérer que des archives “USTAR POSIX”, il faudrait le rendre compatible avec les archives “GNU tar”. Ceci est tout de même hors des consignes du sujet.
  • L’archive ‘vicieuse’ d’essai archives_test/inc.tar a été encore améliorée.

• Liste des corrections 1.7.4.0:

  • Une correction de bug majeur mis en évidence par le test blanc du 14/12/16 a été effectuée. En effet, ptar considérait que l’élément pointé par un lien symbolique devait forcément exister avant d’utiliser symlink() : c’était une erreur car certains liens créés sous un environnement puis compressés et désarchivés dans un autre pouvaient ne plus pointer vers rien, mais devaient tout de même exister ! (cf test blanc). Il s’avère que symlink() fonctionne même si l’élément pointé n’existe pas, mais renvoie tout de même -1 (noté dans le logfile si -e est saisie).
  • Le code a subi un nouveau léger nettoyage avant le dernier test blanc bonus et le release final.
  • L’archive vicieuse (renommée pour l’occasion) a encore été améliorée en vu du rodage du programme.

• Liste des corrections 1.7.5.0:

  • Une correction de bug mineur/majeur rapporté par l’ultime test blanc a été corrigé. En effet le temps d’éxecution lors d’un multithreading était multiplié par 10 par rapport à une éxecution séquentielle. Ceci était dû à une mauvaise mutexation dans le corps de traitement. De plus, l’écriture des élément 1 par 1 étaient mutéxée : c’était une erreur ! C’est ce qui causait l’explosion du temps d’éxecution. Désormais le temps d’éxecution en mode threads est légèrement plus faible qu’en séquentiel, ce qui était l’objectif premier de ce programme !
  • Un autre problème dans le main a également été corrigé, tout n’était pas fermé dans le cas ‘sans threads’. Cela devait sans doute causer d’éventuels bug ou problèmes sur certaines archives. (Notamment un core dump avec -e).

• Liste des corrections 1.7.5.1:

  • Le code est amélioré : tous les éléments globaux sont désormais correctement fermés avant TOUTE sortie éventuelle de ptar.
  • Le forcing de la terminaison par ‘\0’ des champs du header se fait désormais correctement.

  Dernère modification : 16/12/2016 - 14:00 - version 1.7.5.1