Author: litteulblack

Vous êtes-il déjà arriver de transférer un volume important de données entres deux machines ? Et de vous dire, mon debit est si lent ^^ !!

Si c’est votre cas de transférer beaucoup de données entre serveur et qu’il n’y a pas de problématique du connexion peu sécurisée (transfert dans un réseau local), je vous invitent à lire ces quelques linges.

Il faut savoir que RSYNC utilise SSH pour créer le lien entre les deux machines. Sans m’attarder sur le protocole, on va voir comment réduire la sécurité afin d’augmenter le taux de transfert.

Pour cela je vais passer des options à SSH par le bias de RSYNC à l’aide du “-e”.

rsync -aHAXxv -e 'ssh -T -c aes256-gcm@openssh.com -o Compression=no -x' [source] [destination]

Nous avons donc ici passer les options suivantes à SSH:

• -T: Désactivation du pseudo terminal, ne faisant que du transfert de fichier cela n’est pas utile.
• -c: On défini un cryptage plus “souple” pour ne pas user trop de ressources pour le chiffrement des données.
• -o: Désactivation de la compression des données. La encore on évite la compression de données. Etant sur un réseau local, c’est un gain de temps que de compresser les donner.
• -x: Désactive le transfert X11, car aucun besoin de session d’affichage.

Pour les options de RSYNC, je vous renvoie vers la documentation ^^.

http://www.delafond.org/traducmanfr/man/man1/rsync.1.html

Et voilà ! Vous devriez accélérer de manière significative votre transfert ^^

Il m’arrive souvent d’utiliser la combinaison cron et script bash pour automatiser des tâches.

Mais voilà, parfois elles sont longues a s’exécuter ou le volume de données à traiter est important et cela peut durer des heures.

Afin d’éviter que le script se relance alors qu’il se trouve déjà en exécution, voici ma façon de procéder.

L’ensemble des lignes sont à rajouter dans votre propre script. Il y a aussi obligation qu’il se termine en “.sh” et l’utilisation de _ pour les espacements.

let "PROCESS_RUNNING=$(ps -ax | grep $(echo $0 | grep -o '\w*.sh$') | wc -l) - 3"

if [ ${PROCESS_RUNNING} -gt 1 ]
then
        echo "Proccess ${PROCESS_NAME} is already running"
        exit 1;
else
        ..... Votre code ici .....
        exit 0;
fi

Voilà plus de risque qu’une tâche soit lancée plusieurs fois par un “cron” !

Il m’arrive souvent de devoir récupérer des fichiers depuis Github sur Linux.

Ne voulant pas faire un clone du dépôt, trop lourd pour un ou quelques fichiers, j’utilise un outil bien connu cURL.

Alors pour télécharger uniquement en fichier, utiliser cURL de la manière suivante:

curl -LJO https://github.com/VSCodium/vscodium/releases/download/1.55.1/codium_1.55.1-1618015952_amd64.deb

Pour les plus curieux, voici une courte explication des options passées à cURL

• L : Permet de traiter le code retour 3XX, signalant une redirection HTTP.
• J : Permet d’indiquer le nom du fichier à l’option -O, évitant l’adresse complète.
• O: Enregistre le contenu dans un fichier.