Questions bêtes sur Synology Drive

[dantou007]

Bonjour,

J'ai installé Drive pour synchroniser mes photos entre mon PC (Intel 12400, 16Go RAM, SSD 1 To system, 6 To HDD), le NAS (Synology DS215j) et mon portable ( Ryzen 5600, 4Go RAM, 1To SSD) reliés par cablage via SFRBox (statistiques ping NAS --- 20 paquets transmis, 20 reçus, 0% packet loss, time 19031ms --- rtt min/avg/max/mdev = 1.344/3.281/4.306/0.726 ms ---  avec le portable 4.3 ms)
.

Et je me trouve confronté à plusieurs problèmes :

1) La synchro est très très lente, du type parfois 1 heure pour synchroniser 1 photo avec le NAS !

2) Depuis hier, cloud-drive-ui m'affiche "Dossier local manquant ou privilèges insuffisants." ? Or je suis dans mon /home et les répertoires et fichiers m'appartiennent  tous ou aux groupex auquels j'appartiens, pour le NAS j'ai la qualité d'administrateur et le pour le Portable, je suis dans le même groupe que le propriétaire. Pour répondre à cet affichage, j'ai mis tous les fichiers concernés par la synchro en chmod 777, tant sur le PC que sur le NAS (par ssh) (bien que sur le NAS, des fichiers semblent rébarbatifs à y passer : rejets "chmod: changing permissions of ‘2023/2023-08/2023-08-28/O_20230828_339.jpg’: Operation not permitted" ??? Pourquoi cette photo ???

3) Drive s'ingénie à synchroniser des photos qui n'ont pas été modifiées, mais pas celles qui viennent de l'être ou qui viennent d'être créées (alors que leur répertoire respectif est aussitôt synchronisé, mais reste vide !!!

4) J'ai plein de fichiers du type 20230214_464.jpg_bQdan_Oct-19-112915-2023_Conflict.jpg qui viennent s'ajouter à mes fichiers. Qu'est-ce ? Qu'en fais-je ? Je les supprime, les renomme ?

Voici les plus importants.

Merci de m'aider à comprendre ce qui se passe.

Cordialement, Dan.

Modifié le 19 octobre 2023 par dantou007

[Lelolo]

@dantou007Il n'y a pas de questions bêtes.
En revanche, il y a des questions posées à un endroit pas du tout approprié.
Tu es possesseur de ton Syno, donc pourquoi poster dans "Questions avant achat" ?
De plus, cela concerne Drive, pourquoi ne pas poster directement dans Drive ?
--> Je déplace (mais avec 49  messages au compteur pour toi, je ne recommencerai pas ; je demande de l'attention...)

[dantou007]

Le 15/10/2023 à 2:55 PM, Lelolo a dit :

@dantou007Il n'y a pas de questions bêtes.
En revanche, il y a des questions posées à un endroit pas du tout approprié.
Tu es possesseur de ton Syno, donc pourquoi poster dans "Questions avant achat" ?
De plus, cela concerne Drive, pourquoi ne pas poster directement dans Drive ?
--> Je déplace (mais avec 49  messages au compteur pour toi, je ne recommencerai pas ; je demande de l'attention...)

Merci Lelolo. Je te prie de bien vouloir m'excuser. J'ai posté une autre question et je n'ai pas fais attention, j'ai posté la suivante sans changer d'emplacement. Merci de m'avoir  redirigé.

[dantou007]

Personne pour m'aider ?

 

[morgyann]

Bonjour,

Ton objectif de sync semble être similaire à celui que j'ai mis en place depuis pas mal d'années avec Drive.

4 PC Win en sync avec un NAS avec une sync bidirectionnelle (sans versionnage) dans mon réseau interne.

Quand je crée, modifie, supprime un fichier sur l'un des postes, la même opération se produit sur les autres, en instantané (ou en décalage si le poste n'a pas été allumé depuis quelques temps, en fait le temps de la mise à jour de la base de données). Cela me permet d'avoir exactement les mêmes fichiers sur chacun de mes postes (de ma pièce bureau au salon et en mode nomade). Une Sync unidirectionnelle (sauvegarde en fait) est opérée quotidiennement sur un nas externe à mon lieu de vie.

En préambule, si je trouve les fonctionnalités de Drive géniales, (synchro, sauvegarde, cloud collaboratif et partage de fichiers en ligne) ; en revanche, sa prise en main et son apprentissage s'avère assez ardu. Il m'a fallu pas mal de temps, de tests et de réglages pour arriver à mes objectifs ...  A ce jour, et malgré des passages de test avec de multiples apps Docker ainsi que Nextcloud, Drive, reste pour moi et pour mon cahier des charges, en haut du podium.

Drive bien réglé est pour ma part, abouti donc, abstiens toi de tenter des bidouillages ... perte de temps ... fais plutôt des tests de sync entre les dossiers avec les différents réglages proposés dans : 1. La console d'administration de Drive (les autorisations sont en partie ici ainsi que les versionnages) 2. Dans le client Drive pour tes périphériques (filtres, règles, correspondances des dossiers ...) 3. Dans Syno-Drive pour l'espace collaboratif 4. Dans ShareSync pour Nas-Nas.

Si j'ai bien compris, tu veux synchroniser en boucle ton Nas avec tes 2 PC (Win je suppose).

1. Effectue (et teste) les réglages nécessaires dans la console d'administration de Drive - vois si tes 2 clients sont reconnus ... versionnage ... 

2. Crée un ( avec ou sans sous-dosiers) ou des dossiers partagés correspondant à ton souhait d'organisation de sync dans ton NAS.

3. Crée le ou les mêmes dossiers (avec les mêmes noms) sur tes périphériques (pc)

4. Elimine la connexion à ton NAS de tes clients (tes périphériques) pour mettre les bases de données à zéro. 

5. Sur chaque client, reconnecte au NAS puis, mets en correspondance chaque dossier ou sous-dossier entre eux. Attention 1 (sous)dossier Nas = 1 (sous)dossier de chaque périphérique. Décoche à chaque opération "créer un dossier drive" et choisi tes options (bi-direction - unidirection etc.)

6. Pour finir et enfin ... répondre à ton arrachage de cheveux, Le dossier Home n'est pas vraiment conçu pour être partagé (même si tu peux y  accéder en SMB de ton PC en étant identifié). C'est le dossier perso qui apparait en fonction de l'utilisateur du Nas. Drive l'utilise dans le cadre de Synology-Drive, cloud collaboratif ou pas à titre perso. Ce dossier Home peut être synchroniser entre 2 Nas à la seule condition que l'utisateur de ces deux nas soit reconnu comme même personne (id, passe et admin). Donc, tu essais de donner des autorisations qui n'ont pas lieu d'être d'autant + en terme de confidentialité et de sécurité. Voilà le pourquoi de "Dossier local manquant ou privilèges insuffisants." 

Normalement, les infos ci-dessus t'aideront à configurer au mieux Drive et à résoudre tes soucis de sync.

Allez, au boulot 

[dantou007]

Bonjour et un grand merci de ta réponse Morgyan. En effet ton projet est sensiblement le même que celui que je cherche à mettre en place : 2 PC sous linux et le NAS avec les 3 ayant leurs photos synchronisées. Si j'avais eu ton protocole, j'aurais certainement gagné beaucoup de temps et réduis mes tracas. Ce qui me rassures, c'est que si je ne l'ai pas tout à fait suivi, j'arrive apparemment au bout !

J'ai effectué des essais en tous genres et suis à peu près arrivé à un flux synchronisé, mais avec, soudainement, une erreur par ci par là ! Comme celle-ci "Dossier local manquant ou privilèges insuffisants." qui a disparu tout aussi soudainement. Je ne synchronise effectivement pas les "home", mais les répertoires "Images" ou "photo" de chacun qui doivent être rigoureusement identiques, avec un protocole de notation et de tags de photo issu de 10 ans d'expériences. J'ai le même nom et la même id dans chacun des PC, avec des droits en écriture sur tous. Pour les accès, je ne passe pas par les "home" mais par le disque sur lequel sont implantées les photos, ce qui évite le problème des liens.

Ce qui me plombe, c'est le temps de réponse, de synchronisation des photos et du processus de synchro. D'essai en essai, j'ai agrandi le champ d'expérience en augmentant les répertoires et sous-répertoires et sous-sous-répertoires, ainsi que le nombre de photos ( ~ 22 000 sur 2023), et ça ne va plus. Certaines se répartissent en 1 mintue sur les 2 PC (et donc le NAS), alors que j'attends toujours celles implantées sur un PC le 10 octobre, et le 2 sur l'autre, avec un mix sur le NAS. Par ailleurs, j'ai désormais un nombre inconsidérable de fichiers de type : "20230214_464.jpg_bQdan_Oct-19-112915-2023_Conflict.jpg " et ne sais qu'en faire : les supprimer, attendre ?

Pour les temps de réponse et de synchronisation, je vais rétropédaler et repartir sur le mois en cours pour voir si ça se comporte mieux. Il faut aussi que j'approfondisse le problème des mots de passe, car apparemment, le Drive-Client n'accepte pas tous les caractères ! Bref, comme tu le dis si bien, tout un tas de petits problèmes à résoudre pour que ça tourne !

Pour le processus de synchronisation, je vais bien trouver quelqu'un qui m'indique où se cachent les bdd, et les étudier pour tenter de comprendre pourquoi certaines photos, certains répertoires, certaines dates ne sont jamais synchronisées.

Les variables à traiter aujourd'hui sont en outre :

1) le flux supportable de mon installation : comment le quantifier puis l'améliorer ?

2) les Drive-Client : nombre de synchronisations et quantités de fichiers pour chacune. Vaut-il mieux plusieurs synchros avec moins de fichiers, une synchro par mois au lieu d'un an, d'un an au lieu de 5 ans ... ?

3) le NAS : le S215J est notoirement sous-dimensionné (J'essaie d'y accéder depuis plus d'1 heure, mais il doit avoir autre chose à faire (quoi ???), car il est saturé (!?) alors que j'ai stoppé toutes les tâches, par exemple). quelles caractéristiques : vitesse, mémoire, logiciel (je suis sous Linux Mageia et utilise une version Debian rpmisée par un utilisateur, Synology ne produisant pas le logiciel en RPM) ? 

Le NAS est ma plus grande interrogation, car c'est de lui que va dépendre la suite. Or je ne trouve pas de test qui me permettrait de faire un choix. A croire que le seul intérêt pour les clients serait le nombre de baies, de sorties RJ45 et le coloris !

Alors si quelqu'un peut m'aider en m'indiquant des outils, des tests, des essais (comme toi), des processus, du matériel .... que sais-je, je suis preneur.

Encore merci.

PS: De ce fait, peut être pourrais-tu me conseiller pour le modèle de NAS ?

Cordialement Dan.

Modifié le 21 octobre 2023 par dantou007

[morgyann]

 

Je n'ai jamais tester ce type de logiciel de sync avec des clients en PC Linux.

Mes PC clients Sync sont sous Win (pour des raisons de logiciels pro et propriétaires avec peu d'équivalent en libre). Mes matériels sous Linux sont quant à eux, dédiés à d'autres projet et fonctionnalités. 

Essaie de consulter la communauté (ou la KB Syno) pour voir si effectivement d'autres réglages ou conf sont à prendre en compte (autorisation, montage, protocole ...) pour la Sync de tes périphériques sous Linux (???).

Il y a 3 heures, dantou007 a dit :

2) les Drive-Client : nombre de synchronisations et quantités de fichiers pour chacune. Vaut-il mieux plusieurs synchros avec moins de fichiers, une synchro par mois au lieu d'un an, d'un an au lieu de 5 ans ... ?

Par expérience, dans ma configuration décrite, sur les 4 périphériques, 3 fonctionnent quasiment au quotidien donc les DB respectives se mettent à jour rapidement. Concernant le dernier, qui est en fonctionnement de façon aléatoire (quelques fois éteint 15 jours d'affilés), la mise à jour de la DB et des fichiers durent très très longtemps (jusqu'à une dizaine d'heures suivant la quantité de modification).

Donc en résumé, si tu fais fonctionner tes sync en même temps que tes modifs, ce sera instantané. Si tu les fait fonctionner après une longue période et après avoir opéré pas mal de modif sur tes fichiers (ajout, retrait, modif de fichiers ...), autant mettre la (DB) Sync du périphérique concerné à zéro, ça ira + vite et tu éviteras les conflits.

 

Il y a 3 heures, dantou007 a dit :

Le NAS est ma plus grande interrogation, car c'est de lui que va dépendre la suite. Or je ne trouve pas de test qui me permettrait de faire un choix. A croire que le seul intérêt pour les clients serait le nombre de baies, de sorties RJ45 et le coloris !

Concernant l'achat de matériel Nas, celui-ci dépend de ton cahier des charges.

Au regard du nombre d'utilisateur et de sites dédiés aux matériels et/ou de leurs usages, tu devrais rapidement obtenir de l'aide pour t'orienter dans tes choix.

[dantou007]

Merci Morgyan.

Il y a 4 heures, morgyann a dit :

 

Essaie de consulter la communauté (ou la KB Syno)

Euh ... c'est quoi la KB Syno ?

Il y a 4 heures, morgyann a dit :

 

Donc en résumé, si tu fais fonctionner tes sync en même temps que tes modifs, ce sera instantané.

Actuellement, bien que les PC aient tourné tous les jours (et parfois la nuit) depuis le 15 octobre, je n'ai encore obtenu aucune synchro après introduction de ~ 400 fichiers dont 200 photos de ~7 - 8 Mégas chacune ( et je viens d'obtenir celles du 10 octobre, avant de t'écrire, soit ~ 100 heures pour 763 fichiers et 3.5 Go)

Modifié le 21 octobre 2023 par dantou007

[morgyann]

il y a 52 minutes, dantou007 a dit :

Euh ... c'est quoi la KB Syno ?

Knowledge Center - Synology - Le Centre de connaissances de Synology offre une assistance complète, fournit des réponses aux questions fréquemment posées, des étapes de dépannage, ...

[dantou007]

Il y a 4 heures, morgyann a dit :

 

Concernant l'achat de matériel Nas, celui-ci dépend de ton cahier des charges.

Au regard du nombre d'utilisateur et de sites dédiés aux matériels et/ou de leurs usages, tu devrais rapidement obtenir de l'aide pour t'orienter dans tes choix.

Eh bien, ce que je recherche doit être assez semblable au tien, je suppose, sauf que je n'ai que 2 PC à brancher. Un temps de réponse acceptable, un temps de synchro de quelques minutes lors des modifications. Lors des entrées, c'est moins important, car 500 photos c'est une grosse journée et elles peuvent se synchroniser pendant qu'on les regarde, c'est à dire une bonne heure (500 dans chaque sens, soit un peu moins de 10 Go). Le problème est que je n'ai aucune idée de ce à quoi ça peut correspondre comme matériel en terme d'UC et de RAM. Et jusqu'à maintenant, tu es la seule bonne âme qui ait bien voulu m'aider !

[morgyann]

Même si le traitement de petits fichiers est + long, 500 photos c'est pas grand chose (?).

Je ne sais pas si ton matériel DS215j est ou pas adapté à ce type de logiciel ? 

Chaque configuration matériel aura + ou moins de facilité à exécuter les tâches demandées.

Pour ma part, et concernant Syno, c'est actuellement un 723+ qui exécute mes tâches de Sync et mes sites et apps en ligne (sous Docker). Après pas mal de tests sur d'autres matériel (serveurs puissants), je suis revenu à ce type de modèle par/rapport à mon cahier de charges et mes tâches en production (consommation, bruit, puissance suffisante pour les exécutions, simplicité et rapidité de mise en place et interventions sur ces instances ...).

[dantou007]

Le 22/10/2023 à 12:18 PM, morgyann a dit :

Même si le traitement de petits fichiers est + long, 500 photos c'est pas grand chose (?).

Je ne sais pas si ton matériel DS215j est ou pas adapté à ce type de logiciel ?

Bonjour. Merci pour ta réponse, qui m'aide bien. J'ai laissé mes 2 PC tourner en continu depuis le 17. Sur le 1, j'ai chargé 280 fichiers et sur le 2, 300. Puis le 19/10, sur le 1: 18 fichiers,et sur le 2: 82. Soit 530 fichiers (2.5 Go - 265 photos et autant de fichiers .xmp (~8 Ko) le 17/10 et 100 (665 Mo- 50 photos + 50 .xmp)) le 19/10. Ils ont été synchronisés le 22/10 pour ceux du 17/10 et le 23/10 au matin pour ceux du 19/10.  Je sais que le DS215J n'est pas taillé pour la synchro, mais comment mesurer si ce sont mes Drive-Client, mon réseau, ou le Drive-serveur qui freinent ? Merci encore pour ton indication de NAS, je vais ainsi pouvoir étudier ses caractéristiques et avoir une base de travail. Cordialement, Dan.