besoin de conseils

Répondre
tarutaru93
Messages : 221
Inscription : ven. 12 janv. 2018 17:44

besoin de conseils

Message par tarutaru93 »

bonjour,

je monte actuellement une base de données pour archiver l'ensemble de mes travaux en archeologie
- rapport de fouilles (sous forme de scan....)
- photos de fouiles (ceramique, verre, coupe stratigraphique etc....)
- plans
etc...

l'ensemble incorporé dans un SIG.

pour le moment, une partie des ces données sont stockées sur HDD en rsync. mais je souhaiterais monté une sauvegarde securisée pour etre consulté a terme via un site web. bref a la fois local et online.
pour cela j'ai recemment acquis un microserver Gen8 auquel j'ai adjoint un xeon E3-1260L et 16Go. je test OMV en ce moment...

que me conseillez vous pour comme structure perenne ?

PS: je precise que je suis novice en reseau, linux, virtualisation. donc merci de ne pas trop utiliser d'abreviations.

en vous remerciant pour debrousailler le sujet.

cordialement
kalistyan
Messages : 14259
Inscription : ven. 12 janv. 2018 17:44
Localisation : LYON
Contact :

Re: besoin de conseils

Message par kalistyan »

:hello:

Quid du soft SIG utilisé ?
tarutaru93
Messages : 221
Inscription : ven. 12 janv. 2018 17:44

Re: besoin de conseils

Message par tarutaru93 »

bonjour,

le SIG: https://www.esrifrance.fr/

avec le SIG je repertorie l'ensemble des mes sites sur une carte IGN. apres je cree une sorte de millesfeuilles:
- carte hydrographique
- carte geologique
- carte geomorpho
etc...
pour chaque site, il lui ai attache une reference de la carte archeologique, qui renvois a des occurences: plan, materiel etc...

donc je souhaiterais stocker mes données brutes, ma base de données etc... dans une architecture la plus securisée possible.
ex: j'ai des photocopies de revues archeologiques (qui s'appelait des societes archeologiques) qui datent des années 1890-1920. le papier s'abime enormement car de mauvaise qualite. bref j'aimerai archiver de facon perenne tout ce materiel pour une meilleur conservation et pouvoir encore travailler dessus.

voila dans les grandes mon travail....

merci

cordialement
kalistyan
Messages : 14259
Inscription : ven. 12 janv. 2018 17:44
Localisation : LYON
Contact :

Re: besoin de conseils

Message par kalistyan »

:hello:

Si je comprends bien, à l'heure actuelle tout est stocké dans le SIG ?

Exemple avec les photocopies de revues archéologiques, une fois numérisées, elle seront importées dans le SIG ?
tarutaru93
Messages : 221
Inscription : ven. 12 janv. 2018 17:44

Re: besoin de conseils

Message par tarutaru93 »

bonjour,

a quoi me sert le SIG ?
Domaine d'etude: archeologie gallo romaine, les bains privées dans les villa romaine
Zone d'etude: une partie du territoire de l'Aquitaine Romaine (actuellement vienne, deux sevres, creuse etc...)

avec les données cartographiques, je peux localiser sur le territoire defini, les zones d'implantations des villa, les distances, le parcellaires de chacune d'entre elle, etc...
le SIG joue comme une base de données. les données brutes sont deportées et non integrees dans le SIG.

pour la documentation (rapport de fouilles , photos, plans), idem .

ayant perdu un HDD recemment avec des données (j'avais une sauvegarde), je souhaite monter une infrastructure local, pour une sauvegarde plus perenne des mes donnees brutes (en cours d'etude, ou deja etudiées) et plus souple qu'actuellement , meme chose pour la SGDB. par ailleurs, a cote un acces internet securisé pour une consultation externe.

apres quelques lectures, certains preconisent un raid 5 dans ma tour principale et un raid 5 en mirroir dans le server , d'autres plutot du raid 1 .... je continu a me renseigner.

voila
Avatar de l’utilisateur
Zedoune
Messages : 15343
Inscription : ven. 12 janv. 2018 17:44

Re: besoin de conseils

Message par Zedoune »

Pour ce qui est du Raid, que ce soit du raid 1 ou raid 5 ou 6, ça permettra d'éviter un arrêt de la machine en cas de défaillance, il suffira juste de changer un disque. Après, le choix du raid ça va dépendre du nombre de disques et de la taille du stockage.

Ce qui est important, c'est d'avoir des sauvegardes (le raid n'étant pas une sauvegarde bien évidemment), et d'avoir une sauvegarde qui fonctionne et qui ne se trouve pas dans le même lieu que les données sauvegardées (en cas d'incendie/inondation/cambriolage) etc...
Avatar de l’utilisateur
lls
Messages : 1492
Inscription : ven. 12 janv. 2018 17:44

Re: besoin de conseils

Message par lls »

Quel est le volume de tes données ? en local du raid peut être une sécurité en effet mais pas une sauvegarde. Pour la sauvegarde pourquoi pas sur du cloud ?
tarutaru93
Messages : 221
Inscription : ven. 12 janv. 2018 17:44

Re: besoin de conseils

Message par tarutaru93 »

bonjour,

le volume de mes données avoisine les 5 To :pt1cable:
apres avoir creuse le sujet, je partirais sur un raid 1 dans ma tour avec sur hp gen8 un mirroir en raid 1, avec rsync deporté sur deux disques externe. sur une baie du serveur, la partie online. la securite prime sur la performance.

qu'en pensez vous ?

merci

cordialement
TheMartel
Messages : 7550
Inscription : ven. 12 janv. 2018 17:44

Re: besoin de conseils

Message par TheMartel »

Ca veux dire de très gros disques. Mais si tu as les moyens de prendre 4*8to par exemple c'est la meilleure solution.
Tu as qu'elle croissance sur ces données ? (Annuelle on va dire)
Avatar de l’utilisateur
poulpito
Messages : 12402
Inscription : ven. 12 janv. 2018 17:44
Localisation : Grenoble

Re: besoin de conseils

Message par poulpito »

bah deux disques de 8To si tu tiens absolument au raid1 vu les prix maintenant autant pas se faire chier ^^
kalistyan
Messages : 14259
Inscription : ven. 12 janv. 2018 17:44
Localisation : LYON
Contact :

Re: besoin de conseils

Message par kalistyan »

:hello:

Etant donné le volume, le service C14 me semble être une bonne solution.
=> https://www.online.net/fr/c14
Avatar de l’utilisateur
Zedoune
Messages : 15343
Inscription : ven. 12 janv. 2018 17:44

Re: besoin de conseils

Message par Zedoune »

kalistyan a écrit : jeu. 1 mars 2018 10:05 :hello:

Etant donné le volume, le service C14 me semble être une bonne solution.
=> https://www.online.net/fr/c14
Je savais pas qu'Online faisait un service du genre.

Par contre "Garantie 3 à 6 ans" :lol: :lol:
gizmo78
Messages : 20037
Inscription : ven. 12 janv. 2018 17:44

Re: besoin de conseils

Message par gizmo78 »

par contre l'upload des 5To t'as intérêt à avoir la fibre :D
Avatar de l’utilisateur
poulpito
Messages : 12402
Inscription : ven. 12 janv. 2018 17:44
Localisation : Grenoble

Re: besoin de conseils

Message par poulpito »

ouai moi je regardai pour ces services y'a qq temps :)
par contre c'est du storage à la amazon glacier c'est pas fait pour des accès permanents ^^ juste du secours
tarutaru93
Messages : 221
Inscription : ven. 12 janv. 2018 17:44

Re: besoin de conseils

Message par tarutaru93 »

bonjour,

merci pour toutes vos reponses. :jap:

sur l'ensemble des 5 to,
- une grosse part est tenu par les photos, indispensables pour la memoire d'un site archeologique (tres souvent enfouissement pour la protection du site pour les generations futures)
- l'autre part, ce sont les archives scannées, rapport, et carte (ign, hydrographique, etc...)

maintenant annuellement, j'ai beaucoup moins de données a sauvegarder. je suis pour le moment sur la phase d'etude et construction de la base de donnée. mais pour une securite perenne, multiplier les types de sauvegarde comme C14 est interessant. (j'ai la fibre :D )

la je partirais sur:

tour de travail: 2 HDD en mirroir

server: raid 1 rsync + 1 HDD pour la partie online

sauvegarde externe:
- 1 dans le cloud
- 1 HHD externe
- 1 sauvegarde via M-disc

qu'en pensez-vous ? la chaine de sauvegarde est elle logique ?

merci

cordialement
kalistyan
Messages : 14259
Inscription : ven. 12 janv. 2018 17:44
Localisation : LYON
Contact :

Re: besoin de conseils

Message par kalistyan »

Les classiques :

Disk-to-disk-to-tape (D2D2T)
Disk-to-disk-to-cloud (D2D2C)
Avatar de l’utilisateur
Zedoune
Messages : 15343
Inscription : ven. 12 janv. 2018 17:44

Re: besoin de conseils

Message par Zedoune »

Faudra penser à vérifier régulièrement l'intégrité des données aussi, que tu puisses restaurer un fichier corrompu à l'aide d'une sauvegarde.
=> ça peut t'aider : https://dataswamp.org/~solene/2017-03-17-integrity.html
Avatar de l’utilisateur
poulpito
Messages : 12402
Inscription : ven. 12 janv. 2018 17:44
Localisation : Grenoble

Re: besoin de conseils

Message par poulpito »

pour ma part j'ai opté pour un stockage chez online en ultime recours (j'aurai pu prendre amazon aussi ... mais j'aime bien online quand même)
sur C14
1x par mois les données de mon nextcloud sont envoyées dessus et je garde qu'une copie chez eux (pour pas prendre trop de place)
tarutaru93
Messages : 221
Inscription : ven. 12 janv. 2018 17:44

Re: besoin de conseils

Message par tarutaru93 »

bonjour,

merci a tous pour tout vos conseils.
j'ai opte pour omv + DRBD avec une sauvegarde dans le cloud, un HDD externe ainsi qu'une sauvegarde sur M-disc.
2 DD's dans ma tour + 2 DD's dans mon serveur. pour le online un HDD.

maintenant il y a plus qu'a !!!! :jap: :jap:


cordialement
Répondre