Stockage backup fichiers video HD pro

Stockage backup fichiers video HD pro - Stockage - Systèmes & Réseaux Pro

Marsh Posté le 29-11-2008 à 17:39:25    

bonjour,
une entreprise a besoin de faire en local, hors réseaux, sur poste autonome, de la copie backup, temporaire, de fichiers video professionnels HD issus de caméras HD Panasonic sur carte P2 et à termes sur carte SSD sachant que 1 minute de HD fait 1 Go, les besoins sont importants de l'ordre de 20 à 40 To et des transferts de 50 à 500 Go par jour gardés entre 20 et 30 jours.
les impératifs techniques sont: sécurité, fiabilité, rapidité (pour réduire les coûts d'opération), simplicité d'utilisation pour l'opérateur, tout cela primant sur le coût (dans une certaine mesure quand même puisqu'il faudra bien sûr aussi facturer la prestation de manière compétitive). Si dans l'immédiat l'activité n'est pas en réseau, un évolution doit rester possible.
des idées de technologie, de produits ? DAS, SAS, Fiber Channel,  
merci de vos réponse

Message cité 1 fois
Message édité par Asusfan le 29-11-2008 à 17:39:55
Reply

Marsh Posté le 29-11-2008 à 17:39:25   

Reply

Marsh Posté le 29-11-2008 à 18:47:37    

Ben pour le debit je peux que te conseille le fiber channel, je sais pas si il existe plus rapide sur le marché...

Reply

Marsh Posté le 29-11-2008 à 19:34:45    

Donc carte contrôleur RAID PCI-x ou PCIex16 sortie Fiber Channel (mieux que le SAS?) disques SATA ou disques SAS ? quel type de baies? Quelle carte ou quel type de carte compatible avec un poste linux (ubuntu pour la simplicité d'utilisation de l'opérateur, ou Suse)
merci de ton avis

Reply

Marsh Posté le 30-11-2008 à 20:31:34    

vu la volumétrie, oublie le bricolage.
Il va te falloir une vraie grosse baie de stockage (IBM, NetApp, EMC, HP, Hitachi) pour le stockage des datas.
Avec une bonne config, tu auras de la bonne résilience de données.
Pour la connection, FC. Si t'as qu'un poste à connecter, t'as pas besoin de monter un SAN FC, une connection en direct-attach suffira.
Une bonne carte FC dans le poste opérateur et c'est bon.
Par contre, pour l'OS, préfère Suse car c'est avec RedHat la distibution pour laquelle tu trouveras le plus facilement des drivers et du support, en particulier pour la carte FC.
Mais si t'as jamais fait de storage, fait toi aidé par un pro, la fiabilité des datas ne doit pas se prendre à la légère ..

Reply

Marsh Posté le 30-11-2008 à 20:41:27    

Merci pour ton avis, important. pour la baie j'avais repéré ceci, particulièrement dédié au monde video:
Nexsan SATABeast Xi
 
http://www.nexsan.com/satabeastxi/
ou
http://www.digital-storage.fr/raid-sata.php?menu=24
 
le problème est le support de départ, les cartes P2 sont au format pcmcia j'imagine que trouver un lecteur rapide compatible linux ne doit pas être aisé.
 
sur les cartes P2:
http://en.wikipedia.org/wiki/P2_(storage_media)
 
enfin une marque ou un modèle d'une bonne carte FC m'aiderait :-)


Message édité par Asusfan le 30-11-2008 à 20:43:35
Reply

Marsh Posté le 30-11-2008 à 21:09:43    

pour les supports mobiles, en général, c'est pas le format de connexion du lecteur qui va brider, mais la bande passante de la carte elle-même.
En FC, tu vas pas avoir beaucoup de choix. Qlogic, Emulex et Brocade sont à ma connaissance les seuls, ou au moins les acteurs références.
Ta baie a l'air correcte, quoi que faisant très 'disque externe amélioré' pour l'usage que tu veux en faire.
Si en plus tu le proposes à des clients, ne sous-estime pas la mise en place, et ne te lance pas la dedans tête baissée ...

Reply

Marsh Posté le 01-12-2008 à 00:38:38    

Tu as raison, la mise en place devrait être faite par la société qui commercialise ce genre de solution.
La carte elle-même a un débit théorique de 80Mo/s mais si le lecteur va sur port usb alors le débit sera très réduit ! il faut donc trouver un lecteur qui aille sur un port plus rapide non ?
qu'entends tu par disque dur externe amélioré ? n'est-ce pas le cas de toute tour de disque ?

Reply

Marsh Posté le 01-12-2008 à 10:33:36    

non, pas du tout.
Quand tu commence à parler de cette volumétrie, les Baies contiennent généralement un firmware qui est quasiment un OS a lui tout seul, et qui propose moultes fonctionnalités pour gérer l'ensemble des datas, et faire plein de choses en fait.
Je te conseille rééllement de rentrer en contact avec un prestaa pour avoir une présentation des solutions qui exsitent.
Sinon, pour le stockage:
"USB 2.0 en 2000 (480 Mbit/s, vitesse maximum théorique) "

Reply

Marsh Posté le 01-12-2008 à 12:35:21    

Pour le contact avec le prestataire c'est ce qui sera fait. Pour l'usb soit c'est un peu supérieur (en théorique) mais il est rare que l'usb arrive à cette vitesse (60 Mo/s), non ?

Reply

Marsh Posté le 01-12-2008 à 13:45:54    

Bonjour,
 
Les cartes P2 sont disponibles en format PCMCIA  ou Express card pour lecture sur un PC  en fait il suffit  d'un lecteur PCMCIA  (ou PCMCIA vers Express card) a installer sur le systeme.
Concernant le stockage un lien SAS ou Fibre channel est suffisant attaché a unebaie externe RAID de preference RAID 6  pour proteger les données. La performance de la baie de disque sera > a celle du lecteur.
Faire attention a la version de l'os du systeme sur lequel brancher la baie de stockage.  
Il faudra definir :
la facon de gerer la volumetrie  (catalogues, repertoires volmes,..)
L'extension possible de  la capacite de stockage
 
pour le stockage voir aussi .
 
http://www.newnet.fr
 
 
 
 
 
 
 
 

Reply

Marsh Posté le 01-12-2008 à 13:45:54   

Reply

Marsh Posté le 01-12-2008 à 21:52:48    

merci,
un petit coup d'oeil à newnet pour voir qu'il n'y a pas de baies de très grosse capacité 8To max, les besoins sont supérieurs (42 To pour le Nexsan qui n'est pas FC/FC mais simplement FC/SATA.

Reply

Marsh Posté le 02-12-2008 à 11:27:05    

Asusfan a écrit :

bonjour,
une entreprise a besoin de faire en local, hors réseaux, sur poste autonome, de la copie backup, temporaire, de fichiers video professionnels HD issus de caméras HD Panasonic sur carte P2 et à termes sur carte SSD sachant que 1 minute de HD fait 1 Go, les besoins sont importants de l'ordre de 20 à 40 To et des transferts de 50 à 500 Go par jour gardés entre 20 et 30 jours.
les impératifs techniques sont: sécurité, fiabilité, rapidité (pour réduire les coûts d'opération), simplicité d'utilisation pour l'opérateur, tout cela primant sur le coût (dans une certaine mesure quand même puisqu'il faudra bien sûr aussi facturer la prestation de manière compétitive). Si dans l'immédiat l'activité n'est pas en réseau, un évolution doit rester possible.
des idées de technologie, de produits ? DAS, SAS, Fiber Channel,  
merci de vos réponse


 
Il existe une solution en NAS qui est bien performante (que j'ai vu de mes yeux...pas les théoriques annoncées par les constructeurs). Cela s'appelle Exanet (je précise que je ne suis ni revendeur, ni intéressé sur ce produit). Pour ce qui est des disques évite au maximum le SATA (a cause des performances très très moyennes, sauf si tu as pas besoin de bonnes perfs) et privilégie au minimum le SAS et au mieux le FC.
 
En SAN tu as le choix...HDS, EMC et pleins d'autres.
 
Il faut se rendre a l'évidence que cette solution te coutera plus de 100k€ en SAS, et probablement plus de 150k€ en FC.  
 
Ensuite NAS/SAN ben ca dépends si tu souhaites transférer directement sur le serveur final ou si tu passe au travers du réseau. Là c'est ton choix :)
 
En espérant t'avoir aider...

Reply

Marsh Posté le 02-12-2008 à 13:35:36    

Merci de ta réponse, le problème du SAS est la faible capacité des disques, par exemple chez Exanet leur solution à base de SAS peut en contenir 12 de 300 Go, ce n'est pas assez pour de la video. Au contraire leur DX48 à 24 ou 48 disque SATA-2 est bien plus capacitive.

Reply

Marsh Posté le 02-12-2008 à 14:10:38    

si c'est que pour du stockage data, tu t'en fout des perfs.
Par contre, c'est la ou un intégrateur va t'apporter (je sais, j'insiste, mais j'ai peur que tu te lances la dedans seul) c'est sur la config de la baie, le partitionning spécifique à y apporter, la configuration des disques etc ...
parce que je suis pas convaincu qu'une grosse partition de 40 To soi la solution non plus.
-> depuis le temps que le post est ouvert, tu serais deja largement fixé si tu avais demandé à 1 ou 2 intégrateurs qui, vu le budget concerné, n'auraient eu aucun soucis à t'accorder un peu de leur temps ...

Reply

Marsh Posté le 02-12-2008 à 16:50:07    

Mais c'est bien mon intention, hors de question que je m'occupe matériellement de cette mise en place, mais un conseil ici vaut aussi bien qu'un conseil orienté d'un intégrateur revendeur (d'une seule marque). avant de choisir donc ce revendeur, un tour éclairé et documenté des techniques et produits disponibles est indispensables.

Reply

Marsh Posté le 02-12-2008 à 18:29:02    

justements,  
premièrement, je ne parle pas d'un revendeur, mais d'un intégrateur, qui va églamenet s'occuper de l'installation / configuration de base de la solution.
Ensuite, vu le budget qui va t'etre nécessaire, mets-en 2 ou 3 en compétiton, regarde ce qu'ils te proposent, et fait ton choix.
On appelle ca un appel d'offre . c'est très efficace ..

Reply

Marsh Posté le 04-12-2008 à 17:10:00    

Asusfan a écrit :

Merci de ta réponse, le problème du SAS est la faible capacité des disques, par exemple chez Exanet leur solution à base de SAS peut en contenir 12 de 300 Go, ce n'est pas assez pour de la video. Au contraire leur DX48 à 24 ou 48 disque SATA-2 est bien plus capacitive.


 
Non ca c'est la taille "d'un tiroir" tu peux en chainer plusieurs...La solution exanet est une gateway NAS derrière laquelle tu peux mettre 'nimporte quel SAN. Ils peuvent te proposer les leurs (DX..) ou alors tu mets du EMC, HDS, IBM, HP...ou autres il s'en moque car tu lui déclare juste les LUN et il s'occupe du reste.
 
Beaucoup de société de post prod utilise cette solution...et crois moi en besoin de stockage c'est pas mal...

Reply

Marsh Posté le 04-12-2008 à 18:05:59    

je vais prendre contact avec eux dès la décision de lancement du service, merci

Reply

Marsh Posté le 05-12-2008 à 19:13:41    

Asusfan a écrit :

je vais prendre contact avec eux dès la décision de lancement du service, merci


 
Bonsoir,
 
Il faut ne pas partir dans toutes les directions.
 
Pour revenir au probleme de base : Besoin de 40 To pour sauvegarder '' archiver ''  des data venant d'une carte de camera, de ce fait copy et non pas temps reel .
La solution de base a mon sens : Monter un serveru avec le lecteur de carte et y connecter une Baie de stockage.
Une baie bien faite a ce jour suoporte avec des disques SATA des debits e l'ordree de 350- 400 MOctet par seconde en lecture ou ecriture en acces sequentiel ( en une connexion  ) pour obtenir + tel que decrit par les fabricants il faut monter plusieurs Array et le striper sur plusieurs Liens pour obtenir 800-900 - 1600 GOctet par seconde ( celal depent de plus de la taille des blocs en genraral ces valeurs sont données sur des tests effectués avec IO metter dans un contexte ideal) .
Concernant l'utilisation des disque SAS il ne sont utile que dans ce cas ou vous avez  une demande en multiflux en // soit des demandes en IO en non en sequentiel ( la difference de temps d'acces liee a la vitesse de rotation dans ce cas fait la difference).
Concernant la volumetrie des disques SAS : A ce jour ils existent  en 15.000 Trs 146-300-450 GO et en 7200 Trs 500-750-1000 Go (quel serait l'interet de mettre des disques SAS a 7200 trs alors que les SATA sont aussi dispo  en 500-750-1000 Go , pricipalement dans le fait que les SAS on un acces dual port pour les config en redondance ce qui evite de mettre un myultiplexeur en front des SATA  pour les integrer dans une configuration ouble controleur RAID actif actif )
 
Je pense donc que pour votre configuration une baie de 40 To en attachenment fibre chanel ou SAS avec des disques SATA est largement suffisante .
 
Il existe a ce jour sur le marché en version 4 U 2 offres integrant le Maximum de disques . NEXSAN et NEWNET ( leur site n'est pas a jour ) 48 disque extensibles a 96 chez Newnet.
 
Si vous  n'avez  necessité de limiter l'encombrement a 4 U vous pouvez aussi regarder les solutions de type 2 U  12 disques extensibles a 60 ou 96 avec adjonction de châssis esclaves, en general ce type de de solution a l'avantage de supporter a la fois les disque SAS et SATA et finalement est moins couteuse qu'une solution haute densitée.
 
La migration vers une solution NAS (haute performance) ne serait justifiée qu'en cas d'ingest direct de vos cameras.
 
Dans le cas d'une appli tel que vous le  decrivez votre serveur linux connecté sur la baie ed stockage fera office de serveur de fichier pour les users et de support d'ingest des carte des cameras.
A titre d'information.
Une solution NAS temps reel tres haute perf couterait de l'odre de 150 K € alors que une solution Baie de stockage conencté sur votre serveur de l'ordre de 35 K €
 
Si vous souhaitez + d'info je reste disoponible
 
 
 
 
 
 
 
 
 

Reply

Marsh Posté le 05-12-2008 à 19:54:37    

bonjour,
merci pour cette réponse extrêmement complète et documentée. Effectivement il ne s'agit que d'archiver (sur de courtes périodes qui plus est) des data.
pour ce qui est de linux, impossible, les lecteurs des cartes P2 de panasonic n'ont que des drivers XP.vista et MacOSX. D'autres cartes, SxS Pro (Express Card) de Sony, ayant des débits plus élevés, sont aussi envisagées comme sources.  
Pour les solutions de NEXSAN et NEEWNET il est dommage que leur site ne soit pas à jour. L'encombrement n'est pas un problème donc les 4U tout à fait acceptable. Enfin l'idée d'un coût de quelques 35 K€ conviendrait mieux à la société

Reply

Sujets relatifs:

Leave a Replay

Make sure you enter the(*)required information where indicate.HTML code is not allowed