Bonjour,
J'ai une matrice stockée dans une table MySQL, dont la structure est composée de 3 champs : ligne, colonne, valeur. Cette table peut être très volumineuse (plusieurs millions de lignes). J'ai besoin d'exporter au format csv cette matrice mais pas en utilisant la façon "classique" de l'export proposé par MySQL (une ligne dans la table = une ligne dans le csv avec des ; entre chaque champ) mais en gardant uniquement le champ "valeur", la position de celui-ci dans le csv reflétant la valeur des 2 autres champs ligne et colonne.
Ex : ma table Matrice contient les lignes suivantes (2 lignes x 3 colonnes) :

 
Je voudrais en sortie, dans mon csv :

 
1ière idée : je concatène les valeurs d'une même ligne dans un seul champ avec le séparateur ;. Pb : comment je fait ça en SQL?
2ième idée : je génère autant de requête qu'il y a de lignes qui vont alimenter par ajout successif un csv.Pb : comment je fait ça en SQL?
autre idée?
 
Merci

j'arrive pas à comprendre comment tu passes de ta matrice à ton csv  
 
mais, pour moi, l'export doit exporter les données calculées, donc tu devras surement passer par une table temporaire pour y construire tes données avant export

bon, j'ai trouvé, la bonne solution est :

 
Par contre, si le fichier existe déjà, la requête plante Une idée de comment forcer la création du fichier? Merci.

 
les 2 première colonnes dans ma table représentent la position de chaque Valeur dans la matrice (la ligne et la colonne, de 0 à n). C'est plus clair? Donc y'a rien à calculer.

ok j'ai saisi

Manque une parenthèse dans ta requête.

Je connais mal la syntaxe mysql, mais si te requête plante , appelle la depuis un batch qui fera un delete du fichier avant de le créer et remplir

Je rajouterais aussi colonne dans ton order

je fais du php, donc c'est comme ça que j'ai résolu la suppression du fichier. Je pensais qu'il y avait une option pour forcer la création.
 
Par contre, j'ai un pb, cette syntaxe marche mais sur une matrice de 4610x3035, il me sort un fichier csv de 4610x119 Je me demande si y'a pas des variables de paramétrage limitant la taille du fichier en sortie ou la taille du buffer qui fait le group_concat ou autre... mais j'ai pas trouvé pour l'instant...

L'exemple meme d'une usina a gaz SQL qui se fait en 3mn chrono avec n'importe quel langage qui sait se connecter a une base mySQL.

ben en php, c'est pas 3 min chrono qu'il faut. Comme j'ai besoin d'avoir 2 fichiers csv (la matrice telle quelle et sa transposée). Assez bizarrement, la création du premier csv met plus de 2h (ça fait un fichier de 144 Mo) alors que le suivant met 20 mins (doit y avoir une histoire de cache qq part, mais ça ne vient pas de mon script). Comme j'ai besoin que ça soit cross-platform, en exe en C, c'est pas super pratique.
 
Là, je veux juste comprendre pourquoi group_concat tronque les données.

Bon, ça vient de la variable group_concat_max_len. Elle est positionnée à 1024. J'ai plus qu'à trouver comment enlever cette limitation et avoir une valeur illimitée (ou suffisamment grande).

Bon, ben j'ai fini par trouver et arriver à ce que je veux grâce à ce site : http://www.mysqlperformanceblog.co [...] extension/

 
J'ai mis group_concat_max_len à 1000000 et ça marche. Je passe de 2h à 3 mins pour mon premier csv et de 20 mins à 3 mins pour mon 2ième. Donc youpi, ça marche

\o/