[Résolu] Importation gros fichier

Discussions et questions sur tout ce qui concerne la programmation tous langages et tous modules confondus.

Modérateur : Vilains modOOs

Règles du forum
:alerte: Balisage obligatoire dans cette section !
Aidez-nous à vous aider au mieux en balisant correctement votre question : reportez-vous sur les règles de cette section avant de poster !
Avatar de l’utilisateur
Don Tice
Fraîchement OOthentifié
Messages : 9
Inscription : 01 oct. 2006 12:26

[Résolu] Importation gros fichier

Message par Don Tice »

Bonjour,

Débutant dans les macros OOo, j'ai pu trouver ici de très nombreuses réponses aux diverses questions que me posait l'adaptation d'une macro excel que j'avais réalisée. J'en remercie ici tous les contributeurs de ce forum.

Cependant je n'ai pu (su ?) trouver de réponses concernant le problème suivant :

Je dois récupérer des données dans un fichier xml de plus de 600 ko, produit par une application tierce, ne contenant aucun retour chariot ni séparateur d'aucune sorte, si ce n'est bien sûr les balises. Dans excel, je m'en sors grâce à :

Code : Tout sélectionner

Open monfichier For Input As #1
Do While EOF(1) = False
Line Input #1, chainedemonfichier
Loop
Close
En fait la boucle Do Loop ne s'effectue qu'une seule fois puisque le fichier xml n'est composé que d'une seule ligne. Je peux ensuite avec des fonctions de texte isoler, récupérer et placer dans des cellules les données qui m'intéressent.

Le problème qui se pose est, que si excel ne semble pas limiter pas la longueur d'une chaîne de caractère, il n'en est pas de même pour OOo qui en limite à 64 k la taille, ce qui bien evidemment m'empêche de lire des données audelà...

Merci par avance des idées que vous pourriez me proposer...

Donald
Dernière modification par Don Tice le 03 oct. 2006 19:06, modifié 1 fois.
Vista libo 3.3.4 , Ubuntu 10.04 libo 3.5.1 et Os X 10.5 libo 3.5.7
Pierre-Yves Samyn
Grand Maître de l'OOffice
Grand Maître de l'OOffice
Messages : 11276
Inscription : 02 mai 2006 08:42

Message par Pierre-Yves Samyn »

Bonjour

Il serait évidemment possible d'ouvrir le fichier dans writer et d'utiliser la programmation spécifique (textcursor) pour parcourir le document.

Autre solution, très inspirée du livre "Programmation OOo" de B. Marcelly et L. Godard chez Eyrolles, passer par le service SimpleFileAccess.

Ce service permet d'utiliser une méthode readBytes à laquelle on indique le nombre d'octets à lire.

Le principe est donc de lire "par bloc" jusqu'à la fin du fichier. Les octets lus sont dans un tableau ; on crée un tableau de texte à partir de celui-ci puis on "joint" le tableau, c'est-à-dire qu'on crée une variable texte. Evidemment, il faut faire attention à la taille limite de ces variables. Dans l'exemple ci-dessous je "découpe" la lecture par blocs de 10000 afin de "tenir" dans ces contraintes. Cette valeur est arbitraire, on peut mettre moins, de toute façon on veut lire tout le fichier.

Code : Tout sélectionner

option explicit

sub PysXML
const PysNb=10000
dim PysSimpleFileAccess as object
dim PysXmlFile as string
dim PysFic as object
dim PysOct as long, PysPaquet(), PysResult(), i as double
dim PysTexte as variant

PysXmlFile = convertToUrl("D:\49210.xml")

PysSimpleFileAccess = createUnoService("com.sun.star.ucb.SimpleFileAccess" ) 
PysFic  = PysSimpleFileAccess.openFileRead(PysXmlFile)

PysOct = PysNb

while PysOct = PysNb
	PysOct = PysFic.readBytes(PysPaquet(), PysNb)

	redim PysResult(ubound(PysPaquet()))	
	
	for i = lbound(PysPaquet()) to ubound(PysPaquet())
		PysResult(i) = chr(PysPaquet(i) and 255)
	next i
	
	PysTexte=join(PysResult())
'***********************************************************************
'	Faire le travail sur PysTexte (ici simple msgbox)
'	msgbox PysTexte
'***********************************************************************
wend

PysFic.closeInput

print "Terminé"
end sub
Plus d'information sur l'API :
http://api.openoffice.org/docs/common/r ... tream.html
et
http://api.openoffice.org/docs/common/r ... ccess.html
Avatar de l’utilisateur
Don Tice
Fraîchement OOthentifié
Messages : 9
Inscription : 01 oct. 2006 12:26

Message par Don Tice »

Bonjour,

Merci pour cette réponse qui répond très bien à ma demande.
J'ai de mon côté fait d'autres recherches et ai trouvé ceci :
http://www.oooforum.org/forum/viewtopic.phtml?t=4907
qui fonctionne également très bien. Cette solution est peut-être plus adaptée à la situation présente : extraire des données d'un fichier xml.
La solution fournie par Pierre-Yves Samyn sera particulièrement adaptée à des situations plus générales.

Encore merci

Donald
Vista libo 3.3.4 , Ubuntu 10.04 libo 3.5.1 et Os X 10.5 libo 3.5.7