[lauri]

kas keegi on kokku puutunud mõne hea XML->CSV parseriga (soovitavalt vabavara kommertskasutuseks, peab töötama Windowsi platvormil), mis ei oleks väga mäluõgard ning töötaks normaalse kiirusega?
hetkel katsetatud SAXON http://saxon.sourceforge.net/ ei ole kõige parem, kuna tarbib tohutul hulgal mälu (serveris 4GB jäi väheks).
XML fail on parajalt suur ca 366MB ning ilmselt on ka suuremaid faile oodata.
kui keegi teab kuidas sellel parseril mälu kasutust piirata, võib ka teada anda. väikene ajakulu suurenemine on lubatud.

edit: või kui keegi teab kuidas DTS laadimispaketi kaudu kuidagi otse XML -> Teradata andmebaasi kirjed saab võib ka teada anda.

edit2: pole siis kellelgi mingit ideed ega kogemust?

edit3: täpne veateade:
Unhandled Exception: OutOfMemoryException

[andre85]

Kogemus on järgmine (küll mitte Saxoniga, vaid Xalaniga).

XSLT teisendid loevad kogu dokumendi DOM-puu mällu ja teevad siis teisenduse. Seepärast ei sobi mainitud vähendid väga suurte dokumentide teisendamiseks - mälu saab otsa.

Lahendusvariandid.

1) Vaata oma dokumenti. Oletan, et fail sisaldab suurt hulka dokumente, mida teisendatakse tegelikult ükshaaval. Üks väike Java-programmike tükeldaks failid dokumentideks, teisendaks ja sülitaks tulemuse välja. Olen ise selle tee läbi teinud.

2) Kasuta muud tehnoloogiat: http://joost.sourceforge.net/ , streaming transformations http://stx.sourceforge.net/ .

Andres

[lauri]

tänud soovituste eest.

hetkel on seis selline, et kolleegid teevad oma parseri, mis teeb täpselt seda mida vaja, kuna valmislahendusi pole aega otsida ja testida.

lihtsam oleks muidugi XML faili tekitajale öelda, et ole nüüd tubli ja anna asi meile kohe CSV's, kuid arhitektile see ei meeldi ning leedukad vaevalt viitsivad hakata midagi oma süsteemis muutma. ja see asjaajamine võtaks oluliselt rohkem aega. suurkorporatsioonide teema.