Datei einlesen erzeugt "Allowed memory size of 33554432 bytes exhausted"

[mare26]

Huston, wir haben ein Problem. Na ganz so schlimm ist es nun auch nicht. Also folgendes. Ich habe eine Datendatei in der sich diverse Daten für ein Shopsystem befinden. Nun ist es jedoch so, dass diese Datei relativ (16 MB)gross ist. Wobei Sie rein theoretisch auch grösser sein kann. Das Problem ist nun, dass, wenn ich die Datei mit fopen() und anschliessend mit fread() öffnen will, dass soweit auch noch funktioniert, anschliessend jedoch immer die Fehlermeldung "Allowed memory size of 33554432 bytes exhausted(Tried to allocate XXX bytes) kommt. Vermutlich liegt dass daran, dass ich die relativ grosse Datenmenge dann auch noch in ein array packen möchte und mysql tauglich in eine Tabelle reinzu inserten. Nun könnte man ja nun auch sagen, man liest die Datei einfach zeilenweise ein und wertet sie dann einfach so aus. Dazu wäre die Datenstruktur ein bischen ungünstig. Siehe folgend:

[KOPF]
Version: 1.5
Tabelle: Modell
Zeichensatz: ANSI
Waehrung1: EUR
Waehrung2: EUR
Preisgruppe: 1
MwSt_Status: J

[MODELL]
Primkey_Artikel:5550
Modell_EAN: 9920062266132
Anzeige: J
M1_Text: pink
M1_Langtext:
M2_Text:
M2_Langtext:
M3_Text:
M3_Langtext:
W1_Typ: EUR
W1_Preis: 12.00
Lagerbestand: 0.000
Sonderpreis: 0.00
VKempf: 0.00
Preis2:
Preis3:
Preis4:
Preis5:
Mindestbestand:
Sollbestand:
Order_offen: 6.00
Staffel2_Preis:
Staffel3_Preis:
Staffel4_Preis:

[MODELL]
Primkey_Artikel:5550
Modell_EAN: 9920062266132
Anzeige: J
M1_Text: pink
M1_Langtext:
M2_Text:
M2_Langtext:
M3_Text:
M3_Langtext:
W1_Typ: EUR
W1_Preis: 12.00
Lagerbestand: 0.000
Sonderpreis: 0.00
VKempf: 0.00
Preis2:
Preis3:
Preis4:
Preis5:
Mindestbestand:
Sollbestand:
Order_offen: 6.00
Staffel2_Preis:
Staffel3_Preis:
Staffel4_Preis:


...usw.

Ich wüsste nicht, wie ich das so ohne weiteres hinbekommen soll. Vorallem ist es so, um den Script timeout von 30 Sekunden zu umgehen wird dass Script alle 10 Einträge neu gestartet. Ich hab jetzt schon versucht, nur eine gewisse Menge an Daten auf einmal einzulesen fread($handle,1024*1024), was soweit auch funktioniert, allerdings muss ich meinem Skript beim Neustart ja irgendwie sagen wo er gerade war um da dann mit dem Datenimport weitermachen zu können. Leider kann ich die Datenstruktur nicht verändern, also eine horizontale Darstellung erreichen, was die Sache wesentlich vereinfachen würde. Vielleicht habt ihr ja eine Idee, wie man oben dargestellte Struktur mit 34.000 Solcher Datensätze ohne speicherprobleme in eine Mysql-Datenbank reinbekommt, ohne dabei auch noch an einen timeout des Servers zu gelangen. ich bin extrem verzweifelt!!.

Danke schon mal für eure hilfe!