Problem ein grosses File (300'000 Rec.) in ein Array einzulesen

[wundi]

Hallo Leute

Ich habe da ein Problem....

Ich will ein File mit ca. 300'000 Rec in ein Array einlesen und dan in die DB einlesen.

PHP-Code:

$array = array();
 $array = file($file); 


Die erste Zeile habe ich nur gemacht um sicher zu sein, dass es auch ein array ist.
In $file habe ich das Flatfile mit den 300'000 Records.
Das Script "hängt" beim Befehl $array = file($file);.
Wenn ich das File in 2 Teile verhacke funktioniert es.

Gibt es eine max. Anzahl von Records die ich in ein Array schreiben kann?

Vielen Dank für jeden Hinweis, auch wenn es nur ein aufmunterndes Wort ist...
:-)

B Funky Wundi Zürich/Switzerland

[Opendix]

was bedeutet bei dir "Das Script hängt"???
fehlermeldungen?

[wundi]

Ich habe eine Linie über dem Befehl ein echo und einen weiteren echo auf der Linie nach dem Befehl. Der erste echo wird noch angezeigt, doch der zweite nicht. Ich habe die Seite auch schon mehrere Stunden laufen gelasen und es passiert doch nichts, sprich der zweite echo kommt nicht...

B Funky Wundi

[Opendix]

mach das mal mit:

error_reporting(E_ALL);

komtm dann auch kein fehler?

[meikel (†)]

Zitat von wundi

Gibt es eine max. Anzahl von Records die ich in ein Array schreiben kann?

Ja - selbst erlebt. Allerdings bekam ich eine Fehlermeldung...

[Opendix]

Zitat von meikel

Ja - selbst erlebt. Allerdings bekam ich eine Fehlermeldung...

na wo liegt den die etwa??

[meikel (†)]

Zitat von Opendix

na wo liegt den die etwa??

Die Fehlermeldung?<g>

Welche Arraygröße PHP bei mir damals angemeckert hatte, weiß ich nicht mehr. Ich zumindest habe mir angewöhnt, nicht mehr mit Kanonen auf Spatzen zu schießen. Ein File mit "300.000 Rec" (CSV?) liest man nicht in den RAM und wartet auf den Kollaps. Sowas wird zeilenweise verarbeitet. Und selbst dann gehört sowas in die Shell, wenn es nicht vorzeitig am Timelimit sterben soll.

Milchmädchenrechnung:
8000000 (üblicher Scriptspeicher) / 300000 (Keys) = 26 Bytes.
Was für ein digitaler Schwachsinn!

[wundi]

Zitat von meikel

Ein File mit "300.000 Rec" (CSV?) liest man nicht in den RAM und wartet auf den Kollaps. Sowas wird zeilenweise verarbeitet. Und selbst dann gehört sowas in die Shell, wenn es nicht vorzeitig am Timelimit sterben soll.

Also. Das File kommt nicht als CSV daher, sondern wird durch einen HOST/ IBM390 erzeugt. Aber kann mir jemand ein Beispiel geben, wie ich eine Zeilenweise verarbeitung ??

Vielen Dank schon mal im Voraus!

Wundi

[meikel (†)]

Zitat von wundi

Aber kann mir jemand ein Beispiel geben, wie ich eine Zeilenweise verarbeitung ??

Das Handbuch kann das:
http://de3.php.net/manual/de/function.fgets.php
Siehe Beispiel 1.

[wundi]

Zitat von meikel

Das Handbuch kann das:
http://de3.php.net/manual/de/function.fgets.php
Siehe Beispiel 1.

Vieeeelen Dank!

Das war genau die Lösung meines Problems! :-)

B Funky Wundi