TXT(speziell) Datei in MySQL übernehmen

[broadcastbenny]

Hallo zusammen,

beschäftige mich seit neustem mit mysql und der möglichkeit Datensätze aus TXT Dateien zu importieren. Hab bisher auch herausgefunden wie es mit gut strukturierten txt-Dateien funktioniert.

Nun hab ich aber ein Problem mit folgender Strukturierung in einer TXT-Datei:

Card Name: Waxmane Baku
Cost: 2W
Type: Creature — Spirit
Pow/Tgh: 2/2
Rules Text: Whenever you play a Spirit or Arcane spell, you may
put a ki counter on Waxmane Baku.

1, Remove X ki counters from Waxmane Baku: Tap X target
creatures.
Set/Rarity: Betrayers of Kamigawa common

(zu finden z.B. unter http://gatherer.wizards.com/default....name&x=49&y=14)


Probleme bereiten mir vor allem der Rules Text da er sich über mehrere Zeilen erstreckt. Dabei kann er auch noch an der Anzahl der Zeilen variieren.

Hat jemand eine Idee wie ich solche Datensätze in MySql einpflegen kann?

Bin für jede Antwort dankbar!
broadcastbenny

[Gweilo]

War mal vor genau dem selben problem ;) (-> magictraders.ch hab ich programmiert)

Die Bezeichnungen wie " Card Name: " sind ja konstant, danach kannst du suchen. Erst mal würde ich den ganzen text danach exploden, dann hast du die Einträge schon mal handlich in einem array.

Danach kannst du jedes Array der Reihenfolge des Auftretens der einzelnen Bezeichnungen durchsuchen, und den rest jeweils aufsplitten.

Zum Beispiel suchst du nach "Cost", also strpos($array[$i]," Cost: "); wenn eine -1 zurückgegeben wird, weisst du dass dieses Feld nicht vorkommt und kannst das nächste überprüfen. Somit kannst du den String nach und nach zerstückeln.

Da mein PHP ein bisschen eingerostet ist, könnte es sein, dass die befehle nicht genau so heissen, wie ich sie hinschrieb...

edit: bevor du fragst, nein, meinen Source code zu posten brint nichts, da ich ein export aus MWS benutzt habe zum import und nicht die Daten aus dem gatherer.

[xabbuh]

Da sich bestimmte Schlüsselworte ja immer wiederholen, könntest du es wohl recht gut mit preg_match_all() probieren. Falls du noch nie mit regulären Ausdrücken gearbeitet hast, empfehle ich dir das entsprechende Kapitel des Tutorials: http://tut.php-q.net/regex.html

[Gweilo]

Das Problem ist, dass gewisse Schlüsselwörter nicht immer vorkommen müssen, deshalb geht das direkte matchen nicht so leicht.

edit: oh, stimmt gar nicht. Dann gebe ich natürlich xabbuh recht, dann geht es mit preg_match() um einiges einfacher

[xabbuh]

Zitat von Gweilo

edit: oh, stimmt gar nicht. Dann gebe ich natürlich xabbuh recht, dann geht es mit preg_match() um einiges einfacher

Auch wenn bestimmte Schlüsselwörter nicht jedes Mal vorkommen, sollte das kein Problem sein. Dafür gibt es ja zum Beispiel das Fragezeichen (= {0, 1}).

[broadcastbenny]

Danke an alle für die schnelle Hilfe.
Werd mal schauen was ich daraus machen kann.
Wenn ich ein Ergebnis habe werde ich es auch posten, kann aber dauern weil ich nicht ganz soviel Zeit habe.

Danke

[broadcastbenny]

So endlich mal Zeit ein Ergebnis zu posten:

PHP-Code:

<?php
    define('MYSQL_HOST',     'hostname');
    define('MYSQL_USER',     'benutzername');

    define('MYSQL_PASS',     'passwort');

    define('MYSQL_DATABASE', 'datenbankname');

    $db_link = mysql_connect(MYSQL_HOST, MYSQL_USER, MYSQL_PASS);
    $db_select=mysql_select_db(MYSQL_DATABASE, $db_link);

$filename="test.txt";//Testdatei
$import=fopen($filename,"r");

$read = fread ($import,filesize($filename)); 

preg_match_all("#(Card Name:)(.*)(Cost:)(.*)(Type:)(.*)(Pow/Tgh:)(.*)(Rules Text:)(.*)(Set/Rarity:)(.*)(\s{2,})#sU",$read, $card);


echo count($card[0]);

for($i=0; $i<=count($card[0]); $i++){
$sql = "INSERT INTO `magickarten` ( `cardnameeng` , `cost` , `type` , `pow` , `rules` , `set` , `cardnamede` , `image` , `rarity` , `id` ) 

VALUES (

'".$card[2][$i]."', '".$card[4][$i]."', '".$card[6][$i]."', '".$card[8][$i]."', '".$card[10][$i]."', '".$card[12][$i]."', '', '', '', ''

);";
echo $card[2][$i];
echo "<br>";
//$result=mysql_query($sql, $db_link) or die (mysql_error());
};
fclose($import);
?>

Soweit so gut, es funktioniert, nur sollte man wissen welche Dateigrössen der Webserver händeln kann. Bei einer Datei mit ca. 7.000 Datensätzen auf die obere Art und Weise formatiert, gibt mein Webhoster auf und zwar mit der Meldung:

Fatal error: Allowed memory size of 8388608 bytes exhausted (tried to allocate 4790109 bytes) in /home/www/web104/html/magic/import.php on line 13

Also bleibt mir nix anderes als die Datei zu stückeln, werds überleben.

Wers gerne Testen möchte hier der Inhalt der Test.txt

PHP-Code:

  Card Name: Absorb

       Cost: WUU

       Type: Instant 

    Pow/Tgh: 

 Rules Text: Counter target spell. You gain 3 life. 

 Set/Rarity: Invasion rare 





  Card Name: Abu Ja’far

       Cost: W

       Type: Creature — Leper

    Pow/Tgh: 0/1

 Rules Text: When Abu Ja’far is put into a graveyard from play, 

             destroy all creatures blocking or blocked by it. They 

             can’t be regenerated. 

 Set/Rarity: Chronicles uncommon, Arabian Nights uncommon 





  Card Name: Abuna’s Chant

       Cost: 3W

       Type: Instant 

    Pow/Tgh: 

 Rules Text: Choose one — You gain 5 life; or prevent the next 5 

             damage that would be dealt to target creature this 

             turn. 

             Entwine 2 (Choose both if you pay the entwine cost.) 

 Set/Rarity: Fifth Dawn common 


Wer noch einen Tipp hat wie man die Speichergrösse klein halten kann, schreibt einfach hier herein.

Bis dann

[Gweilo]

hast du probiert das file zeilenweise auszulesen anstatt es direkt in eine variable zu speichern?

[broadcastbenny]

Zeilenweises auslesen funktioniert meiner Meinung nach nicht, da zu einem bestimmten Datenfeld (z.B. Rules Text) mehrere Zeilen gehören können. Diese würdest du ja durch zeilenweises Auslesen stückeln.

[xabbuh]

Zitat von broadcastbenny

Zeilenweises auslesen funktioniert meiner Meinung nach nicht, da zu einem bestimmten Datenfeld (z.B. Rules Text) mehrere Zeilen gehören können. Diese würdest du ja durch zeilenweises Auslesen stückeln.

Du könntest dann natürlich einfach überprüfen, ob die Zeile mit Card Name anfängt. Wenn dies der Fall ist, fängt einer neuer Datensatz an, ansonsten gehört die Zeile noch zum vorherigen Datensatz.