ich habe ein Problem mit dem Artikelimport in meinen oxid eshop Community Edition 4.2.0_23610 . Ich will ca. 100.000 Artikel hochladen, die größte Menge, die ich aber bisher in einem Schwung geschafft habe, sind 200 Datensätze, d.h. ich wäre noch ziemlich lange mit dem zerstückeln und hochladen der Datei beschäftigt. Die Fehlermeldung, die ich erhalte, lautet:
Fatal error: Out of memory (allocated 32768000) (tried to allocate 35 bytes) in /homepages/9/d114621870/htdocs/shop3/core/oxbase.php on line 1261
Auf dem 1und1-Server ist noch genügend Speicherkapazität vorhanden und auch der Platz der MySQL-DB ist bei weitem noch nicht ausgeschöpft.
Manchmal kommt aber auch gar keine Meldung auf dem Bildschirm und wenn ich dann in die DB sehe, sind manchmal keine und manchmal ein paar Artikel dazu gekommen.
Ich hoffe, mir kann jemand helfen, so dass ich die nächsten 3 Monate nicht mit dem hochladen von Artikeln zubringen muss.
Mal so nebenbei…was ist dass für ein Shop mit 100.000 Artikeln? Ich habe meine 17000 Artikel per CSV importiert. Hat zwar ein paar Stunden gedauert aber dafür alles fehlerfrei. Such mal im Forum nach einem D3 Import Modul. Glaube dass könnte auch was für Dich sein.
Ansonsten mache ich Dir gerne ein Angebot und jage die Artikel etc. hoch.
Melde Dich einfach per PN .
[QUOTE=medminusshopping;25799]Ich will ca. 100.000 Artikel hochladen[/QUOTE]
So etwas importiert man nicht über den Shop, weil es zu lange dauert. Man kann csv-Dateien direkt in die Datenbank importieren, also ohne Shop. Unsere 25.000 Artikel brauchen mit dieser Methode ca. 15s. Allerdings muß die csv natürlich der Tabellenstruktur oxarticles entsprechen. Dito für Kategorien etc. Letztlich ist es kein echter Import, sondern ein Neuaufbau der entspr. DB-Tabelle. Funktioniert sehr gut und ist automatisierbar.
[QUOTE=Thorsten Albrecht;25854]So etwas importiert man nicht über den Shop, weil es zu lange dauert. Man kann csv-Dateien direkt in die Datenbank importieren, also ohne Shop. Unsere 25.000 Artikel brauchen mit dieser Methode ca. 15s. Allerdings muß die csv natürlich der Tabellenstruktur oxarticles entsprechen. Dito für Kategorien etc. Letztlich ist es kein echter Import, sondern ein Neuaufbau der entspr. DB-Tabelle. Funktioniert sehr gut und ist automatisierbar.[/QUOTE]
Und wie ist das wenn der Provider nur eine gewisse Größe der CSV Datei erlaubt?
[QUOTE=Priester;25866]Und wie ist das wenn der Provider nur eine gewisse Größe der CSV Datei erlaubt?[/QUOTE]
Ich importiere die Daten direkt von der Shell (entweder Unix-Shell oder DOS); da gibt es nirgendwo irgeneine Größenbegrenzung. Es könnte allerhöchstens einen Timeout bei MySql geben, was ich aber für unwahrscheinlich halte. Du meinst vmtl. einen CSV-Import via PHPMyAdmin oder ähnliche Tools? Das ist meist nicht automatisierbar.
[QUOTE=Thorsten Albrecht;25867]Ich importiere die Daten direkt von der Shell (entweder Unix-Shell oder DOS); da gibt es nirgendwo irgeneine Größenbegrenzung. Es könnte allerhöchstens einen Timeout bei MySql geben, was ich aber für unwahrscheinlich halte. Du meinst vmtl. einen CSV-Import via PHPMyAdmin oder ähnliche Tools? Das ist meist nicht automatisierbar.[/QUOTE]
Bei Shared Hostern gibt es da Größenbeschränkungen…
Ich würde den Import auf einer lokalen Installation (XAMPP) machen, und dann die Datenbank mit PHPMyAdmin Dumpen (mit gzip-Kompression).
Und dann mit dem 1 & 1 MySQL-Admin-Tool (PHPMyAdmin, das aber offenbar außerhalb des User-Contextes läuft, und somit nicht in einen Timeout) in die Live-Datenbank importieren.
Wenn das dann immer noch nicht klappt, den 1&1-Support bitten, den Dump einmalig in die DB einzuspielen.
[QUOTE=Thorsten Albrecht;25867]Ich importiere die Daten direkt von der Shell (entweder Unix-Shell oder DOS); da gibt es nirgendwo irgeneine Größenbegrenzung. Es könnte allerhöchstens einen Timeout bei MySql geben, was ich aber für unwahrscheinlich halte. Du meinst vmtl. einen CSV-Import via PHPMyAdmin oder ähnliche Tools? Das ist meist nicht automatisierbar.[/QUOTE]
Richtig. Über PHPMyAdmin klappt dass bei mir nicht. Hatte meine Artikel ( CSV ) gesplittet.Leider.
Gibt es eine Anleitung dazu wie ich dass mit Unix-Shell oder DOS bewerkställigen kann?
Auf jedenfall klingt dass sehr interessant.
[QUOTE=Priester;25869]Gibt es eine Anleitung dazu wie ich dass mit Unix-Shell oder DOS bewerkställigen kann?[/QUOTE]
Ist nicht weiter schwer:
TRUNCATE TABLE `oxarticles`;
# CSV-Importe
LOAD DATA LOCAL INFILE '.\\d50091_oxarticles.csv' INTO TABLE `oxarticles` FIELDS TERMINATED BY ';' ENCLOSED BY '"' ESCAPED BY '\\' LINES TERMINATED BY '
';
Man kann sich damit in einem lokal gehaltenen Shop (z.B. in Xampp) eine Schattendatenbank bauen, die man dann per Dump in den Live-Shop überspielt. Nach einem kurzen Import über eine SSH-Shell ist dann alles aktualisiert (während der Shop ca. 15s hängt). Ist die Alternative, wenn man keine SOAP-Schnittschnittstelle benutzen kann/möchte, um die Daten zu aktualisieren. Auf diese Weise habe ich eine Schnittstelle zur Warenwirtschaft Navision (Dynamics NAV) realisiert, die ganz hervorragend läuft.
[QUOTE=Thorsten Albrecht;25987]Ist nicht weiter schwer:
TRUNCATE TABLE `oxarticles`;
# CSV-Importe
LOAD DATA LOCAL INFILE '.\\d50091_oxarticles.csv' INTO TABLE `oxarticles` FIELDS TERMINATED BY ';' ENCLOSED BY '"' ESCAPED BY '\\' LINES TERMINATED BY '
';
Man kann sich damit in einem lokal gehaltenen Shop (z.B. in Xampp) eine Schattendatenbank bauen, die man dann per Dump in den Live-Shop überspielt. Nach einem kurzen Import über eine SSH-Shell ist dann alles aktualisiert (während der Shop ca. 15s hängt). Ist die Alternative, wenn man keine SOAP-Schnittschnittstelle benutzen kann/möchte, um die Daten zu aktualisieren. Auf diese Weise habe ich eine Schnittstelle zur Warenwirtschaft Navision (Dynamics NAV) realisiert, die ganz hervorragend läuft.[/QUOTE]
Danke Thorsten
Xampp hab ich installiert und die originale DB exportiert und per SQL importiert lokal auf dem Rechner.
Aber…SSH-Shell ? Import? sagt mir nichts bzw. versteh ich nur Bahnhof. Ich soll also nun per SSH-Shell meine CSV Datei mit 17000 Artikeln importieren und dannach irgendwie in den " Originalen Shop " importieren? :eek:
Achten Sie darauf: Nein Fortschrittsbalken wird angezeigt, wenn das Hochladen der Deponie. For huge databases, just wait for the next prompt. Bei großen Datenbanken, nur warten, bis die nächste Frage.
Es sollte sich aber verstehen lassen. Im Wesentlichen geht es ja um die Anweisungen. Wenn Du Lust hast, kannst Du es gern für alle anderen, denen es genauso geht wie Dir, in vernünftiges Deutsch bringen und in die Wiki schreiben.
gibts die Anleitung auch auf Deutsch??