Produktfotos mit einfachen Mitteln

Wir haben leider die bittere Aufgabe, von ca. 30.000 Artikel Fotos machen zu müssen. Im Wesentlichen für die interne Verwendung, aber dennoch sollen sie halbwegs professionellen Ansprüchen genügen. Aber wir sind keine „Professionellen“ und wir wollen auch nicht erst einen Fotolehrgang machen. Interessanterweise haben wir jedoch eine professionelle Ausstattung mit Spiegelreflexkamera, Softbox und sündhaft teuren Lampen. Diese hat sich aber als viel zu umständlich und auch vom Ergebnis her als nicht gut erwiesen. Letzteres natürlich nur, weil wir keine Ahnung haben.

Aber angesichts die schieren Menge an Bildern verbietet sich übertriebener Aufwand. Selbst wenn wir nur eine Minute pro Bild benötigen, sind es dennoch 500 Stunden oder 62 komplette Arbeitstage. Also jede gesparte Zeit ist sehr viel Geld.

Wir haben uns eine Auflage mit satinierten Plexiglas gebaut. In einem Raum mit kräftiger Neonbeleuchtung haben wir sodann unsere Smartphones gezückt und so allerhand versucht. Wichtig war es zu erreichen, dass die Artikel keine Schatten warfen. Das Ergebnis, finde ich, kann sich sehen lassen:

artx05-1454-o305-al001 artz0539cl00alklip001artx05-1453-pz-al001

Jedoch will ich nicht verschweigen. dass wir die Bilder nachträglich freigestellt haben. Aber durch die Verwendung der schattenschluckenden Platte, war das sehr schnell erledigt. Mit Live-Auswahlrahmen funktioniert das mit Adobe Fireworks auch sehr schnell.

Mein nächster Schritt wird es sein zu versuchen, das Freistellen zu automatisieren. Für heute in ein Anfang gemacht und ich bin recht zufrieden. „Leider“ gibt es schon viele Bilder, da unsere aber nun doch viel besser sind, müssen wir diese auch erneuern.

Wir haben nun eine Fotostation und definierte Regeln, wonach die Fotos zu machen sind. Einheitlicher und professioneller Darstellung aller Produkte steht nun nichts mehr im Wege. Außer Zeit und Kosten.

 

 

Flowheater macht die Datenübernahme einfach

Worum geht es?

Datenübernahme kann ein schwieriges Geschäft sein. Oder eine Routineaufgabe. Ich habe FlowHeater der FlowHeater GmbH gefunden und möchte meine positiven Erfahrungen hiermit teilen.

flowheater

Im Kollegenkreis hat so jeder seine spezielle Art, Daten zu übernehmen. Zu exportieren, zu synchronisieren oder zu importieren. Es werden Tools der Datenbank, eigene Skripte, oder die Funktionen der Entwicklungsumgebung verwendet. Ich bin aber natürlich der Meinung, ich mache es besser. Ich erstelle Definitionen für Datenübertragungen in einer grafischen Umgebung. Das geht nicht nur schneller, es verhindert auch Fehler. Sicher hat man mit selbst geschriebenen Skripten noch mehr und detaillierte Kontrolle, man muss es aber auch kontrollieren, sprich machen. In FlowHeater klickt man zusammen, testet und führt aus. Und wenn man es dann regelmäßig braucht, gibt es die Möglichkeit der geplanten Batchverarbeitung.

Was ist Flowheater?

  • Eine sehr intuitive Umgebung, um 2 Datenquellen zu verbinden. Ist dies geschehen, können einzelne Tabellen über sogenannte Pipes sehr einfach deren Spalten verbinden
  • Auf dem Wege von der Quelle ins Ziel, lassen sich diese Pipes mit … beeinflussen. So sind vielschichtige Änderungen der auf dem Wege befindlichen Daten möglich
  • Ob Daten nur angefügt, ersetzt und/oder aktualisiert werden sollen, ist über einen simplen Mausklick definiert
  • Diese Projekte lassen sich in einem FlowHeater-Dateiformat speichern und jederzeit wiederholen
  • Es gibt viele Konnektoren. Text, CSV, XML, ODBC, um nur einige und für mich wichtigsten zu nennen

Was macht Flowheater besser?

  • Es fängt Probleme ab Eine Verbindung und Datenübertragung funktioniert nahezu immer auf Anhieb. Zudem gibt es Hilfen wie “Testverbindung”
  • Es fängt Aufwand ab Durch die grafische Benutzeroberfläche ist es auch für den Laien recht einfach, eine Datenübertragung zu realisieren. Aber auch der Profi profitiert. In der Situation”schnell mal eben” aber auch bei komplexen Aufgaben. Vor allem durch die Testfunktionen, ohne wirkliche Übertragung, gestalten sich derartige Aufgaben wesentlich entspannter
  • Es wird protokoliert In einer Ergebnisübersicht sieht man, was passiert ist. Insbesondere auch das, was nicht passiert ist, sprich eine Erklärung, warum einzelne Daten nicht angekommen sind.
  • Es werden SQL-Skripte generiert. So ist ein Import auch ohne FlowHeater ausführbar

Beispiele

Online-Banking

Online-Banking habe ich lange Zeit mit Anwendungen wie “Mein Geld” durchgeführt. Doch immer wieder gab es irgendwelche Probleme mit den Zugängen oder Fehler genereller Art. Mir entstand immer mal wieder der Eindruck, dass ich mich mehr mit der Software, als mit den Daten beschäftigt habe. Eine Lösung musste her. Da es mir nur um Auswertung und hierfür Kategorisierungen ging, hatte ich eine realistische Chance, etwas sinnvolles selber programmieren zu können. Gesagt, getan.

Die Daten der Banken liegen online bei jeder mir bekannten Bank als CSV-Download vor. Einen kleinen manuellen Schritt, der Download dieser Daten, musste ich akzeptieren. Um danach aber keine Hampelei mehr zu haben, konnte ich nun auch für den Import dieser Daten etwas selbst programmieren. Oder Flowheater verwenden. Es ist jetzt nicht überraschend, dass ich mich für Letzteres entschieden habe, denn es hat mir eine Menge Arbeit erspart.

Folgende Aufgaben mussten erfüllt werden

  • Eine wiederverwendbare Definition des Imports
  • Reaktion auf Besonderheiten der jeweiligen CSV-Dateien
  • Manche Datenbanken haben einen aufwändigen Header. Der muss übersprungen werden
  • Direkter Import in eine SQL-Datenbank, ohne diese CSV-Daten vorher noch bearbeiten zu müssen

Umsetzung mit Flowheater

In ein definiertes Verzeichnis lade ich die CSV-Dateien herunter. Das ist der einzige Schritt, bei dem ich noch denken muss. Danach lasse ich FlowHeater die Daten in meine SQL-Datenbank (SAP SQL Anywhere 12) importieren. Und da FlowHeater alles für mich macht, sind die Daten schön aufbereitet in meiner eigenen Anwendung auswertbar.

Mit den sogenannten Heater-Funktionen, könnte ich bereits beim Import schon Regeln definieren und Daten aufbereiten. Denn diese bieten Kontrollstrukturen, Zeichenketten-, Zahlen- und Datumsfunktionen. Ich habe es nicht probiert, aber sicher könnte man an der Stelle Buchungen kategorisieren.

Alt text

Beispiel Umstellung von Artikelnummern

Die eigentliche Aufgabe, wie hier in der Überschrift beschrieben, betrifft Flowheater nun nicht wirklich. Dennoch halte ich dieses Beispiel für erwähnenswert.
Es soll in einer Datenbank mit ca. 40.000 Artikel der Artikelnummerstruktur geändert werden. Diese Daten sollten zunächst einmal schön bearbeitbar in eine Exceltabelle übernommen werden. Eigentlich kein großes Problem. Doch hatte ich das Problem, dass genau nach 16.267 Artikeln der Import abgebrochen ist. So ganz spontan habe ich auch nach der Analyse der Quelldaten keinen wirklichen Grund gefunden, woran das lag.

Hier machte sich dann guter Support bezahlt. Ich habe in meiner Ungeduld mal eben eine E-Mail an den Hersteller geschrieben. Schon nach kurzer Zeit bekam ich eine Antwort. Ich durfte Testdaten senden und bekam innerhalb einer Stunde die Lösung mitgeteilt. Und diese lautete wie folgt:

Das Problem ist, dass in der Bezeichnung teilweise ein „=“ am Anfang steht und Excel hier von einer Formel ausgeht. Siehe Zeile 16.267. Sie können das umgehen indem Sie mittels des String Append Heater ein Anführungszeichen am Anfang der Zeichenkette einfügen, siehe Beispiel.

Und das Beispiel konnte ich dann auch sofort verwenden.

Beispiel EXIF Daten

Mit FlowHeater importiere ich die EXIF-Daten völlig automatisch unter Verwendung des Batch-Moduls in unser ERP-System. Jeden Tag. Kein neues oder geändertes Bild wird übersehen. Die entsprechende CSV-Datei lassen ich über ein EXIF-Tool erzeugen. An der Stelle sein angemerkt, dass das Batch-Modul zusätzliche Kosten verursacht, aber auch im Vergleich zu Zeiterspanis und Nutzen ist dies nicht der Rede wert.

Warum lohnt sich die Investition?

  • FlowHeater spart Zeit. Aus meiner Erfahrung heraus kann ich sagen, sehr viel Zeit.
  • Die Software mag in der Optik vielleicht nicht jeden überzeugen, auch ich dachte zu Anfang, hmm, sieht etwas aus der Zeit aus. Doch darf man sich davon nicht im Negativen blenden lassen. Technisch absolut auf der Höhe der Zeit.
  • Es wird eine Batch-Modul angeboten. Definierte Vorgänge lassen sich dadurch automatisieren. Regelmäßiges Übertragen stellt kein Problem dar. Regelmäßiges Befüllen einer MySQL-Datenbank für Web-Anwendungen aus dem eigenen ERP-System oder anderen/weiteren Quellen lassen sich recht einfach realisieren.
  • Wer einmal EXCEL-Daten in sein ERP-System übernehmen wollte, kennt die Basteleien. Das geht mit FlowHeater definitiv deutlich schneller.

 

Redmine auf aktuellen Stand gebracht, so ist es abgelaufen

Es braucht gar nicht weiter gelesen werden. Ich habe die Aktion abgebrochen. Ich habe eigentlich jede Hürde gemeistert. Ruby in korrekter Version, Rails und Passenger. Passenger ohne Fehlermeldungen. Mysql2 und weitere Dinge, alles hinbekommen. Keine Fehlermeldungen. Aber es funktioniert dennoch nicht. Auch /public ist korrekt.  Redmine will einfach nicht starten. Nachdem ich derart viel Zeit mit dem Thema verbracht habe, musste ich mir wieder ehrlich gestehen, dass man sowas nicht „mal eben“ macht und man sich mehr als gedacht in die Sache rein hängen muss.

Sollte ich sowas noch einmal in Angriff nehmen, denke ich daran schon mal viel Zeit zu reservieren. Und: Ruby On Rails ist nicht meine Welt.


 

Welche Umgebung liegt vor?

Welche Linux-Version?

zulu1902:~# uname -a
Linux zulu1902.*******.de 2.6.32-5-amd64 #1 SMP Tue May13 16:34:35 UTC 2014 x86_64 GNU/Linux

Welche Distribution?

zulu1902:~# lsb_release -a No 
LSB modules are available.
Distributor ID: Debian
Description: Debian GNU/Linux 6.0.10 (squeeze)
Release: 6.0.10
Codename: squeeze

Welche Ruby-Version ist installiert?

zulu1902:~# ruby -v
ruby 1.8.7 (2010-08-16 patchlevel 302) [x86_64-linux]

Welche Rails-Version ist installiert?

zulu1902:~# rails -v
Rails 2.3.5

 Welche Umgebung ist erforderlich?

ruby 1.9.33, 2.0.02, 2.1, 2.2.1
Rails 4.20

Demnach muss Ruby wie auch Rails zunächst aktualisiert werden. Ich habe es zunächst mit RVM probiert, aber irgendwie ursächlich fieser Fehlermeldungen im Zusammenhang mit MySQL den Faden verloren. Nichts ging mehr. extconf.rb:67:in `<main>‘: uninitialized constant Config (NameError) ist zwar relativ sprechend, auch habe ich erfahren, es es nicht mehr Config sondern RbConfig ist. Aber ist habe die Probleme nicht lösen können. Ein beherztes

rvm implode 

hat dieser Geschichte, deren Sinn ich im Nachhinein gar nicht mehr nachvollziehen kann, ein entsprechendes Ende gesetzt. 

 

1. Update Ruby On Rails

Ich habe Ruby zunächst vom System entfernt. Mit
sudo apt-get remove ruby1.8
war das schnell erledigt. Dann habe ich nach dieser Anleitung Ruby komplett neu eingerichtet. Mit
wget ftp://ftp.ruby-lang.org/pub/ruby/2.3/ruby-2.3.0.tar.gz
heruntergeladen und mit folgenden Kommandos kompiliert und installiert:

cd ruby-1.9.3-p547
./configure --enable-pthread --prefix=/usr/local 
make && checkinstall --type=debian --install=yes --fstrans=no --pakdir='~'

Ein erneuter Versuch… 

Ich laufe noch immer auf viele Fehler, also versuche ich es erneut:

rvm install 2.2.1
rvm use 2.2.1
rvm install rails

Probleme mit Passenger

Leider gibt es erhebliche Probleme bei der Installation des Passenger Application Servers. /mod_passenger.so ist nicht zu finden. Ein beherztes

find -iname mod_passenger.so 

hat mir dann den wahren Ort den Apache-Moduls verraten und ich konnte, abweichend von der Installationsdokumentation, den korrekt Pfad eintragen. Und siehe da, Webserver Apache läuft wieder. Nun mit geladenem Passenger-Modul.

Nun kann das Update Redmine durchgeführt werden

Die Anleitung hierzu habe ich hier gefunden: http://www.redmine.org/projects/redmine/wiki/RedmineUpgrade

1. Backup

Da sowieso jeden Tag ein Backup durchgeführt wird, beschränke ich mich auf die Kontrolle, ob es denn heute auch funktioniert hat. Wobei nur die Datenbank gesichert und auf einen anderen FTP-Server übertragen wird, jedoch nicht die Dateien. Dies mache ich sicherheitshalber auch fix per WinSCP manuell. Zu finden in /usr/share/redmine/files

2. Das Update

Es gibt 2 Varianten: Download des Stable Releases oder Checkout aus einen SVN -Repository. Da Letzteres sehr einfach erscheint, es sind nun 2 Befehle an der Kommandozeile, versuche ich zunächst die 2. Option.

svn update
bundle update

Linux ist auch 2015 keine Alternative zu Windows

Heute ist mal wieder ein Tag der Linux-Trickserei. Nachdem in unserem Firmennetzwerk kein GMail mehr erlaubt ist :-((, wollte ich mir eine private VM auf Ubuntu-Basis erstellen. Ich benötige ja nur einen Browser, also warum kein Linux. Erst habe ich Ubuntu probiert. Grottenlangsam. Nun Lubuntu. Live ohne Installation rannte das ganz nett. Nun habe ich installiert und darf mich daran erfreuen:

2015-11-16_16-36-44

Ich setze mir jetzt eine Grenze von 30 Minuten, wenn ich es bis dahin nicht funktionierend habe, installiere ich Windows. Koste es was es wolle.

Soll mich dieser Beitrag in Zukunft immer daran erinnern, dass Linux ein Zeitfresser ist und offensichtlich bleibt.