tech-island.com – Seite 2 – To see this site in your language, just translate it!

Fehlerbehandlung in Shell Scripts

Das Standardverhalten in shell scripts ist -anders als in jeder normaler Programmiersprache-, dass bei Fehlern einfach weitergemacht wird.

Und das kann natürlich üble Auswirkungen haben, wenn man später in einem shell script auf Eingaben von früherer Stelle angewiesen ist und diese nicht korrekt verarbeitet werden konnten.

Zum Glück kann man als Option auch in der Shell setzen, dass bei einem Fehler sofort das Script abgebrochen- und nicht einfach weiter gemacht wird.

In logfiles einen bestimmten Zeitraum suchen

Manchmal will man in einem logfile nur einen bestimmten Zeitraum anzeigen lassen. Mit sed lässt sich nach einem start- und Endpunkt suchen, was dafür praktisch ist.

Partitionstabellen klonen

Will man schnell die Partitionstabellen von einer Festplatte auf eine andere klonen (z.B. wenn man ein md Soft-RAID auf mehreren Partitionen hat) geht das mit dem tool sfdisk ganz leicht.

PostgreSQL Operationen

Da bei PostgreSQL nicht alles so simpel ist, wie bei MySQL, hier ein paar Operationen zum schnellen nachschlagen.

Volles Unicode in MySQL Datenbanken

MySQL hatte lange Zeit Probleme mit Zeichensätzen; der bekannte Zeichensalat (auch „Mojibake“ genannt) war die Folge. Dann kam endlich der universelle Zeichensatz Unicode, bzw. UTF8. Praktisch verborgen blieb jedoch bis heute, dass MySQL standardmässig nur einen „beschränkten Unicode Zeichensatz“ verwendet. Dieser besteht nur aus 3, anstelle von 4 Zeichen und war wohl ursprünglich als „Performace-Optimierung“ gedacht.

Das reicht zwar für die allermeisten Schriftzeichen und Symbole, beispielsweise aber nicht für die mittlerweile sehr häufig verwendeten emojis. Schlimmer noch, probiert man ein solches Zeichen (z.B. ein emoji) in die Datenbank einzufügen, wird alles was nach dem Zeichen kommt abgeschnitten. Und das kann wiederum zu schlimmen Sicherheitslücken führen.

Dabei hatte MySQL seit etwa 2010 einen „neuen“ (bzw. den vollen) UTF8-Zeichensatz eingeführt mit dem Namen: utf8mb4.

Neuere Web-Applikationen, wie WordPress oder Typo3 verwenden diesen seit einiger Zeit standardmässig, allerdings nur bei einer Neuinstallation. Viele ältere Datenbanken haben also noch den unvollständigen Zeichensatz eingestellt. Höchste Zeit also die alten Datenbanken mit dem richtigen Unicode Zeichensatz zu aktualisieren.

mysql general query log einschalten

Wenn man einen Vorgang in der mysql/mariadb Datenbank debuggen will, kann es nützlich sein, sämtliche Queries die mysql macht zu loggen. Dies geht mit dem general query log, welches mit diesen drei Zeilen in der /etc/mysql/server.cnf erreicht wird:

log_output=FILE
general_log
general_log_file=/var/log/mysql/queries.log

Aber Achtung: Dies kan enorm viel loggen und ist somit sowohl für die Performance, wie auch Festplatte eine grosse Belastung. Das sollte unbedingt nur kurzzeitig zum Debuggen eines Problems aktiviert. und danach wieder deaktiviert werden.

Vergrössern von MD-RAID arrays

In vielen Setups hat man im Software-RAID (md) Partitionen, anstelle der ganzen Disk. In diesem Fall müssen mehrere Schritte gemacht werden, wenn man die Disk vergrössert um an den zusätzlichen Platz zu kommen.

Bareos: Backup Clients umbenennen

Will man einmal die hostnamen seiner Clients im Netzwerk umbenennen und somit auch die Client-Namen in der bareos Konfiguration entsprechend anpassen muss man vorsichtig sein: Denn dann sieht Bareos jeden Client als „neu“ an und fängt somit wieder mit einem FULL Backup an. Dies kann je anch Anzahl Clients und/oder Speichermenge zu einem plötzlich heftigen Anstieg des Backup-Speichers führen.

regex String zwischen zwei Zeichen isolieren

Mit regex kann man wunderbar nach allen möglichen Ausdrücken suchen. Nur wird z.B. wenn man genau einen String zwischen zwei Zeichen sucht (z.B. in einem HTML Output: <a href=server> will ich nur das Wort „server“) auch das die Zeichen links- und rechts ausgegeben.
Mittels „lookaround“ lässt sich in regex nur der Gesucht String ausgeben.

typo3: Benutzergruppe von Benutzer per SQL auslesen

Will man die Benutzergruppe eines Benutzer in typo3 aus der Datenbank auslesen, steht man zunächst einmal vor einem Problem: Denn alle Benutzergruppen stehen in der Tabelle fe_users im Feld usergroup als Komma-Separierte Liste drin.