Blog

Alles Loggen in PostgreSQL
11.01.2018
Bildschirmfoto 2018-01-11 um 11.05.50.png
 
Der Blog-Post Postgres log_statement='all' should be your default von Greg Sabino Mullane hat mich ermutigt unsere Logging-Strategie für die von uns genutzten und betreuten Datenbanken zu überdenken.
Es ist besser damit zu starten alles zu loggen und dann je nach Bedarf anzupassen als umgekehrt.
In Kombination mit der Postgres-Dokumentation Abschnitt 18.8.4 kann ich folgende Einstellungen empfehlen:
log_statement = 'all'
log_destination = 'csvlog'
logging_collector = on
log_directory = '/var/www/logs/pgsql'
log_filename = 'pgsql-%Y-%m-%d.log'
log_file_mode = 0644
log_truncate_on_rotation = on
log_rotation_age = 1d
log_rotation_size = 0
log_connections = on
log_disconnections = on
log_duration = on
log_hostname = on
log_timezone = 'UTC'
...mehr
  Datensatz auswählen
Beenden von ungenutzten Verbindungen in PostgreSQL
29.11.2017
pg_activity.png
 
Wenn man eine Datenbank in PostgreSQL kopieren möchte kann man das durch Anlegen einer neuen unter Verwendung der alten als Vorlage. Um eine Datenbank als Vorlage verwenden zu können, darf diese aber keine offenen Verbindungen mehr haben....
...mehr
  Datensatz auswählen
Postgres Connection Timeout
24.08.2016
2017-05-22_14_17_57-265084_thumb.jpg
 
Verbindungen zwischen Clienten und einer PostgreSQL-Datenbank, die über TCP/IP Kommunikation aufgebaut sind, können auch einem timeout unterliegen.
Die Dokumentation dazu findet man hier: https://www.postgresql.org/docs/9.1/static/libpq-connect.html
...mehr
  Datensatz auswählen
Postgres SQL-Statement Timeout
23.08.2016
2017-05-22_14_16_48-480956_thumb.jpg
 
Wenn man einen Datenbankserver betreibt muss man sich Gedanken machen was passiert, wenn der Server zu lange für Anfragen braucht.
Zum einen kann es sein, dass das bewusst lang laufende Queries sind, z.B. für Datenanalysen oder Umfangreiche Updates von Daten. Zum anderen handelt es sich aber um Fehler in den SQL-Statements. Diese würden dann andere schnellere Anfragen blockieren und ggf. sogar die ganze Web-Anwendung lahm legen. Wie kann man in Postgres das timeout einstellen und was sollte man da einstellen.
...mehr
  Datensatz auswählen
gdal Container erneuern
12.07.2016
 
GDAL die Bibliothek zur Konvertierung zahlreicher Geodatenformate ist ja in ständiger Weiterentwicklung. Im Projekt kvwmap wird auf Docker Container gesetzt. Wenn GDAL aktualisiert werden soll muss der Container ausgetauscht werden. In diesem Block wird beschrieben wie das geht.
Vorher aber noch mal kurz zum Verständnis eine Übersicht:

...mehr
  Datensatz auswählen
Change column type with dependencies
11.07.2016
 
Neulich stellten wir fest, dass im PostNAS Datenbankschema der Datentyp für ein Attribut in einer Tabelle geändert werden muss. Das ist erstmal nicht so problematisch. Die Spalte anlass in der Tabelle delete im Schema alkis lässt sich mit folgendem Befehl z.B. vom Typ character varying in ein Array character varying[] umwandeln.

ALTER TABLE alkis.delete ALTER COLUMN anlass TYPE character varying[] USING array[anlass]';

...mehr
  Datensatz auswählen
Oracle Anbindung an PostgreSQL mit oracle_fdw
16.04.2016
 
Ich hatte mal wieder eine Anfrage ob das Web-GIS kvwmap nicht auch mit Oracle zusammenarbeiten kann. Nun dann frage ich immer erst wofür. Wenn lediglich der MapServer nur lesend auf Oracle Daten zugreifen soll, geht das mit http://mapserver.org/input/vector/oracle.html. Wenn irgendwelche Daten in andere GIS - Vektorformate konvertiert oder in die PostgreSQL-Datenbank übernommen werden sollen kann man dafür den Oracle Driver von OGR verwenden. Der Zugriff auf Oracle Datenbanken geht auch mit ODBC. Eine Beschreibung wie das mit PHP geht gibt es hier. Dazu müsste man aber doch eine ganze Reihe seiner Funktionen, die mit der PostgreSQL-Datenbank im allgemeinen über pg_connect kommunizieren umschreiben, bzw. einen kompletten Datenbank-Wrapper für seine Anwendung bauen, was angesichts der Unterschiede zwischen PostGIS und Oracle Spatial nicht leicht sein dürfte. Da kann man nur hoffen, dass ODBC die Funktionen unterstützt und beide Datenbanken MM-SQL standardmäßig unterstützen, die (st_) Funktionen.
...mehr
  Datensatz auswählen
Check package integrity using MD5
15.01.2016
2017-05-22_14_12_51-185730_thumb.jpg
 
Beim Installieren von Dateien oder Paketen steht in den Installationsanweisungen oft "Check package integrity using MD5".
Was damit gemeint ist sollte jedem, der Installationen vornimmt klar sein. Leider wird der Hinweis aber auch allzuoft missachtet.
...mehr
  Datensatz auswählen
SQL im Hintergrund
10.08.2015
 
Manchmal laufen SQL-Queries sehr lange, z.B. die Nachbearbeitung beim Einlesen von ALKIS NAS-Dateien. Um diese auszuführen möchte man nicht die ganze Zeit den Client offen haben und auf eine Rückmeldung warten. Solche Prozesse sollen im Hintergrund laufen. Außerdem möchte man sich ab und an ansehen wie weiter der Prozess ist und ob vielleicht Fehler aufgetreten sind.
Das läßt sich unter Linux leicht machen. Dennoch mußte ich immer wieder nachsehen wie das noch ging.
...mehr
  Datensatz auswählen
Docker Image für kvwmap
13.05.2015
2017-05-22_14_10_46-319547_thumb.jpg
 
Es ist geschafft. Wir wollten schon immer eine etwas vereinfachte Prozedur zur Installation der Komponenten, die kvwmap nutzt. Mit Docker ist dieses Ziel nun umgesetzt. Durch die Nutzung eines eigenen Images kvwmap-server für den Web-Server mit integriertem kvwmap wird aber nicht nur die Installation vereinfacht. Wir können mit der neuen Server-Architektur endlich sicherstellen, dass die Abhängigkeiten, die zwischen den Komponenten bestehen erfüllt werden und zwar auf jedem Server auf dem kvwmap mit dem kvwmap-server image betrieben wird. Wir können notwendige Installationen zunächst in einer Testumgebung durchführen und dann exakt die neue Einstellung über das geänderte Image auf die anderen Server übertragen.
...mehr
  Datensatz auswählen
kvwmap Icon
24.03.2015
2017-05-22_14_09_29-186862_thumb.jpg
 

Hallo kvwmap Freunde,

kvwmap hatte eigentlich noch gar kein Icon. Es gab lediglich diesen Text-Style von Hauke Christoph.
Mir war aufgefallen, dass einige Softwareprojekte mit denen wir arbeiten so kleine niedliche Tierchen als Icons verwenden. Zum Beispiel der kleine blauen Elefant für PostgreSQL, Möven für OpenOffice oder ein Delfin für MySQL. Warum also nicht auch ein Tierchen für kvwmap? Aber welches?
Nun, neulich betrachtete ich das grüne steinerne Nashorn, welches bei ums im Büro auf dem Sekretär Tisch steht. Hey dachte ich, das wäre doch ein Tier für kvwmap.

...mehr
  Datensatz auswählen
Stellenausschreibung
01.11.2014
 
Diese Stelle ist besetzt.
...mehr
  Datensatz auswählen
EPSG-Codes und Zonenkennzeichen
01.04.2014
2017-05-22_14_22_37-597212_thumb.jpg
 
Welchen EPSG-Code soll ich für das Koordinatensystem ETRS89 UTM Zone 33 nehmen?. Es gibt mehrere dafür. Es kursieren die Nummern 25833, 35833, 325833 und 5650 und es gibt unterschiedliche Angaben über die Verwendung von Zonenkennzeichen im Rechtswert der Koordinaten. Mal gar nicht, mal eine führende 3 und mal eine 33. In diesem Beitrag möchte ich ein wenig Klarheit in die Thematik bringen.
...mehr
  Datensatz auswählen
Testen von großen RoR Projekten mit RSpec
01.03.2014
 
Ich möchte hier mal zusammentragen was ich zum Thema Testen von großen RubyOnRails Projekten mit rspec gefunden habe.
Ich schreib das ganze in Deutsch, da ich beim Übersetzen gezwungen bin das geschriebene auch richtig zu verstehen.
Zunächst mal sollte man sich natürlich einen Überblick darüber verschaffen welche Möglichkeiten rspec für rails von Haus aus mitbringt.
Ich hatte dazu das Buch von Obie Fernandez, The Rails Way. Addison-Wesley Professional Ruby Series, 2008.
...mehr
  Datensatz auswählen
Ruby's Time.parse die Sommerzeit und Zeitzonen
01.02.2014
 

Zeit ist keine einfache Sache. Es gibt Zeitlöcher und gedehnte Zeitabschnitte. Woher das kommt? Na durch die Sommerzeit. Was macht die Programmiersprache Ruby daraus? Sehen Sie sich mal folgendes an >Time.parse("30.03.2014 01:30") => 2014-03-30 01:30:00 +0100 >Time.parse("30.03.2014 02:30") => 2014-03-30 03:30:00 +0200 >Time.parse("30.03.2014 03:30") => 2014-03-30 03:30:00 +0200

...mehr
  Datensatz auswählen
Große Logdateien durchsuchen und anzeigen
14.01.2014
2017-05-22_11_57_06-869538_thumb.jpg
 

Man hat doch öfter mal das Problem, dass man eine bestimmte Stelle (die Nadel) in einem Logfile (Heuhaufen) sucht und sich dann genau diese Stelle und ein paar Zeilen vorher und nachher ansehen möchte. Nun Suchen in einer Datei ist ja mit grep recht einfach:

#>grep 'Nadel' Heuhaufen.log

...mehr
  Datensatz auswählen
Neuer Internetauftritt
02.09.2013
2017-05-22_11_29_17-895323_thumb.jpg
 
GDI-Service präsentiert sich nun mit einer neuen Seite im Web.
Unter den einzelnen Reitern können Sie sich über unsere Dienstleistungen und Referenzen ganz einfach informieren und, neben anderem, Informationen zur Kontakaufnahme erlangen.
...mehr
  Datensatz auswählen
GDI-Service ist umgezogen
01.09.2013
2017-05-22_11_24_27-436948_thumb.jpg
 
Seit dem 1. September 2013 sind wir im Rostocker Innovations- und Gründerzentrum anzutreffen und haben unseren Standort in Raum 65. Wie Sie dort hingelangen, können Sie unter Kontakt herausfinden.
...mehr
  Datensatz auswählen
Blog alle auswählen
  • als Diagramm ausgeben
1 - 18 von 18