Back to top
Open North

Open Data, Open Source → Open North

Meine offenen Punkte bei Frictionless Data

Wie ich schon in dem Beitrag Wie läuft es? Reibungslos! geschrieben habe, bin ich ein großer Fan davon, die Metadaten der Daten/Dateien unter Verwendung der Frictionless Data Specification, vor allem mit Tabular Schema maschinenlesbar zu beschreiben. Allerdings sind mir bei der praktischen Arbeit mit Daten noch ein paar Punkte begegnet, die mir bei Frictionless Data noch fehlen. Diese möchte ich im Folgenden beschreiben und Lösungsvorschläge aufzeigen:

Read more...
My open issues with Frictionless Data

As I wrote in the (German) blog post Wie läuft es? Reibungslos!, I am a big fan of describing the metadata of the data/files using the Frictionless Data Specification, especially with Tabular Schema in a machine-readable way. However, in my practical work with data, I still encountered a few open issues that I feel are missing with Frictionless Data. I would like to describe these in the following and show suggestions for suggestions:

Read more...
Besucherzählung in anonymisierten Logfiles

Da IP-Adressen zu den personenbeziehbaren Informationen zählen, darf man in Logfile von Webservern (zumindest längerfristig) IP-Adressen nur anonymisiert abspeichern. Dazu schneidet man einige niedrigwertige Bits ab, so dass einzelne IP-Adressen nicht mehr erkennbar sind. Doch wie wirkt sich das eigentlich auf die Analyse der Logfiles aus?

Read more...
Verkehrslage

Schon seit November 2021 gibt es im Open-Data-Portal Daten zur Verkehrslage in Schleswig-Holstein - maschinenlesbar und quasi in Echtzeit. Da kaum jemand diesen Datensatz kennt, möchte ich hier auf ihn hinweisen und ein paar Tipps zur Nutzung geben.

Read more...
xz Kompression

Beim Archivieren von großen Dateien mit Messdaten bin ich auf ein Tool gestoßen, das bei der Kompression von Daten erstaunliche Dinge leistet.

Read more...
Geobasisdaten (Teil 3)

Im letzten Beitrag hatte ich geschildert, welche Geobasisdaten für jede Stadt und Gemeinde in Schleswig-Holstein zu Verfügung stehen. Drei Datensätze hatte ich aber noch nicht erklärt. Was für großartige Datensätze das sind, werde ich nun zeigen.

Read more...
Musterdatenkatalog

Seit knapp drei Wochen unterstützt das Open-Data-Portal den Musterdatenkatalog für offene Daten. Was hat es damit auf sich?

Read more...
Geobasisdaten (Teil 2)

Jetzt gibt es Karten! Wie (vor leider längerer Zeit) versprochen, möchte ich zeigen, wie viele Geobasisdaten aus Schleswig-Holstein schon als offene Daten verfügbar sind und welche Datenschätze sich darin verbergen.

Read more...
Wie läuft's mit den Daten? - Reibungslos!

Dateien, insbesondere CSV-Dateien sind immer wieder bunte Wundertüten. Man weiß nie so genau, was einen genau erwartet. Zu verschieden sind Zeichenkodierungen, Spaltentrenner, Dezimaltrennzeichen etc. Auch die Spaltenüberschriften halten immer wieder (meist unschöne) Überraschungen bereit, da man oft gar nicht weiß, was genau gemeint ist.

Read more...