Die sQLshell ist nun cloudnative!

13.04.2024

Die sQLshell hat eine weitere Integration erfahren - obwohl ich eigentlich selber nicht viel dazu tun musste: Es existiert ein Projekt/Produkt namens steampipe, dessen Slogan ist select * from cloud; - Im Prinzip eine Wrapperschicht um diverse (laut Eigenwerbung mehr als 140) (cloud) data sources.

Nachdem ich mich ein wenig eingelesen hatte, dachte ich zwangsläufig: SQL - das bringt mich auf JDBC und das wiederum lässt mich sofort an die sQLshell denken. Durch die letzten größeren Brückenschläge ermutigt begann ich, darüber nachzudenken, ob ich dieses Projekt in der sQLshell würde nutzen können.

Die Beschreibung erläutert zunächst nur, wie eine Integration in PostgreSQL oder SQLite vor sich geht. Die Erklärungen bleiben aber da stehen, wo die Interaktion entweder mit der steampipe-CLI oder mit den jeweiligen proprietären Datenbank-Frontends erläutert werden.

Daher musste ich mich zunächst nun für eine der beiden Möglichkeiten entscheiden. Da ich meine letztenm Erfolge mit PostgreSQL gefeiert hatte und die Daten ja sowieso nicht in der eigentlichen Datenbank, sondern in der Cloud liegen würden und die Datenbank dafür nur eine Fassade wäre entschied ich mich für SQLite: Man braucht keinen Server und kann die Datenbank sogar in-memory implementieren. Das wäre eine wirklich schlanke Fassade für riesigen Cloud-Datenquellen.

Dafür musste ich jedoch von der Anleitung ein wenig abweichen: Die eigentliche Extension installierte ich noch so wie angegeben, aber da ich nicht das proprietäre Frontend benutzen wollte, wich das restliche Vorgehen ein wenig ab:

Die Extension lud ich mittels

SELECT load_extension('/path/to/steampipe_sqlite_github','sqlite3_extension_init');

Wichtig war hier das Weglassen der Endung der Extension.

Über die JDBC Connection Properties sollte unbedingt auch noch enable_load_extension auf den Wert true gesetzt werden.

Anschließend konnte ich das von mir auserkorene Beispiel Github mittels

select steampipe_configure_github('token="xxx_xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx"');

erfolgreich konfigurieren und anschließend erste Abfragen absetzen. Sieht man dabei Fehlermeldungen, in denen etwas Ähnliches wie code = Internal desc = 'List' call requires an '=' qual for column: repository_full_name auftaucht, zeigt das an, dass die betreffende Pseudotabelle zwingend eine WHERE Klausel erwartet.

Das erste erfolgreiche Statement, das ich also absetzen konnte, lautete:

select * from github_pull_request where repository_full_name='elbosso/rfc3161timestampingserver';

Der einzige Wermutstropfen hierbei ist, dass ich in der sQLshell keine Angaben über die verfügbaren Tabellen bekomme, während das mit dem proprietären Frontend der SQLite Datenbank durchaus möglich ist.

Aber: die diversen Komfortfeatures wie etwa das Reporting in der sQLshell sind damit auch auf irgendwelche Datenquellen in der Cloud anwendbar!

Artikel, die hierher verlinken

sQLshell Version 7.7pre4 build 10491

27.05.2024

Eine neue Version der sQLshell ist verfügbar!

sQLshell, SQLite und Redis - oh my!

20.05.2024

Ich habe in letzter Zeit hin und wieder mit der sQLshell und SQLite herumgespielt - Neulich wurde ich gefragt, ob die sQLshell eigentlich auch Redis kann...

Alle Artikel rss Wochenübersicht Monatsübersicht Codeberg Repositories Mastodon Über mich home xmpp


Vor 5 Jahren hier im Blog

  • Trojan Source mit SQL und Postgres

    12.11.2021

    Nachdem ich das hochinteressante Paper Trojan Source: Invisible Vulnerabilities gelesen hatte kam ich durch einen Post auf Mastodon (leider nicht öffentlich einsehbar) auf Ideen... auf Ideen...

    Weiterlesen

Neueste Artikel

  • Offscreen Rendering für Moduleworkspaces

    Es ist nicht ganz einfach, eine Hierarchie von Swing-Komponenten offscreen zu rendern. Ich wollte aber genau dies für meine zentrale Komponente moduleworkspace umsetzen, die zum Beispiel die Grundlage für Lösungen wie den Visuellen Abfrageeditor in der sQLshell oder dWb+ darstellt.

    Weiterlesen
  • LinkCollections 2026 XIII

    Nach der letzten losen Zusammenstellung (für mich) interessanter Links aus den Tiefen des Internet von 2026 folgt hier gleich die nächste:

    Weiterlesen
  • sQLshell Version 7.9pre5 build 11394

    Eine neue Version der sQLshell ist verfügbar!

    Weiterlesen

Manche nennen es Blog, manche Web-Seite - ich schreibe hier hin und wieder über meine Erlebnisse, Rückschläge und Erleuchtungen bei meinen Hobbies.

Wer daran teilhaben und eventuell sogar davon profitieren möchte, muss damit leben, daß ich hin und wieder kleine Ausflüge in Bereiche mache, die nichts mit IT, Administration oder Softwareentwicklung zu tun haben.

Ich wünsche allen Lesern viel Spaß und hin und wieder einen kleinen AHA!-Effekt...

PS: Meine öffentlichen Codeberg-Repositories findet man hier.