{"id":1244,"date":"2020-11-16T02:19:25","date_gmt":"2020-11-16T02:19:25","guid":{"rendered":"https:\/\/www.gudusoft.com\/?page_id=1244"},"modified":"2026-07-13T20:37:20","modified_gmt":"2026-07-14T04:37:20","slug":"grabit","status":"publish","type":"page","link":"https:\/\/www.gudusoft.com\/de\/grabit\/","title":{"rendered":"SQLFlow-Ingester"},"content":{"rendered":"

SQLFlow Ingester<\/strong> (formerly Grabit) collects SQL from your data estate \u2014 the DDL of tables, views, stored procedures, functions, triggers, and packages \u2014 and feeds it to SQLFlow for column-level data lineage analysis. It reads from live databases over JDBC, from revision systems like GitHub and Bitbucket, and from the local file system. It extracts Nur Metadaten<\/strong> und liest niemals die Zeilen in Ihren Tabellen.<\/p>\n\n\n\n

\n
13<\/b>Datenbankdialekte \u00fcber JDBC<\/span><\/div>\n
Nur Metadaten<\/b>Nur lesend \u2013 liest niemals Tabellendaten<\/span><\/div>\n
2<\/b>Exportformate \u2013 einzelnes JSON und Sharded<\/span><\/div>\n
Luftgetrennt<\/b>Ausgabe in einer einfachen Datei, keine Live-Verbindung zum Empfang<\/span><\/div>\n<\/div>\n\n\n\n
\n\n

F\u00fchre es in 3 Minuten aus:<\/strong> Der Ingester verweist auf eine Datenbank und erstellt ein Metadatenpaket, das SQLFlow in ein interaktives Spalten-Herkunftsdiagramm umwandelt. Da alles \u00fcber die Kommandozeile ausgef\u00fchrt wird, l\u00e4sst es sich problemlos als Cronjob einplanen.<\/p>\n\n<\/div><\/div>\n\n\n\n

Sammeln Sie SQL aus drei Arten von Quellen.<\/h2>\n\n\n\n
\n\n
\n\n
\"Verbindung<\/figure>\n\n<\/div>\n\n\n\n
\n\n

Verbindung zu einer Datenbank herstellen<\/h3>\n\n\n\n

DDL-Extraktion \u2014 Tabelle erstellen<\/code>, ANSICHT ERSTELLEN<\/code>, gespeicherte Prozeduren, Funktionen, Trigger und Einschr\u00e4nkungen \u2013 aus Oracle, SQL Server, Snowflake, PostgreSQL und 9 weiteren Dialekten \u00fcber JDBC \u2013 und senden diese zur Analyse an SQLFlow.<\/p>\n\n<\/div>\n\n<\/div>\n\n\n\n

\n\n
\n\n

Verbindung zu einem Revisionssystem herstellen<\/h3>\n\n\n\n

Rufen Sie SQL-Dateien direkt von GitHub, Bitbucket und anderen Versionsverwaltungssystemen ab und senden Sie sie an SQLFlow, um die Datenherkunft aus dem Code zu erstellen, den Ihr Team bereits versioniert.<\/p>\n\n<\/div>\n\n\n\n

\n\n
\"Verbinde<\/figure>\n\n<\/div>\n\n<\/div>\n\n\n\n
\n\n
\n\n
\"Durchsuchen<\/figure>\n\n<\/div>\n\n\n\n
\n\n

Durchsuchen Sie das Dateisystem<\/h3>\n\n\n\n

Suchen Sie SQL-Dateien in einem lokalen Verzeichnisbaum und \u00fcbertragen Sie sie an SQLFlow, um die Datenherkunft zu visualisieren \u2013 praktisch f\u00fcr Skripte und Exporte, die es nie in eine Datenbank oder ein Repository geschafft haben.<\/p>\n\n<\/div>\n\n<\/div>\n\n\n\n

\n\n

Zwei Exportformate: einzelnes JSON und fragmentiertes JSON.<\/h2>\n\n\n\n

Beim Einlesen einer Datenbank erstellt der Ingester ein normalisiertes Metadatenpaket \u2013 bestehend aus Katalogstruktur und dem DDL-Text jeder Ansicht, Prozedur, Funktion, jedes Triggers und jedes Fremdschl\u00fcssels. Ein einziges Modell deckt alle unterst\u00fctzten Dialekte ab; jeder Anbieter l\u00e4sst einfach die Objekttypen weg, die er nicht unterst\u00fctzt. Dieses Paket existiert in zwei Formen.<\/p>\n\n\n\n

\n
<\/th>Einzelnes JSON<\/th>Sharded (Standard)<\/th><\/tr><\/thead>
Auf der Festplatte<\/td>Eins metadata.json<\/code> Datei<\/td>Ein Verzeichnis: manifest.json<\/code> + Katalog\/<\/code> + Quelle\/<\/code> + Index\/<\/code><\/td><\/tr>\n
Wo DDL wohnt<\/td>Inline, in Server[].Abfragen[]<\/code><\/td>In source\/*.jsonl<\/code>, lokalisiert durch einen Byte-Offset index\/*.idx<\/code><\/td><\/tr>\n
Am besten geeignet f\u00fcr<\/td>Kleine und mittlere Kataloge<\/td>Gro\u00dfe Anwesen \u2013 Katalog bleibt resident, Multi-GB DDL-Streams und Suchvorg\u00e4nge<\/td><\/tr>\n
Extras<\/td>Am einfachsten zu konsumieren<\/td>SHA-256-Hashing pro Shard, Inhalts-Hashing pro Objekt, inkrementelle Exporte, Blockkomprimierung<\/td><\/tr>\n<\/tbody><\/table><\/figure>\n\n\n\n

Einzelnes JSON<\/strong> Speichert den gesamten Besitz in einer einzigen Datei, wobei die DDL jedes Objekts direkt im Text enthalten ist \u2013 das ist am einfachsten zu parsen. Splitter<\/strong> Dies ist die Standardeinstellung f\u00fcr gro\u00dfe Datenbest\u00e4nde: Der Export wird mit begrenztem Speicher gestreamt, der Strukturkatalog bleibt klein und resident, die DDL ist \u00fcber einen Index wahlfrei auffindbar, und das Manifest wird zuletzt geschrieben, sodass ein Benutzer niemals einen unvollst\u00e4ndigen Export sieht. Vollst\u00e4ndige Feld-f\u00fcr-Feld-Referenzen: einzelner JSON-Export<\/a> Und fragmentierter Export<\/a>.<\/p>\n\n<\/div><\/div>\n\n\n\n

Ermitteln Sie die Datenherkunft in einer SQL-Server-Datenbank in 3 Minuten<\/h3>\n\n\n\n