tDataPlusInput und tDataPlusOutput: Die neuen nativen Qlik Talend-Komponenten für die Data+ Suite

Data+ entwickelt sich weiter – hin zu einer zentralen Plattform für operative Datenprozesse, Planung und bidirektionale Integration im modernen Analytics-Stack.

Unternehmen erwarten heute mehr von ihrer BI-Landschaft als reine Visualisierung und Reporting. Daten sollen nicht nur analysiert, sondern aktiv genutzt, angereichert und zurück in operative Prozesse integriert werden können.

Genau hier setzt die Data+ Suite von Leitart an: Sie erweitert Qlik Sense um leistungsstarke Eingabe-, Workflow- und Writeback-Funktionalitäten und verbindet Fachbereiche direkt mit den zugrunde liegenden Datenprozessen.

Doch echte Enterprise-Analytics endet nicht im Frontend. Entscheidend ist die nahtlose Integration in bestehende Datenarchitekturen, ETL-/ELT-Strecken und zentrale Data-Engineering-Prozesse. Deshalb erweitern wir das Data+ Ökosystem jetzt konsequent in Richtung professioneller Datenintegration.

Mit tDataPlusInput und tDataPlusOutput stehen ab sofort zwei native Komponenten für Qlik Talend Studio zur Verfügung, die Data+ direkt in moderne Data Pipelines integrieren – ohne manuelle REST-Konfigurationen, komplexe JSON-Mappings oder individuelle API-Workarounds.

Das Ergebnis: schnellere Entwicklung, wartbarere Datenprozesse und eine deutlich einfachere Integration von Data+ in bestehende Enterprise-Architekturen.

tDataPlusInput und tDataPlusOutput – zwei native Komponenten für Talend Studio ! 

Warum native Komponenten? Schluss mit dem API-Frust 

Bisher mussten Data Engineers, die Daten aus Data+ in Talend-Jobs integrieren wollten, den Umweg über generische REST-Schnittstellen (wie tRESTClient) gehen. Das bedeutete: Manuelle Konfiguration von HTTP-Verbindungen, aufwendiges Parsen von komplexen JSON-Strukturen und das eigenhändige Bauen von Paginierungs-Schleifen für große Datenmengen. Das kostet Zeit, ist fehleranfällig und schwer zu warten. 

Mit den neuen Komponenten tDataPlusInput und tDataPlusOutput kommuniziert Qlik Talend Studio ab sofort direkt und nativ über die gesicherte Data Plus REST API. Das Ergebnis: Datenpipelines werden sauberer, performanter und sind in einem Bruchteil der Zeit entwickelt. 

Die technischen Highlights im Überblick 

Unsere Entwickler haben die Komponenten extrem praxisnah und für den anspruchsvollen Enterprise-Einsatz konzipiert. Da die Data+ Suite standardmäßig ISO 27001 zertifiziert ist, stand eine sichere und robuste Architektur im Fokus: 

• One-Click Schema-Erkennung: Vorbei sind die Zeiten von manuellem Spalten-Mapping. Ein Klick in Talend genügt, und die Komponente erkennt automatisch das exakte Datenschema aus Data+. 

• Automatische Paginierung für Massendaten: Egal ob 100 oder 100.000 Zeilen – die Komponenten partitionieren den Datenstrom im Hintergrund vollautomatisch. Das verhindert Speicherüberlastungen (Out-of-Memory) und sorgt für maximale Stabilität bei großen Datenmengen.

• Flexibles Lesen (tDataPlusInput): Daten können wahlweise komplett via GET oder zielgerichtet über einen performanten, gefilterten SEARCH-Modus abgerufen werden. 

• Volle Schreib-Flexibilität (tDataPlusOutput): Die Komponente beherrscht die gesamte Klaviatur der Datenmanipulation: INSERT, UPDATE, UPSERT (Einfügen oder Aktualisieren), zeitsparende Bulk-Operationen sowie DELETE. 

• Professionelle Fehlerbehandlung: Datensätze, die aufgrund von Validierungsfehlern fehlschlagen, werden sauber über den REJECT-Ausgang isoliert. Das ermöglicht eine lückenlose Data Governance und schnelles Debugging. 

Blick in die Praxis: Zwei typische Szenarien 

Wie elegant sich die neuen Komponenten in eine bestehende Datenlandschaft einfügen, zeigen die folgenden beiden Praxisbeispiele aus Talend Studio. 

Szenario 1: Daten lesen, mit CRM anreichern und für Qlik bereitstellen 

Im ersten Szenario orchestrieren wir eine klassische Daten-Pipeline, bei der Daten aus Data+ ausgelesen und veredelt werden: 

Beispiel eines Talend-Jobs zur Datenanreicherung und QVD-Generierung. 

• Der Ablauf: Über die Komponente tDataPlusInput werden die von den Fachabteilungen erfassten Rohdaten abgefragt. 

• Die Veredelung: Über eine tMap-Komponente verknüpfen wir diesen Datenstrom live mit einem Lookup auf Salesforce, um Kundenattribute zu ergänzen. 

• Das Ziel: Nach einer Bereinigung von Duplikaten (tUniqRow) wird das Ergebnis direkt in eine hochoptimierte QVD-Datei weggeschrieben. Damit stehen die Daten Qlik Sense für das nächste Dashboard-Update blitzschnell zur Verfügung. 

  

  Szenario 2: Daten-Upload und schnelles Prototyping 

  Das Gegenstück dazu ist das direkte Schreiben in die Data+ Plattform. Wie geradlinig und schlank dieser Prozess ist, zeigt unser zweiter Job: 

  Minimalistischer Talend-Job zum direkten Test-Upload von Datensätzen via tDataPlusOutput. 

  • Der Ablauf: Ein tRowGenerator erzeugt Testdaten oder liest vordefinierte Strukturen ein. 

  • Die Kontrolle: Über tLogRow werden die Daten zur direkten Validierung in die Talend-Konsole ausgegeben. 

• Das Ziel: Über tDataPlusOutput werden die Datensätze mittels Bulk-Operation oder UPSERT direkt live in das Data+ Backend übertragen. 

  

  
  

  Der Vorteil für Entwickler:

  Neue Datenmodelle, API-Berechtigungen und Performance-Szenarien lassen sich so innerhalb von Sekunden validieren, ohne komplexe Vorsysteme bemühen zu müssen. 

  Fazit: Data+ wird zum universellen Data Hub 

  
  

  Mit dem Release von tDataPlusInput und tDataPlusOutput wächst die Data+ Suite endgültig aus der reinen "Qlik-Erweiterungs-Ecke" heraus. Sie etabliert sich als zentraler, bidirektionaler Data Hub im Unternehmen. 

  Fachabteilungen behalten ihre gewohnte, intuitive Eingabeoberfläche in Qlik, während die IT- und Data-Engineering-Teams die volle Kontrolle, Stabilität und Flexibilität in ihren zentralen Talend-Pipelines genießen. Das Ergebnis? Ihre Datenpipelines sind sauberer, wartbarer und um ein Vielfaches schneller zu entwickeln. 
  

  Du möchtest die neuen Komponenten in Aktion sehen? Meld Dich bei uns für eine unverbindliche Live-Demo und erfahre, wie Du Deine Datenprozesse beschleunigen kannst!