Release Notes

🆕 Records können über ZendeskRecordSink leicht in Zendesk geschrieben werden

🆕 Neue Prozessoren zur Arbeit mit Parquet (CalculateParquetOffsets, CalculateParquetRowGroupOffsets)

🆕 FilterAttribute - neuer Prozessor zum Filtern von Attributen

🆕 PublishSlack - neuer Prozessor zum Publishen in Slack

🆕 PutZendeskTicket - neuer Prozessor für die Arbeit mit Zendesk

Verbesserungen des Handling bei der Versionierung von Diagrammen

Kleine Verbesserungen der UI:

Upgrade auf IGUASU NiFi 1.25.0

Backup aller relevanten Daten über eigenen Operator

Neue Shortcuts aufgenommen

Nutzung der NiFi-Expression-Language erläutert

Tutorial zur Nutzung von DynamoDB

Erweiterung der Beschreibung zur Wiederverwendung

🆕 Möglichkeit zu sehen, welches Diagramm andere Nutzer gerade bearbeiten

🆕 Upload von eigenes Bundles zur einfachen Erweiterung der Funktionalität oder Verwendung eines Bundles in mehreren Versionen

🆕 Anzeige der Version eines Bundles (im Falle von mehreren Versionen eines Bundles)

Verbesserte Version der Hybrid Cloud Verbindung

Expression Language Unterstützung deutlich ausgebaut

🆕 ListenOTLP Prozessor zur Verarbeitung von OpenTelemetry

🆕 EncryptContentAge und DecryptContentAge Prozessoren zur Unterstützung der age-encryption.org-Spezifikation

🆕 YamlTreeReader zur Verarbeitung von YAML als Records

🆕 PackageFlowFile Prozessor

Wechsel auf Java 21

Upgrade auf IGUASU NiFi 1.24.0

Saxon Update 12.2

Nutzung der Operator Codebasis für das BPC Projekt ermöglicht; Erweiterung der Varianten des Deployments (z.B. in Bezug auf die Registry)

Logging für Verwendung in Loki angepasst

Nutzung weiterer eigener NARs oder NARs in mehreren Versionen ermöglicht

Java 21 notwendig

🆕 Viele Tabellen können als HTML/PDF/CSV exportiert werden. Beispielsweise gilt dies für die Liste der Lizenzen oder der Prozessoren aber auch z.B. für das Audit-Log

Die Zertifikatsverwaltung ist nun nicht mehr nur für Admins, sondern auch für normale Benutzer verfügbar. Editieren, herunterladen und löschen bleibt dem Admin vorbehalten

Die Ergebnisse der globalen Suche können weiter eingeschränkt werden, sodass übersichtlichere Ergebnisse vorliegen. Zur weiteren Übersichtlichkeit werden die Prozessorfarben und Icons in den Ergebnissen dargestellt

Das Laden von sehr großen Dateien in der Editor-Komponente und das Einfügen oder schreiben sehr großer Datenmengen in anderen Komponenten wird verhindert. Dies schützt das System und die Modelle, welche sonst z.T. die Daten halten würden

Elemente des Diagramms können beim Erstellen/Editieren über die Ränder gezogen werden, wobei das Diagramm dann in dieser Richtung erweitert wird

Gab es im Hintergrund Änderungen in einem Modul, das gerade geöffnet ist, so wird dies beim Speichern dargestellt und man kann sich entscheiden, ob man die eigenen Änderungen verwirft oder die vorhandenen überschreibt

🆕 Es gibt einen neuen Record Reader zum Lesen von Excel XLSX Dateien

Die Provenance Tabelle im Monitoring zeigt weiter Informationen in einer Datei-Sicht

Im TransformXml (XSLT) läuft jetzt Saxon EE 12.2. Beim Erstellen eines neuen Prozessors wird ein initiales XSLT bereitgestellt

Die Zertifikatserstellung und Verteilung zwischen IGUASU und dem BPC ist über (K8s) Operatoren automatisiert

Erweiterung des Hybrid-Cloud-Tutorials

🆕 Kollaboration

🆕 Benutzer-Einstellungen

🆕 Der Editor des JSONataTransformJSON bringt jetzt Fehlermarkierung und Code-Completion mit

Kleine Verbesserungen

Prozessoren

In IGUASU terminierte SSL-Endpunkte können durch den IGUASU Operator konfiguriert werden

Hoher Speicherbedarf von IGUASU führt nicht mehr zum Neustart der Applikation

TransformXml - wurde als Quelle für das XSLT eine Datei oder ein Lookup-Service verwendet, so muss diese Grundeinstellung nun einmalig an dem TransformXml ausgewählt werden

ListenCloud - die Relation failure wurde entfernt. Vorhandene failure-Relationen sollten entfernt werden

In bestehenden InvokeInubit/InvokeOnPrem und InvokeCloud Prozessoren muss das nicht mehr unterstützte Property für asynchrone Verarbeitung entfernt werden

Beschreibung der Erstellung und Nutzung von Zertifikaten für die Hybrid-Cloud-Kommunikation mit INUBIT

🆕 Der Editor des JSONataTransformJSON unterstützt jetzt JSONATA mit Syntax-Highlighting (Fehleranzeige und Code-Completion sind noch offen)

TransformXml gibt Fehler im XSLT als Bulletins aus

Geschwindigkeitsoptimierungen in der UI

🆕 Neuer MergeMetro Prozessor (zusätzlich zu GetMetro)

In der BOM/Liste der Lizenzen kann jetzt gesucht/gefiltert werden

Bei der Liste der Prozessoren/Services beim Hinzufügen, kann jetzt über mehrere Begriffe gesucht werden

🆕 Die Hybrid-Cloud Prozessoren sind nun vollständig mit INUBIT getestet

Kleine Verbesserungen

Registries anderer Bereiche können nun auch in AWS verwendet werden (z.B. shared.virtimo.cloud)

Die notwendigen Migrationsschritte bei lokalen Upgrades sind vollständig beschrieben

🆕 Zertifikatsverwaltung

Verbesserungen in der UI

🆕 Neue Prozessoren und Services

🆕 Unterstützung von Amazon EKS

🆕 Kubernetes Deployment von IGUASU über einen eigenen K8s-Operator

Einige Properties an den Prozessoren und Services zum BPC wurden umbenannt

Der ValidateJSON-Processor ist im JSON Tutorial beschrieben

Die NiFi Dokumentation (z.B. für die Beschreibung der Expression Langauge) ist auf https://docs.virtimo.net deployed

🆕 Neue Prozessoren und Services

🆕 Pre-Release von Hybrid Cloud Prozessoren und Services zur Anbindung von INUBIT an die IGUASU-Cloud (noch nicht produktionsreif!)

🆕 Nutzung verschiedener Registry-Clients ermöglicht

🆕 Das Vollaufen von Queues wird jetzt direkt im Diagram dargestellt

🆕 Neue Informationen am Prozessor

Registry

Dokumentation

Unser eigener JSLT-Prozessor wurde entfernt, da jetzt einer mit NiFi mitkommt

🆕 Metro Prozessoren hinzugefügt

🆕 Audit Log - verfügbar im Monitoring Tab

Parameter Support erweitert

Upgrade auf IGUASU NiFi 1.17.0

Dynamische Properties können jetzt auch sensitive Werte (z.B. Passwörter) enthalten, wenn der Prozessor das unterstützt (z.B. Header-Werte an InvokeHTTP)

Detaillierte Metriken zum CPU-Verbrauch auf Prozessor-Ebene

🆕 Neuer Prozessor erlaubt Queries auf Daten, die von Salesforce kommen

🆕 Neuer ConsumeTwitter Prozessor ersetzt den bisherigen GetTwitter und nutzt die aktuelle Twitter-API

🆕 Neuer Prozessor, um auf Dateien auf Google Drive zuzugreifen

HTTP/2 support (ListenHTTP, HandleHttpRequest)

Java 17

AWS/EKS Support

🆕 Neue Darstellung für die Bulletins/Fehler

🆕 Es gibt eine neue zentrale Baumansicht aller Prozessgruppen

🆕 Die verfügbaren Prozessoren bzw. Services werden in den System Informationen angezeigt

🆕 An den Prozessoren wird jetzt ein konfigurierbares Retry an den ausgehenden Relations unterstützt

🆕 Selektierte Elemente können nun direkt mit der Maus in Prozessgruppen verschoben werden. Ebenso können sie über das Kontext-Menü in eine beliebige Prozessgruppe verschoben werden

🆕 Es wird nun eine Liste der verwendeten Softwarekomponenten mit ihren Lizenzen angeboten

An Properties, die Services konfigurieren, können diese nun direkt angelegt werden. Dabei kann die Prozessgruppe, an welcher der Service entstehen soll, gewählt werden

Ändert man Parameter-Kontexte an Prozessgruppen, so wird dies nun über einen Dialog getan, der die notwendigen Operationen wie stoppen/starten etc. und das Ergebnis anzeigt

🆕 Prozessoren können jetzt auch verifiziert werden - dies dient z.B. der Prüfung, ob ein konfiguriertes System erreichbar ist

Die Darstellung der Dokumentation entspricht jetzt der auf docs.virtimo.net; es kann auch darin gesucht werden

JSONataTransformJSON kann den Output jetzt auch komplett in ein Attribut schreiben

🆕 PutBPCAuditLog Prozessor

PutBPCProcessLog Erweiterungen

ListenBPCFlowStarter Erweiterungen

Mit einer entsprechenden UUID kann zu Ausführungsinstanzen innerhalb von IGUASU gesprungen werden - das wird beispielsweise aus dem BPC heraus verwendet

Erweiterungen an XmlMerge

Apache NiFi auf 1.16.3 angehoben

JSONataTransformJSON kann jetzt auch auf Attributwerte bzw. ein leeres JSON ausgeführt werden

$uuid() → $nfUuid()

$el(<el>) → $nfEl(<el>)

$attribute(<name>) → $nfGetAttribute(<name>)

$attribute(<name>, <value>) → $nfSetAttribute(<name>, <value>)

$lookup → $nfLookup(<key>)

🆕 Neuer Virtimo Theme (abgestimmt mit BPC 4 und inubit 8)

🆕 Neue, optionale Tabellenansicht für Attribute an allen entsprechenden Stellen in Flow

Filtermöglichkeit für Attribut-Sichten

🆕 Erweiterungen von Parametern und Parameter-Kontexten

Kommentare an Controller Services werden unterstützt

🆕 JSONataTransformJSON unterstützt jetzt Lookups

Die Rechte an Prozessgruppen können explizit vererbt oder überschrieben werden

Die Beschreibungen der Flows sind bei der Versionierung jetzt überall verfügbar

🆕 Nutzung des Virtimo Keycloak in der Cloud (aktuell auf dev.virtimo.cloud)

Anzeige der Versions-Informationen zu IGUASU in den System Diagnostics

Konsequenter Read-Only-Modus im Production-Mode

🆕 Deep Links werden über die Anmeldung hinweg unterstützt

Neue Tastaturkürzel für die globale Suche und die Übersicht

Neue Variante des TextEditors (kein Speicherleck mehr)

🆕 Neuer How-to Bereich in der Dokumentation

🆕 Treiber, wie JDBC-Datenbanktreiber können jetzt hochgeladen und an notwendiger Stelle direkt ausgewählt werden

Im TransformXml Prozessor wird das JSON jetzt bei der Verwendung von 'Surround input with <xml> tag' zusätzlich mit einem CDATA Tag umgeben, damit Entity-Referenzen wie z.B. '&' keine Probleme bereiten. Sollte das CDATA schon von Hand hinzugefügt worden sein, muss dies wieder entfernt werden.

🆕 Prozessor PutBPCProcessLog, zum Loggen von Prozess-Daten in ein Virtimo Business Process Center

🆕 Prozessor, um leicht Flows vom Business Process Center aufrufen zu können: ListenBPCFlowStarter

🆕 Prozessor zum Mappen/Tranformation von JSON auf der Basis von JSONata: JSONataTransformJSON

🆕 Saxon EE wird für den TransformXml Prozessor mitgeliefert

🆕 neuer ModifyPDF Prozessor, um Formularfelder in PDFs zu füllen

🆕 neuer Minifier Prozessor, um das YAML einer Prozessgruppe für den Remote Flow automatisiert bereitstellen zu können. Darüber kann ein Remote Flow automatisch neue Versionen seiner Konfiguration beziehen

UI Update mit leichterem Erscheinungsbild

🆕 Zentrale Provenance, in der die vergangenen Ausführungen aller Flows sichtbar sind

🆕 Zentrales Monitoring aller verwendeten Komponenten

🆕 Globale Suche

Erweiterung des User-Interfaces der Services:

🆕 Speichern/Laden sowie Kopieren/Einfügen von Eingangsdaten+Attributen im Content Panel und der Queue

Selektierte Module können im Diagramm jetzt auch mit den Cursor-Tasten bewegt werden (zusammen mit Shift Pixel-weise)

Zum Erstellen der Module können diese jetzt direkt per Drag-and-drop aus der Toolbar in das Diagram gezogen werden

Alle Relationen eines neuen Prozessors sind jetzt per Default Auto-Terminiert. Schon verbundene Relationen sind hier auch nicht mehr auswählbar. Bei der Erstellung einer neuen Relation sieht man welche Relationen schon Verbindungen besitzen

🆕 Das erneute Abspielen eines Events ("Replay") wird nun unterstützt

In der Dokumentation werden jetzt immer alle vorhandenen Dokumentationen als Übersicht angezeigt (User Guide, Admin Guide, etc.)

Prozessgruppen können für einzelne User-Gruppen freigegeben werden

Ein hängender Prozessor, der terminiert werden kann, macht dies nun in der UI direkt deutlich

🆕 Anzeige der System Diagnostics des Servers (JVM, Festplatte, etc.)

🆕 Prozessgruppen können jetzt als JSON heruntergeladen werden. Dieses JSON kann dann wiederum beim Anlegen neuer Prozessgruppen verwendet werden

🆕 zur Verwendung in Remote Flow kann eine Prozessgruppe als YAML heruntergeladen werden

🆕 die Registry-Benutzer können aus dem aktuellen IGUASU importiert werden

🆕 Backpressure-Default kann spezifisch für einzelne Prozessgruppen konfiguriert werden

🆕 Run Once zum einmaligen Start eines Prozessors/Flows

Parameter können auch an sensitiven Properties (Passwörtern) verwendet werden

🆕 IGUASU läuft jetzt immer abgesichert (initial im Single-User-Modus)

Optimierung der Start-Skripte (z.B. durch neue iguasu-env.sh, in der etwa das verwendete Java steht)

Administrationshandbuch um Upgrade-Guide ergänzt

🆕 NiFi Server 1.15.0 integriert (zuvor 1.13.x)

🆕 es werden nun Client/Server-Authentications bei HTTPS mit der Cloud unterstützt

da IGUASU nun initial im Single-User-Modus läuft, muss vor dem ersten Start der User mit seinem Passwort gesetzt werden (siehe Einrichtung Single User Authentication)

da keine Templates mehr unterstützt werden, sollten alle Templates, die nicht als Prozess-Gruppen im zu migrierenden IGUASU vorliegen, vor der Migration importiert werden. Nach der Migration können sie dann als JSON exportiert und ggf. wieder entfernt werden

das Starten, Stoppen etc. der Prozessoren (bzw. ganzer Prozessgruppen) ist nun nur noch über das Kontext-Menü möglich - die Knöpfe in der Toolbar wurden entfernt

🆕 Versionierung von Flows (auf der Ebene der Prozess-Gruppen)

🆕 Wiederverwendung (von in Prozess-Gruppen gekapselten Funktionen), durch die Nutzung der Versionierung

🆕 Anzeige der lokalen Änderungen

🆕 Nutzung beliebig vieler unterschiedlicher Registries und Buckets in den Flows

🆕 Verwaltung der Registries samt Benutzern, Gruppen und Buckets

🆕 Bereitstellung eines Prometheus-basierten Monitorings in der Cloud

🆕 Liveness/Readiness-Probes für IGUASU in Kubernetes

Speicherkonfigurationen optimiert

verbesserte Clipboard-Operationen (Ausschneiden und beliebiges Einfügen)

bessere Synchronisation von Diagram und Moduleditor bei Änderungen

Darstellung der Ausführungen eines Prozessors erweitert

XmlTransformer (XSLT): Auflösen externer Referenzen (z.B. DTDs) abschaltbar

Dokumentation: Tipps zum Betrieb sowie zur Optimierung von Flows hinzugefügt