Release Notes

🆕 Die Dokumentation steht jetzt auch in Englisch zur Verfügung

🆕 Es werden in der Cloud jetzt mehrere Ingresse unterstützt, so das externe Adressen über unterschiedliche Wege und VPNs geschaltet werden können. Dies wird von der UI voll unterstützt

Für Prozessoren, die über NARs hochgeladen oder als neue Python Prozessoren angelegt werden, wird jetzt auch die volle Beschreibung angezeigt

Parameter können gefiltert werden

Wird eine neue Prozessgruppe angelegt, ist direkt der Parameter Context der Parent-Gruppe gesetzt und kann hier auch schon direkt angepasst werden

JSON Lines (https://jsonlines.org/) werden in den Anzeigen unterstützt

Der AI Assistent erlaubt ein Feedback auf die Antwort sowie längere Fragen

Das Auto-Layouting von Selektionen behält die Position der Prozessoren in Relation zu der linken oberen Ecke bei und ist auch über das Context-Menü erreichbar

Labels haben jetzt auch ein "Send to back" um Z-Position in Bezug zu anderen Labels zu setzen

🆕 AI Assistant (Technology Preview) – es können Fragen zu IGUASU gestellt werden, die Antworten basieren auf der Dokumentation

🆕 Nutzung von GitHub Repositories als IGUASU-Flow-Repository in unseren Cloud-Installationen

Es wurden Memory Leaks in der UI behoben

Die maximale Zeit, die ein Processor mit den eingestellten Retry-Konfigurationen im Retry verbringen kann, wird errechnet und angezeigt

Neue Processors und Services

Upgrade auf IGUASU NiFi 2.0

🆕 Updates der UI können ohne Nutzerinteraktion ausgeführt werden

🆕 Es können mehrere unterschiedliche Netzwerke und VPNs angebunden werden

DistributedMapCacheServer wurde umbenannt in MapCacheServer

DistributedSetCacheServer wurde umbenannt in SetCacheServer

DistributedMapCacheClientService wurde umbenannt in MapCacheClientService

DistributedSetCacheClientService wurde umbenannt in SetCacheClientService

Updates von IGUASU können jetzt selbst und zeitgesteuert eingespielt werden (zur 3.0 final)

Es gibt die neue Standardgruppe viewer - Nutzer in dieser Gruppe können im System nichts ändern/starten etc. sondern nur einsehen

Es gibt einen Bereich im Filesystem, der für Services/Processors, die dies benötigen, verwendet werden kann und auch im Backup landet

GitHub kann nun direkt als Repository verwendet werden

Es wurden viele nicht mehr aktuelle oder funktional doppelte Komponenten entfernt. Die komplette Liste ist hier zu finden. Unter anderem sind dies mit möglichen Alternativen

Wird im User Guide oder in einem Tutorial ein Processor oder ein Service genauer beschrieben, dann ist dies jetzt direkt an der Komponente verlinkt

Neu strukturiert und um neue Features und Anpassungen ergänzt

🆕 Records können über ZendeskRecordSink leicht in Zendesk geschrieben werden

🆕 Neue Processors zur Arbeit mit Parquet: CalculateParquetOffsets, CalculateParquetRowGroupOffsets

🆕 FilterAttribute - neuer Processor zum Filtern von Attributen

🆕 PublishSlack - neuer Processor zum Publishen in Slack

🆕 PutZendeskTicket - neuer Processor für die Arbeit mit Zendesk

Verbesserungen des Handling bei der Versionierung von Diagrammen

Kleine Verbesserungen der UI:

Upgrade auf IGUASU NiFi 1.25.0

Backup aller relevanten Daten über eigenen Operator

Neue Shortcuts aufgenommen

Nutzung der NiFi-Expression-Language erläutert

Tutorial zur Nutzung von DynamoDB

Erweiterung der Beschreibung zur Wiederverwendung

🆕 Möglichkeit zu sehen, welches Diagramm andere Nutzer gerade bearbeiten

🆕 Upload von eigenes Bundles zur einfachen Erweiterung der Funktionalität oder Verwendung eines Bundles in mehreren Versionen

🆕 Anzeige der Version eines Bundles (im Falle von mehreren Versionen eines Bundles)

Verbesserte Version der Hybrid Cloud Verbindung

Expression Language Unterstützung deutlich ausgebaut

🆕 ListenOTLP Processor zur Verarbeitung von OpenTelemetry

🆕 EncryptContentAge und DecryptContentAge Processors zur Unterstützung der age-encryption.org-Spezifikation

🆕 YamlTreeReader zur Verarbeitung von YAML als Records

🆕 PackageFlowFile Processor

Wechsel auf Java 21

Upgrade auf IGUASU NiFi 1.24.0

Saxon Update 12.2

Nutzung der Operator Codebasis für das BPC Projekt ermöglicht; Erweiterung der Varianten des Deployments (z.B. in Bezug auf die Registry)

Logging für Verwendung in Loki angepasst

Nutzung weiterer eigener NARs oder NARs in mehreren Versionen ermöglicht

Java 21 notwendig

🆕 Viele Tabellen können als HTML/PDF/CSV exportiert werden. Beispielsweise gilt dies für die Liste der Lizenzen oder der Processors aber auch z.B. für das Audit-Log

Die Zertifikatsverwaltung ist nun nicht mehr nur für Admins, sondern auch für normale Benutzer verfügbar. Editieren, herunterladen und löschen bleibt dem Admin vorbehalten

Die Ergebnisse der globalen Suche können weiter eingeschränkt werden, sodass übersichtlichere Ergebnisse vorliegen. Zur weiteren Übersichtlichkeit werden die Processor-farben und Icons in den Ergebnissen dargestellt

Das Laden von sehr großen Dateien in der Editor-Komponente und das Einfügen oder schreiben sehr großer Datenmengen in anderen Komponenten wird verhindert. Dies schützt das System und die Modelle, welche sonst z.T. die Daten halten würden

Elemente des Diagramms können beim Erstellen/Editieren über die Ränder gezogen werden, wobei das Diagramm dann in dieser Richtung erweitert wird

Gab es im Hintergrund Änderungen in einem Modul, das gerade geöffnet ist, so wird dies beim Speichern dargestellt und man kann sich entscheiden, ob man die eigenen Änderungen verwirft oder die vorhandenen überschreibt

🆕 Es gibt einen neuen Record Reader zum Lesen von Excel XLSX Dateien

Die Provenance Tabelle im Monitoring zeigt weiter Informationen in einer Datei-Sicht

Im TransformXml (XSLT) läuft jetzt Saxon EE 12.2. Beim Erstellen eines neuen Processors wird ein initiales XSLT bereitgestellt

Die Zertifikatserstellung und Verteilung zwischen IGUASU und dem BPC ist über (K8s) Operatoren automatisiert

Erweiterung des Hybrid-Cloud-Tutorials

🆕 Kollaboration

🆕 Benutzer-Einstellungen

🆕 Der Editor des JSONataTransformJSON bringt jetzt Fehlermarkierung und Code-Completion mit

Kleine Verbesserungen

Processors

In IGUASU terminierte SSL-Endpunkte können durch den IGUASU Operator konfiguriert werden

Hoher Speicherbedarf von IGUASU führt nicht mehr zum Neustart der Applikation

TransformXml - wurde als Quelle für das XSLT eine Datei oder ein Lookup-Service verwendet, so muss diese Grundeinstellung nun einmalig an dem TransformXml ausgewählt werden

ListenCloud - die Relation failure wurde entfernt. Vorhandene failure-Relationen sollten entfernt werden

In bestehenden InvokeInubit/InvokeOnPrem und InvokeCloud Processors muss das nicht mehr unterstützte Property für asynchrone Verarbeitung entfernt werden

Beschreibung der Erstellung und Nutzung von Zertifikaten für die Hybrid-Cloud-Kommunikation mit INUBIT

🆕 Der Editor des JSONataTransformJSON unterstützt jetzt JSONATA mit Syntax-Highlighting (Fehleranzeige und Code-Completion sind noch offen)

TransformXml gibt Fehler im XSLT als Bulletins aus

Geschwindigkeitsoptimierungen in der UI

🆕 Neuer MergeMetro Processor (zusätzlich zu GetMetro)

In der BOM/Liste der Lizenzen kann jetzt gesucht/gefiltert werden

Bei der Liste der Processors/Services beim Hinzufügen, kann jetzt über mehrere Begriffe gesucht werden

🆕 Die Hybrid-Cloud Processors sind nun vollständig mit INUBIT getestet

Kleine Verbesserungen

Registries anderer Bereiche können nun auch in AWS verwendet werden (z.B. shared.virtimo.cloud)

Die notwendigen Migrationsschritte bei lokalen Upgrades sind vollständig beschrieben

🆕 Zertifikatsverwaltung

Verbesserungen in der UI

🆕 Neue Processors und Services

🆕 Unterstützung von Amazon EKS

🆕 Kubernetes Deployment von IGUASU über einen eigenen K8s-Operator

Einige Properties an den Processors und Services zum BPC wurden umbenannt

Der ValidateJSON-Processor ist im JSON Tutorial beschrieben

Die NiFi Dokumentation (z.B. für die Beschreibung der Expression Langauge) ist auf https://docs.virtimo.net deployed

🆕 Neue Processors und Services

🆕 Pre-Release von Hybrid Cloud Processors und Services zur Anbindung von INUBIT an die IGUASU-Cloud (noch nicht produktionsreif!)

🆕 Nutzung verschiedener Registry-Clients ermöglicht

🆕 Das Vollaufen von Queues wird jetzt direkt im Diagram dargestellt

🆕 Neue Informationen am Processor

Registry

Dokumentation

Unser eigener JSLT-Processor wurde entfernt, da jetzt einer mit NiFi mitkommt

🆕 Metro Processors hinzugefügt

🆕 Audit Log - verfügbar im Monitoring Tab

Parameter Support erweitert

Upgrade auf IGUASU NiFi 1.17.0

Dynamische Properties können jetzt auch sensitive Werte (z.B. Passwörter) enthalten, wenn der Processor das unterstützt (z.B. Header-Werte an InvokeHTTP)

Detaillierte Metriken zum CPU-Verbrauch auf Processor-Ebene

🆕 Neuer Processor erlaubt Queries auf Daten, die von Salesforce kommen

🆕 Neuer ConsumeTwitter Processor ersetzt den bisherigen GetTwitter und nutzt die aktuelle Twitter-API

🆕 Neuer Processor, um auf Dateien auf Google Drive zuzugreifen

HTTP/2 support (ListenHTTP, HandleHttpRequest)

Java 17

AWS/EKS Support

🆕 Neue Darstellung für die Bulletins/Fehler

🆕 Es gibt eine neue zentrale Baumansicht aller Process Groups

🆕 Die verfügbaren Processors bzw. Services werden in den System Informationen angezeigt

🆕 An den Processors wird jetzt ein konfigurierbares Retry an den ausgehenden Relations unterstützt

🆕 Selektierte Elemente können nun direkt mit der Maus in Process Groups verschoben werden. Ebenso können sie über das Kontext-Menü in eine beliebige Process Group verschoben werden

🆕 Es wird nun eine Liste der verwendeten Softwarekomponenten mit ihren Lizenzen angeboten

An Properties, die Services konfigurieren, können diese nun direkt angelegt werden. Dabei kann die Process Group, an welcher der Service entstehen soll, gewählt werden

Ändert man Parameter Contexts an Process Groups, so wird dies nun über einen Dialog getan, der die notwendigen Operationen wie stoppen/starten etc. und das Ergebnis anzeigt

🆕 Processors können jetzt auch verifiziert werden - dies dient z.B. der Prüfung, ob ein konfiguriertes System erreichbar ist

Die Darstellung der Dokumentation entspricht jetzt der auf docs.virtimo.net; es kann auch darin gesucht werden

JSONataTransformJSON kann den Output jetzt auch komplett in ein Attribut schreiben

🆕 PutBPCAuditLog Processor

PutBPCProcessLog Erweiterungen

ListenBPCFlowStarter Erweiterungen

Mit einer entsprechenden UUID kann zu Ausführungsinstanzen innerhalb von IGUASU gesprungen werden - das wird beispielsweise aus dem BPC heraus verwendet

Erweiterungen an XmlMerge

Apache NiFi auf 1.16.3 angehoben

JSONataTransformJSON kann jetzt auch auf Attributwerte bzw. ein leeres JSON ausgeführt werden

$uuid() → $nfUuid()

$el(<el>) → $nfEl(<el>)

$attribute(<name>) → $nfGetAttribute(<name>)

$attribute(<name>, <value>) → $nfSetAttribute(<name>, <value>)

$lookup → $nfLookup(<key>)

🆕 Neuer Virtimo Theme (abgestimmt mit BPC 4 und inubit 8)

🆕 Neue, optionale Tabellenansicht für Attribute an allen entsprechenden Stellen in Flow

Filtermöglichkeit für Attribut-Sichten

🆕 Erweiterungen von Parametern und Parameter Contexts

Kommentare an Controller Services werden unterstützt

🆕 JSONataTransformJSON unterstützt jetzt Lookups

Die Rechte an Process Groups können explizit vererbt oder überschrieben werden

Die Beschreibungen der Flows sind bei der Versionierung jetzt überall verfügbar

🆕 Nutzung des Virtimo Keycloak in der Cloud (aktuell auf dev.virtimo.cloud)

Anzeige der Versions-Informationen zu IGUASU in den System Diagnostics

Konsequenter Read-Only-Modus im Production-Mode

🆕 Deep Links werden über die Anmeldung hinweg unterstützt

Neue Tastaturkürzel für die globale Suche und die Übersicht

Neue Variante des TextEditors (kein Speicherleck mehr)

🆕 Neuer How-to Bereich in der Dokumentation

🆕 Treiber, wie JDBC-Datenbanktreiber können jetzt hochgeladen und an notwendiger Stelle direkt ausgewählt werden

Im TransformXml Processor wird das JSON jetzt bei der Verwendung von 'Surround input with <xml> tag' zusätzlich mit einem CDATA Tag umgeben, damit Entity-Referenzen wie z.B. '&' keine Probleme bereiten. Sollte das CDATA schon von Hand hinzugefügt worden sein, muss dies wieder entfernt werden.

🆕 Processor PutBPCProcessLog, zum Loggen von Prozess-Daten in ein Virtimo Business Process Center

🆕 Processor, um leicht Flows vom Business Process Center aufrufen zu können: ListenBPCFlowStarter

🆕 Processor zum Mappen/Tranformation von JSON auf der Basis von JSONata: JSONataTransformJSON

🆕 Saxon EE wird für den TransformXml Processor mitgeliefert

🆕 neuer ModifyPDF Processor, um Formularfelder in PDFs zu füllen

🆕 neuer Minifier Processor, um das YAML einer Process Group für den Remote Flow automatisiert bereitstellen zu können. Darüber kann ein Remote Flow automatisch neue Versionen seiner Konfiguration beziehen

UI Update mit leichterem Erscheinungsbild

🆕 Zentrale Provenance, in der die vergangenen Ausführungen aller Flows sichtbar sind

🆕 Zentrales Monitoring aller verwendeten Komponenten

🆕 Globale Suche

Erweiterung des User-Interfaces der Services:

🆕 Speichern/Laden sowie Kopieren/Einfügen von Eingangsdaten+Attributen im Content Panel und der Queue

Selektierte Module können im Diagramm jetzt auch mit den Cursor-Tasten bewegt werden (zusammen mit Shift Pixel-weise)

Zum Erstellen der Module können diese jetzt direkt per Drag-and-drop aus der Toolbar in das Diagram gezogen werden

Alle Relationen eines neuen Processors sind jetzt per Default Auto-Terminiert. Schon verbundene Relationen sind hier auch nicht mehr auswählbar. Bei der Erstellung einer neuen Relation sieht man welche Relationen schon Verbindungen besitzen

🆕 Das erneute Abspielen eines Events ("Replay") wird nun unterstützt

In der Dokumentation werden jetzt immer alle vorhandenen Dokumentationen als Übersicht angezeigt (User Guide, Admin Guide, etc.)

Process Groups können für einzelne User-Gruppen freigegeben werden

Ein hängender Processor, der terminiert werden kann, macht dies nun in der UI direkt deutlich

🆕 Anzeige der System Diagnostics des Servers (JVM, Festplatte, etc.)

🆕 Process Groups können jetzt als JSON heruntergeladen werden. Dieses JSON kann dann wiederum beim Anlegen neuer Process Groups verwendet werden

🆕 zur Verwendung in Remote Flow kann eine Process Group als YAML heruntergeladen werden

🆕 die Registry-Benutzer können aus dem aktuellen IGUASU importiert werden

🆕 Backpressure-Default kann spezifisch für einzelne Process Groups konfiguriert werden

🆕 Run Once zum einmaligen Start eines Processors/Flows

Parameter können auch an sensitiven Properties (Passwörtern) verwendet werden

🆕 IGUASU läuft jetzt immer abgesichert (initial im Single-User-Modus)

Optimierung der Start-Skripte (z.B. durch neue iguasu-env.sh, in der etwa das verwendete Java steht)

Administrationshandbuch um Upgrade-Guide ergänzt

🆕 NiFi Server 1.15.0 integriert (zuvor 1.13.x)

🆕 es werden nun Client/Server-Authentications bei HTTPS mit der Cloud unterstützt

da IGUASU nun initial im Single-User-Modus läuft, muss vor dem ersten Start der User mit seinem Passwort gesetzt werden (siehe Einrichtung Single User Authentication)

da keine Templates mehr unterstützt werden, sollten alle Templates, die nicht als Prozess-Gruppen im zu migrierenden IGUASU vorliegen, vor der Migration importiert werden. Nach der Migration können sie dann als JSON exportiert und ggf. wieder entfernt werden

das Starten, Stoppen etc. der Processors (bzw. ganzer Process Groups) ist nun nur noch über das Kontext-Menü möglich - die Knöpfe in der Toolbar wurden entfernt

🆕 Versionierung von Flows (auf der Ebene der Prozess-Gruppen)

🆕 Wiederverwendung (von in Prozess-Gruppen gekapselten Funktionen), durch die Nutzung der Versionierung

🆕 Anzeige der lokalen Änderungen

🆕 Nutzung beliebig vieler unterschiedlicher Registries und Buckets in den Flows

🆕 Verwaltung der Registries samt Benutzern, Gruppen und Buckets

🆕 Bereitstellung eines Prometheus-basierten Monitorings in der Cloud

🆕 Liveness/Readiness-Probes für IGUASU in Kubernetes

Speicherkonfigurationen optimiert

verbesserte Clipboard-Operationen (Ausschneiden und beliebiges Einfügen)

bessere Synchronisation von Diagram und Moduleditor bei Änderungen

Darstellung der Ausführungen eines Processors erweitert

XmlTransformer (XSLT): Auflösen externer Referenzen (z.B. DTDs) abschaltbar

Dokumentation: Tipps zum Betrieb sowie zur Optimierung von Flows hinzugefügt