Übersicht
Tianjin Xintiangang Steel Group Co., Ltd. | Großes Stahlherstellungsunternehmen
Land: China
Branche: Fertigung / Stahlproduktion
Lösung: Echtzeit-Daten-Synchronisationsplattform i2Stream
Der Konzern betreibt mehrere Kerndatenbanken wie Oracle, MySQL und SQL Server. Diese sollten in eine Big-Data-Plattform integriert werden, um Echtzeitanalysen und Berichterstellung zu ermöglichen. Ziel war es, die vordergründigen Geschäftssysteme von den Backend-Plattformen zu entkoppeln und gleichzeitig hohe Leistung, Zuverlässigkeit sowie plattformübergreifende Kompatibilität sicherzustellen.
Herausforderungen des Kunden
- Vielfältige Datenbankumgebung – Oracle, MySQL und SQL Server erforderten eine einheitliche Echtzeit-Datenerfassung auf Protokollebene.
- Leistungsbelastung – Die Auswirkungen auf die Quellsysteme mussten minimiert und ein ununterbrochener Betrieb sichergestellt werden.
- Dateninseln – Die Geschäftsbereiche arbeiteten unabhängig voneinander, was fragmentierte Daten und uneinheitliche Auswertungen zur Folge hatte.
- Komplexe Integration – Eine flexible Entkopplung war erforderlich, um Data Warehouses, herkömmliche Datenbanken und Big-Data-Plattformen anzubinden.
Lösung von Information2
- Auswertung auf Protokollebene – i2Stream analysiert bestätigte Datenbank-Transaktionsprotokolle (DDL + DML) und standardisiert Änderungen in Echtzeit.
- Kafka-basierte Middleware – Daten werden einmalig aus den Quellsystemen extrahiert und in Kafka geladen. Dadurch erfolgt eine vollständige Entkopplung mit Unterstützung für mehrere nachgelagerte Konsumenten.
- Lastverteilung – Implementierung einer Lastverteilung auf Tabellen- und Primärschlüsselebene, um eine Schieflage der Daten innerhalb der Kafka-Partitionen zu vermeiden.
- Nicht-intrusive Datenerfassung – Online-Dateninitialisierung per SCN-Steuerung für eine sichere, leistungsstarke Datenerhebung ohne Betriebsunterbrechungen.
- Web-basierte Überwachung – Grafische Verwaltungsplattform zur Echtzeitüberwachung, Trendanalyse und übergreifenden Systemkontrolle.
Ergebnisse der Lösung
- Plattformübergreifende Kompatibilität erreicht; Unterstützung von Oracle, MySQL, SQL Server und DB2 in verschiedenen Betriebssystemumgebungen.
- Beseitigung von Dateninseln, konsistente und genaue Berichte sowie nahtlose Anbindung an Analyseplattformen möglich.
- 7×24-Stunden sicherer Betrieb mit leistungsstarker Echtzeit-Datenübertragung und flexibler Integration nachgelagerter Systeme.
- Vereinfachte Verwaltung durch zentralisierte web-basierte Überwachung und Berichtsfunktionen.