PowerTSM®️ Zeitreihen Management – Data Warehouse Qualität in der Azure-Cloud und KI Einbindung.

Die Energiewende – eine komplexe und anspruchsvolle Datenwelt ist im Entstehen.

Wenn wir über die Datenwelt der Energiewende sprechen, dann sprechen wir über Big Data. Das alleine wäre schon Herausforderung genug, um die Versorgungsnetze stabil zu halten. Doch die Herausforderungen, denen sich Energiedienstleister bereits heute datentechnisch zu stellen haben, sind weitaus anspruchsvoller als nur der Umgang mit großen Datenmengen. In allen Bereichen ist ein beschleunigtes Wachstum der Datenmengen zu beobachten, das mit einer zunehmenden Komplexität einhergeht.

Parallel zu diesem allgemeinen Phänomen verändert sich die Art und Weise, wie Daten verarbeitet, gespeichert und verteilt werden. Edge Devices übernehmen die grundlegende Verarbeitung von Daten, speichern sie und leiten sie an Gateways weiter. Von dort gelangen die komprimierten Datensätze in Cloud Lösungen. Herkömmliche IT Ansätze wären nicht einmal annähernd in der Lage, diese Komplexität abzubilden oder die erforderliche Prozessgeschwindigkeit zu liefern.

Die Komplexität, die auf der IoT - und Gateway Ebene herrscht, setzt sich auf höheren Ebenen fort. Daten finden ihren Weg in unterschiedliche Cloud Lösungen wie z.B. OCI, AWS oder Azure aber auch in On-premis Lösungen, werden in unterschiedlichsten Formaten in einer Vielzahl, auch ereignisorientierten Datenbanksystemen, gespeichert. Wenn auf Basis dieser Daten schließlich wichtige Entscheidungen getroffen werden sollen, stellt sich eine grundlegende Frage: Mit welcher Datenqualität haben wir es zu tun? Sind die Daten authentisch, sind sie manipuliert, plausibel und auch vollständig? Es geht um Vertrauen, denn Entscheidungen, die auf der Grundlage dieser Daten getroffen werden, können weitreichende Folgen haben.

Sehen wir uns an, wie elegant und nahtlos PowerTSM® das Problem des Zeitreihen Managements in dieser anspruchsvollen Umgebung löst: Im Multi-Cloud Umfeld, in hybriden Lösungen aus Cloud und On-premis, polyglott im Datenbankbereich und in Bezug auf die Datenqualität. Azure Services helfen bei der einfachen Datenintegration und dem Aufbau von KI Lösungen und machen PowerTSM® zu einem echten ganzheitlichen Ansatz.

Hands on – Datenqualität in einer komplexen Energiewelt mit PowerTSM®.

Vertrauenswürdigkeit – authentische Daten erzielen.

Die Infrastruktur einer modernen Energiewirtschaft ist hochgradig vernetzt. IoT, Edge Devices, Gateways und 5G Netzwerke dominieren die Landschaft. Rechenleistung und Speicher sind an die Ränder des Netzwerks verlagert worden. Sie sind ein besonderes Einfallstor für Datendiebstahl oder -manipulation oder Angriffe auf die Infrastruktur im Allgemeinen. Die Absicherung lokaler Netzwerke mit effektiven Firewalls ist nur ein Aspekt der Datensicherheit, denn wenn Daten aus LAN oder WAN Strukturen ihren Weg in die Cloud oder zu On-premise Lösungen finden, sind sie Freiwild für Hacker. Nur eine end to end Verschlüsselung bietet Sicherheit. Um Azure Cloud Nutzer bei sicherem Datenverkehr zu unterstützen, hat Microsoft das Azure Edge Secured Core Programm lanciert. Im Rahmen dieses Programms werden Geräte zertifiziert, die hohen Anforderungen genügen müssen: Verschlüsselung direkt auf dem Chip, Updatefähigkeit und die regelmäßige Bereitstellung von Sicherheits Patches oder die versiegelte Auslieferung der Geräte an den Endkunden sind nur einige der Kriterien.

PowerTSM® fügt sich nahtlos in das System der end to end Verschlüsselung ein. Verschlüsselte Daten, die in die Azure Cloud gelangen, werden erst in der Entität des PowerTSM® Nutzers wieder entschlüsselt. PowerTSM® stellt entschlüsselte Daten direkt in einer entsprechenden Zeitreihe zur Verfügung und versieht diese mit einem Flag authentifizierung oder eben nicht. Da die Flags aufwärts skalierend vererben, ist es möglich, auch bei der Auswahl eines groben Zeitrasters zu erkennen, ob die gesamte Zeitreihe vollständig authentifiziert ist. Dies gewährleistet maximale Datensicherheit in der Cloud ohne den geringsten Mehraufwand für den PowerTSM® Kunden.

Check-up – sind meine Daten plausibel?

Die Überprüfung von Daten auf Authentizität ist nur ein Schritt, aber ein sehr wichtiger, um die Datenqualität sicherzustellen, insbesondere in der Cloud. Ein weiterer wichtiger Faktor ist die Frage: Sind die vorliegenden Daten tatsächlich plausibel? Hier ist zu unterscheiden zwischen Ausreißern, also korrekten, aber ungewöhnlichen Daten und Daten, die tatsächlich falsch sind. Letztere können aus Messfehlern aufgrund technischer Probleme und vielem mehr resultieren. Falsche Daten müssen in jedem Fall aus den Zeitreihen entfernt werden. Anders verhält es sich mit Ausreißern, die z. B. im Bereich Predictive Maintenace eine wichtige Informationsquelle darstellen.

PowerTSM® bietet eine breite Palette an Möglichkeiten, Daten auf Plausibilität zu prüfen. Von sehr einfachen, wie der Definition von Bandbreiten, innerhalb derer sich bestimmte Daten bewegen sollten, bis hin zu komplexeren Verfahren wie der Spiegelung von Prognosedaten. Kunden können eine Toolbox einsetzen oder eigene Verfahren auf der Grundlage von Python oder anderen Programmen entwickeln. Wenn Daten identifiziert werden, die nicht plausibel sind, müssen Aktionen ausgelöst werden, um sie gegebenenfalls zu ersetzen. Damit sind wir beim dritten Thema im Bereich der Datenqualität angelangt: Das Schließen der Lücke.

Die Lücke schließen – Daten mit qualifizierten Routinen vervollständigen.

Lücken, fehlende Daten in Zeitreihen, können durch technische Probleme verursacht werden. In der Regel sind sie das Ergebnis der Synchronisation eines Zeitreihen Sets mit unterschiedlichen Zeitrastern. Dieses Thema wird in Zukunft an Bedeutung gewinnen. Die Energieinfrastruktur wird mit hoher Geschwindigkeit von IoT Devices durchsetzt, die ständig Informationen in nicht standardisierten Zeitrastern, auch aus unterschiedlichen Zeitzonen, in Cloud Lösungen einspeisen. Um Datenqualität zu erzielen, etwa um auf Basis der vorhandenen Daten exakte Prognosen rechnen zu können, müssen Datenlücken sinnvoll geschlossen werden. Es lohnt sich daher, einen Blick darauf zu werfen, was PowerTSM® in diesem Bereich leisten kann, um Daten in höchstmöglicher Qualität bereitzustellen.

PowerTSM® bietet eine Reihe von Bordmitteln zum automatisierten Schließen von Datenlücken mithilfe von Routinen. Dies beginnt bei einfachen Methoden wie der Verwendung des Durchschnitts von n Elementen vor und nach der Datenlücke als Platzhalter, bis hin zu komplexeren Methoden: Prognose Rechnungen, Referenz Zeitreihen oder die Best Picture Methode können zum Schließen von Datenlücken beispielsweise eingesetzt werden. Den Kunden sind jedoch wiederum keine Grenzen gesetzt. Sie können eigene Entwicklungen mit Python implementieren oder Azure AutoML nutzen, um Datenmodelle zum Schließen von Lücken zu trainieren.

Für welche Lösung(en) sich PowerTSM® Kunden auch entscheiden, um Datenlücken zu schließen, sie bleiben nachvollziehbar. Mit Hilfe der Audit Achse, protokolliert PowerTSM® jeden Eingriffe in die ursprüngliche Zeitreihe. So ist jederzeit nachvollziehbar, welche Daten auf welcher Basis manipuliert wurden. Alle hier genannten Verfahren können auch dazu verwendet werden, nicht validierte Daten in Routinen zu ersetzen. Es muss nicht erwähnt werden, dass PowerTSM® das Zeitzonen Problem automatisiert löst. Neben der Audit Achse ist dies eines der vielen Merkmale, die PowerTSM® so einzigartig und zu einem Industriestandard in der Energiewirtschaft gemacht haben.

Immer an Ihrer Seite – PowerTSM® und die Welt der Azure Cloud.

Integrieren Sie jedes erdenkliche IoT Gerät – erleben Sie IoT Hub.

IoT Devices folgen keinem standardisierten Design. Die Integration verschiedener Typen in eine Cloud Lösung kann eine Herausforderung sein. Aus diesem Grund bietet Azure den IoT Hub, ein Backend, mit dem sich nahezu jedes IoT Devices mit Azure Anwendungen verbinden lässt. Und das Backend leistet deutlich mehr als nur IoT Devices zu integrieren. Es bietet eine sichere Datenverbindung, ermöglicht das Rollout von System Updates für Devices und integriert nahtlos Azure Events für diejenigen, die ereignisorientierte Geschäftsprozesse einsetzen. Auch hybride IoT Anwendungen lassen sich im Backend des IoT Hubs problemlos implementieren.

Daten integrieren, egal woher und wohin – Azure hat die Werkzeuge.

In einer komplexen Energiewelt müssen immer mehr Systeme datentechnisch miteinander verknüpft werden, um Netze stabil zu halten, genaue Prognosen rechnen zu können oder beispielsweise den Energiehandel zu ermöglichen. Es gilt Vielzahl an Systemen miteinander zu verbinden. Bauen Sie mit Azure Arc Brücken zu AWS, OCI, Edge oder On-premise Inseln und erschaffen Sie neue Datenwelten. Erstellen Sie Cloud native Anwendungen und nutzen Sie diese überall. Analysieren Sie den Datenschatz systemübergreifend und gewinnen Sie neue wertvolle Einblicke und Erkenntnisse. Schützen und steuern Sie Ihre gesamte Infrastruktur zentral und stellen Sie sicher, dass alle Systeme die erforderlichen Governance - und Compliance Standards erfüllen. Das ist Azure Arc.

Reden wir nicht nur darüber, tun wir es – Nutzen Sie die Leistung von AI mit Azure.

Exakte Prognosen auf der Grundlage von Zeitreihen sind einer der Eckpfeiler der entwickelten Energiewirtschaft. Das Problem ist, dass „Vorhersagen schwierig sind, besonders wenn sie die Zukunft betreffen“, merkte Mark Twain an. Etwas Hilfe wäre nützlich. Trainieren Sie Prognose Modelle mit PowerTSM® und Azure AutoML. AutoML ermöglicht es Ihnen, ML Modelle mit hoher Skalierbarkeit, Effizienz und Produktivität bei hoher Modellqualität zu gestalten. PowerTSM® und Azure das perfekte Team für präzise Vorhersagen.

Azure AI Studio ist der ideale Ort, um schnell in die Welt der KI einzusteigen. Eine Web-App hilft Ihnen bei Ihren ersten Schritten, in Azure Playground können Sie mit Ihren ersten KI Anwendungen experimentieren und AI Studio ist Ihr zuverlässiger Partner bei der Bereitstellung Ihrer KI Anwendungen. Nutzen Sie AI Studio, um Ihren persönlichen Copiloten für Ihr Unternehmen zu entwerfen und neue Einblicke und Arbeitsweisen zu ermöglichen. Ihren Ideen zur Nutzung von KI für Ihren Geschäftserfolg sind keine Grenzen gesetzt.

PowerTSM® und Azure – die innovativen Lösungen für die Gestaltung ganzheitlicher Ansätze für Ihren Erfolg.

Unsere Energiewelt wird immer komplexer, aber mit den richtigen Systemen und Werkzeugen wird sie nicht noch komplizierter werden. Es ist daher an der Zeit, bisherige Ansätze zu hinterfragen und in neuen Bahnen zu denken. Die Zukunft liegt in der Cloud und KI wird uns helfen, die neuen Herausforderungen erfolgreich zu meistern. PowerTSM® und Azure sind Ihre Partner auf dieser Reise. Mehr zu PowerTSM® hier.

HAKOM YouTube Channel.