Erweiterte Assistenz

Erweiterte Assistenz

ABB präsentiert mit Service Assist eine mobile Anwendung, die Ingenieure und Techniker im Feld mit detaillierten, situationsspezifischen Echtzeit-Informationen versorgt.

Subscribe to ABB Review

Anna Mazzoleni, Callisto Gatti, ABB S.p.A. Dalmine, Italy, anna.mazzoleni@
it.abb.com, callisto.gatti@it.abb.com
Tomas Kozel, ABB s.r.o.Brno, Czech Republic, tomas.kozel@
cz.abb.com

Neben kognitiven Funktionen wie Speech-to-Text, Text-to-Speech und der Verwendung natürlicher Sprache zum Auffinden von Inhalten nutzt die App erweiterte Realität (Augmented Reality, AR), um visuelle und akustische Informationen auf vorhandenen Systemen einzublenden, und schafft somit einen interaktiven virtuellen Assistenten.

Wenn es um Technologie geht, kann das, was gestern noch neu war, schon morgen Geschichte sein. Das gilt besonders für Energieverteilnetze, die mit zunehmendem Anteil erneuerbarer Energiequellen immer komplexer werden. Diese Komplexität bedeutet eine große Herausforderung für Servicetechniker und Ingenieure, die in Kundenanlagen Probleme im Zusammenhang mit einer Vielzahl von Komponenten – von Motoren und Ventilen bis hin zu Schaltanlagen und Transformatoren –diagnostizieren und lösen müssen.

Und das ist nur ein Teil der Herausforderung, denn manchmal liegt das Problem nicht nur bei der physischen Ausrüstung. Versteckte Hürden in Form von Produktnamen und lokalem Jargon können die Arbeit eines Technikers bei der Diagnose und Problembeseitigung erheblich erschweren. Wie kann ein Neuling aus Anweisungen wie „repariere den VD4-Leistungsschalter am Abgang zu T11 im UniGear ZS1 Feld TS4“ schlau werden? Noch komplizierter wird es, wenn Komponenten von verschiedenen Herstellern beteiligt sind.

Beim ABB Energy Insights Survey [1] – einer Umfrage unter 2.300 Führungskräften von 
kleinen und großen Unternehmen –waren 92 
Prozent der Teilnehmenden der Ansicht, dass die anhaltende Instabilität der Energiepreise auch eine erhebliche Auswirkung auf Investitionen in Personal und deren Schulung hat. Wenn also ältere Mitarbeitende in den Ruhestand gehen und die Mittel für Schulungen gekürzt werden, steigt der Bedarf an Unterstützung.

01 Test der Service Assist Anwendung mit einem Hololens-Headset von Microsoft (geplante Einführung Ende 2024).
01 Test der Service Assist Anwendung mit einem Hololens-Headset von Microsoft (geplante Einführung Ende 2024).
center

Ein persönlicher Assistent
Angesichts dieser Entwicklungen hat ABB im Jahr 2023 die mobile Anwendung Service Assist eingeführt →01–02. Die App ist speziell darauf ausgelegt, Feldpersonal bei seinen täglichen Aufgaben zu unterstützen, und bietet Zugang zu verschiedenen Dokumenten zu elektrischen Anlagen einschließlich immersiver AR-Anleitungen. Sämtliche Inhalte sind auf den installierten Bestand des Kunden zugeschnitten und werden mit der kundenspezifischen Nomenklatur dargestellt. Service Assist kann zudem zur Übermittlung von Schulungsanfragen und zur Buchung von Terminen für Vor-Ort- oder Remote-Services genutzt werden.

02 Die App ist speziell für Feldpersonal konzipiert und ermöglicht den Zugriff auf immersive AR-Anleitungen.
02 Die App ist speziell für Feldpersonal konzipiert und ermöglicht den Zugriff auf immersive AR-Anleitungen.
center

Ein besonderes Merkmal der App ist ABB-e, ein virtueller Assistent, der Nutzerinnen und Nutzern beim Auffinden von Anleitungen und Buchen von Terminen per Sprachsteuerung hilft. Dieser virtuelle Assistent nutzt kognitive Funktionen wie Speech-to-Text, Text-to-Speech und Absichtserkennung (Intent Recognition), um Nutzerinnen und Nutzer schnell und effizient zu den relevantesten Inhalten zu führen. Dabei ist er besonders darauf trainiert, Elektrotechnik-Jargon zu verstehen.

So können Techniker Handbücher, Videos und vor allem AR-Anleitungen abrufen, was auch weniger erfahrenen Personen eine erfolgreiche Problembeseitigung ermöglicht. Dabei ist das System nicht auf Dokumentation und Ausrüstung von ABB beschränkt, sondern kann auch Dokumentationen anderer Hersteller sowie kundenspezifische Informationen – zum Beispiel eine Sicherheits-Checkliste für den Zugang zu einem bestimmten Teil einer elektrischen Anlage – aufnehmen.

Situationsspezifische Daten und Bilder
Dank der AR-Technologie der App können betriebliche Informationen auf eine völlig neue Weise dargestellt werden, indem situationsspezifische Daten und Bilder in das Sichtfeld des Nutzers eingeblendet werden →03a, 03b. Das Ergebnis sind eine schnelle Unterstützung und ein einfacher Zugang zu Anleitungen zur Bedienung und Fehlerbehebung über ein immersives AR-Erlebnis.

  • 03a Situationsspezifische Daten und Bilder fungieren als virtueller digitaler Assistent.
  • 03b Ein einfacher Zugang zu Anleitungen beschleunigt die Problemlösung.

03 Service Assist hilft einer Technikerin bei der Behebung eines Fehlers an einem Mittelspannungs-Schaltanlagensystem von ABB.

Diese AR-Funktionalität macht die digitale Unterstützung interaktiv und sorgt dafür, dass sie einfacher zu verstehen und umzusetzen ist. Mit anderen Worten, die Kernkompetenzen der Lösung sind Visualisierung, Anweisung und Interaktion.

Sind die angebotenen AR-Informationen des Systems unklar, können sich Nutzerinnen und Nutzer im Rahmen des RAISE-Service von ABB (Remote Assistance for Electrical Systems) mit einem Servicespezialisten von ABB in Verbindung setzen →04. Dieser kann dann AR-Informationen in das Sichtfeld des Nutzers einblenden, um seine 
sprachlichen Anweisungen visuell zu unterstützen. Abgedeckt werden dabei Themenbereiche wie Reparaturen und Fehlerbehebung, Wartungsunterstützung, technische Informationen zur Bedienung, Ersatzteilidentifikation, Überwachung und Diagnose, Installation und Inbetriebnahme. So lassen sich die Reparatur- und Wartungszeiten für elektrische Anlagen verkürzen, da die ABB-Experten das Personal vor Ort über deren Android- oder iOS-Smartphone, Tablet, Datenbrille oder andere unterstützte Wearables aus der Ferne anleiten können.

04 Ist die AR-Anleitung des Systems unklar, können Nutzerinnen und Nutzer Remote-Unterstützung in Echtzeit anfordern.
04 Ist die AR-Anleitung des Systems unklar, können Nutzerinnen und Nutzer Remote-Unterstützung in Echtzeit anfordern.
center

Schnellere Problemlösung
Unterm Strich führt dies zu einer schnelleren Problemlösung, was für die Minimierung potenziell störender und kostspieliger Ausfallzeiten von entscheidender Bedeutung ist. Das gilt besonders für kritische Anlagen wie Rechenzentren oder die Stromversorgung in Krankenhäusern. In einem Fall benötigte einer der weltweit größten Schiffsbetreiber eine Fernwartungslösung, um die Behebung von Problemen auf seiner globalen Flotte zu unterstützen und die Auswirkungen von Problemen auf See zu mindern. Dank AR-basierter Serviceunterstützung konnten die Fähigkeiten der Techniker an Bord erweitert werden, sodass diese auch Fehler diagnostizieren und beheben konnten, mit denen sie keinerlei Erfahrung besaßen.

Darüber hinaus kann die Remote-Unterstützung durch ABB Service Assist zu einer erheblichen Reduzierung des servicebedingten Energiebedarfs beitragen. So konnte ABB laut eigenen Angaben mithilfe der Technologie die notwendigen Vor-Ort Besuche von Serviceingenieuren um ein Drittel reduzieren und so etwa 332 Tonnen CO₂ im Jahr einsparen.

Neben Live-Anmerkungen auf dem Bildschirm und digitalen Einblendungen in das Sichtfeld eines Technikers bietet die App auch die Möglichkeit, Bilder aufzunehmen und Audio- und Video-Inhalte per Live-Chat zu teilen.

Eine neue AR-Erfahrung
Im Hinblick auf die Zukunft hat die Einführung von Large Language Models (LLMs) wie ChatGPT der Welt der Chatbots und Assistenten neue Impulse verliehen. Das gilt auch für Service Assist von ABB. Zurzeit entwickelt ABB ein Proof-of-Concept →05das ein LLM nutzt, um statt vorgefertigter Informationen umfassende Antworten auf geschriebene oder gesprochene Fragen zu liefern. Diese neue Entwicklung könnte irgendwann mit den Headsets Vision Pro von Apple oder Ques 3 von Meta kombiniert werden – Systeme, die das Potenzial besitzen, dem freihändigen AR-Erlebnis eine neue Dimension zu verleihen.

05 Proof-of-Concept-Test mit Darstellung der physischen Architektur eines Überwachungs- und Diagnosesystems.
05 Proof-of-Concept-Test mit Darstellung der physischen Architektur eines Überwachungs- und Diagnosesystems.
center

Literaturhinweis
[1] ABB. ABB Energy Insights Survey Report 2023. Available: https://campaign.abb.com/energy-insights-report-2023 Accessed October 2, 2023

Links

Kontaktieren Sie uns

Downloads

Diesen Artikel teilen

Facebook LinkedIn X WhatsApp