Kompetent in allen Themen?
In der Präsentation unten finden Sie eine detaillierte Aufstellung unserer Fragen, der Antworten von ChatGPT und unsere Kommentare dazu. Alles in allem müssen wir dem Chatbot zugestehen, dass uns die Qualität seiner Antworten überrascht hat. Er gibt sich angenehm – oder trügerisch – menschlich, je nach dem aus welchem Blickwinkel man das sehen will.
Die Kompetenz, die ChatGPT mit seinen geschliffenen Formulierungen und dem manchmal leicht belehrendem Ton ausstrahlt, kann einem leicht in falscher Sicherheit wiegen. Bei einer konventionellen Suchmaschine bekommt der Nutzer ja eine Reihe von Antworten und kann dann die auf seine Situation passende auswählen. ChatGPT dagegen versucht aufgrund der vorhandenen Informationen die wahrscheinlichste zutreffende Information auszuwählen und präsentiert diese dann als (alleingültige) Antwort. Ein Hinweis darauf, wie zuverlässig die Information ist fehlt. Allerdings empfiehlt der Chatbot immer wieder, die örtlichen Zollbehörden oder einen Experten zu konsultieren. Immerhin.
Spezielle Ausgangslagen, unbekannte Situationen und unvollständige Fragestellungen
Vielleicht gehört Ihre Situation aber nicht zu den gängigen Standartsituationen und aufgrund der Beschreibung konnte dies nicht erkannt werden. Dann erhalten Sie eine falsche Antwort. Manchmal sind auch die Daten, auf die sich ChatGPT bezieht, unvollständig oder zweifelhaft und enthalten falsche Informationen. Auch dann ist die Antwort nicht richtig und Sie haben nicht die Möglichkeit, die Seriosität der Quelle zu prüfen (ausser Sie fragen den Chatbot in einem weiteren Schritt danach).
In einem Beispiel, als wir nach der Anmeldung der Waren bei Seefracht nach Ägypten fragten, fehlte zum Beispiel der Hinweis auf die obligatorische ACID-Nummer, ohne die die Fracht beim Import abgewiesen wird. In einem anderen Beispiel, betreffend Mehrwertsteuerregelung für eine Schweizer Firma bei einer direkten Lieferung von Deutschland nach Österreich, waren die Angaben ebenfalls unvollständig, zum Beispiel darüber, was auf der Rechnung alles zusätzlich vermerkt werden muss.
Je präziser man die Frage formuliert, desto genauer auch die Antwort. Beschreibt man nur kurz eine Situation (wie man dies für eine Suchmaschine tun würde), stellt man fest, dass ChatGPT bei der Erfassung der Frage offenbar mehr Mühe hat als bei der Interpretation der Informationen, aus denen er seine Antworten zusammenstellt. Bei der Eingabe „Export von HS-Code 8506. 90 aus der Schweiz nach Russland“ erklärt er, was das bedeutet. Die implizite Frage, was Sie in diesem Fall machen müssen, bleibt aber unbeantwortet.
Historische Basisdaten und aktuelle Antworten
Ganz wichtig ist es auch sich bewusst zu sein, dass ChatGPT mit Daten bis September 2021 trainiert wurde. Alles was aktueller ist, fliesst deshalb nicht in die Antworten ein. So „wusste“ ChatGPT zum Beispiel nichts von den aktuell für die Lieferung nach Russland aus der Schweiz sanktionierten Produkten. Das ist gerade für die Fragen der Exportabwicklung, wo man immer auf dem aktuellen Stand sein muss, natürlich absolut unbefriedigend. In Zukunft wird sich zeigen, wie schnell der Chatbot aktuelle Nachrichten in seine Antworten einfliessen lassen kann.
Gegenwärtig empfehlen wir aus den oben genannten Gründen, deshalb (noch) die Antworten kritisch zu hinterfragen und wie von ChatGPT derzeit vorgeschlagen, bei Unsicherheiten, Experten zu konsultieren.
