Erfahrungsbericht: KI-gestützte Erstellung von tomedo®-Objekten (Experimentelles Feature)

Andreas Tenzer

Hallo zusammen,

aufmerksam geworden durch diesen Thread (weitere Infos siehe Handbuch) habe ich gerade mal die spannende Funktionalität testen wollen.

1. Kontextdatei runtergeladen (Briefkommandos)

2. In Chatgpt reingefüttert mit dem Prompt ("Hier ist der Kontext über tomedo®. Bitte nutze ausschließlich diesen Kontext für meine folgende Anweisung: erstelle mir ein Briefkommando über das Systemdatum in 30 Tagen, mit Wochentag, Monat ausgeschrieben")

3. Ergebnis:

$[d heute+30 EEEE, dd. MMMM yyyy]$

hmmmmm, so geht das aber nicht ;-) Mein Baukasten hat da eine andere Syntax.

Liegt das nun an mir? Ist meine Anweisung falsch formuliert?

Braucht die KI noch ein wenig?

Macht Gemini das evtl. besser?

Sind die anderen Kontexte (Briefvorlagen, Marker, ...) evlt. besser in der Funktionalität?

Lieben Dank für eine Einschätzung und viele Grüße aus Augsburg

Andreas Tenzer

Gemini ist da auch nicht viiiiel gescheiter, gibt es zumindest zu

Christoph Baumbach

Ja, wenn Sie in die Kontextdatei reinschauen, Herr Tenzer, sehen Sie, da steht zum x Kommando so gut wie nichts drin. Das Selbe gilt für d Kommandos und andere Kommandos, die viele Parameter haben.

Wenn Sie jetzt Gemini oder nem anderen LLM z.B. den Aufbau ihres Generators erklären oder im Detail erklären wie die Kommandos aufgebaut sind und es bitten, das in die Kontextbeschreibung aufzunehmen, wird es danach auch x Kommandos können.

Und genau deswegen sind die Feature experimentell. Wir müssen den Kontexten noch ettliche Details beibringen was z.T. recht aufwändig ist.

Krasses Gegenbeispiel sind die Pythonmarker oder Statistiken. Das funktioniert z.T. schon außerordentlich gut, weil sich das viel leichter beschreiben lässt Anhand von Beispielen.

Die Briefkommandos werden vermutlich auch erst dann gut, wenn das LLM mit tomedo sprechen kann um z.B. herauszufinden in welchem Karteieintragstyp man so dokumentiert oder ob man CKEs hat und wie deren Felder heißen. So losgelöst ist es eher eine andere Art von Suchfunktion.

Falls Sie Lust haben, bieten wir mal einen Abend an wo wir zeigen, wie man diese Kontextdateien erweitert und LLMs so mehr Tricks beibringen kann. Wenn sie dann irgendwann gut genut sind, werden wir es in tomedo direkt einziehen lassen.

Viele Grüße,

Christoph Baumbach

Christian Klaproth

KI kann dabei unterstützen aber die Funktionalität eines komplexen CKE wird die KI nicht liefern können.

Andreas Tenzer

Tausend Dank für die Infos. Somit kann ich das nun besser einschätzen (ich war garnicht auf die Idee gekommen, in die Textdatei zu sehen. Das erklärt das Verhalten freilich)

Ich habe übrigens noch probiert, die Textdatei um das D-Kommando zu ergänzen.

ChatGPT ist weiterhin daneben

aber Gemini ist nah dran.

Spannend! Vielleicht kann man ja beim Anwendertreffen das Ganze vertiefen ;-)

Christoph Baumbach

Am Besten geben Sie jetzt drei Beispiele an für die Verwendung des d Kommandos zusammen mit der Beschreibung. Dann fordern Sie das LLM auf, die Beschreibung des Kommandos selbst zu verfassen, so dass ein LLM es optimal versteht. Dann nimmt man ein anderes, gibt dem die Erklärung und fragt was anderes. Wenn es wieder falsch ist, sagt man ihm dann das richtige Ergebnis und bittet es dann die Beschreibung so anzupassen, dass ein LLM das Kommando richtig verwendet.

Meist geht es recht schnell. Der wichtigste Schritt ist wirklich das LLM selbst formulieren zu lassen, wie es funktioniert.

Christoph Baumbach

Ja, das glaube ich auch nicht. Ich würde sagen, es ist ein Werkzeug. Ein bischen wie eine Handsäge und eine CNC Fräse. Die CNC Fräse baut keine schönen Tische aber ein Tischler kann damit ganz andere Dinge tun als mit der Handsäge. Wenn wir unsere Arbeit gut machen, bauen Sie damit später Pyramiden.

Ein Beispiel: mit dem Statistik Prompt kann man sehr effiziente kurze Statistikabfragen basteln. Diese eignen sich dann auch wirklich, um jede beliebige Aktionskettenbedingung zu bauen, was vorher nur mit viel Fachwissen möglich war.

Da fällt mir auch gleich ein, wir sollten dem Briefkommandokontext auch noch mal NSExpressions und Regex beibringen. Das wäre sicher auch ein Spaß.

Andreas Tenzer

Au ja! Regex wäre suuuuuper! Da steige ich immer nach dem ersten Zeichen aus...

Andreas Tenzer

Sehr starke Herangehensweise! Das teste ich sehr gerne mal. Tausend Dank!

Ingo Wenningmann

Hallo Herr Baumbach,

großartig, dass es Kontext jetzt direkt von Tomedo gibt. Bisher musste ich ihn per deepsearch selbst erzeugen; je nach Thema klappte das mal besser, mal schlechter – aber nie auch nur im Ansatz so gut wie der von Ihnen.

Über weitere Beispiele würde ich mich sehr freuen!!

Viele Grüße

Ingo Wenningmann

Jan Smid

Hi,

Beisse mir gerade an Regex die Zähne aus (also asu regex101 was tomedokompatibles machen) --> bitte auch was für das Bauen von Regex hinterlegen.... vielen Dank

-js

Christoph Baumbach

Ich hatte schon darüber nachgedacht, aber ich glaube das ist vermutlich nicht nötig. Wenn Sie nach einem Regex fragen zur Auswertung als NSExpression und beschreiben was genau der Input und das Ergebnis sein soll, dann sollte ein LLM das so können.

Haben Sie mal ein Beispiel für einen Regex den sie suchen? Ich hole mir für die Patientenformulare z.B. zum Validieren von Eingaben ständig die Regexe so.