ChatGPT lernt Analogien

Ich habe eine Aufgabe genannt bekommten, die KI angeblich noch nicht lösen kann, aber von Kindern der zweiten Klasse schon. Das hat mich neugierig gemacht. das Original bekam ich so:

Beim unaufmerksamen Lesen lösen viele Menschen die Aufgabe falsch, da sie ungewöhnlich gestellt ist. Man muss auf die Details schauen. Daher empfehle ich, die Aufgabe zu lösen und dann die Lösung nochmal kritisch zu hinterfragen.

ChatGPT kann die Aufgabe nicht korrekt lösen

Ich habe diese Aufgabe am 09.02.2025 in etwas vereinfachter Form ChatGPT gestellt. Und ChatGPT machte den Fehler, den viele Menschen auch machen (ich verrate hier aber nicht welchen, um den Spaß am Selberlösen nicht zu verderben).

Hier ist das Protokoll. Es ist sehr lang, da ich schauen wollte, ob ChatGPT selbst Fehler findet. Aber in dieser Form war es hoffnungslos und ChatGPT erscheint bemüht aber kommt ständig ins Stolpern:

PDF-Datei ChatGPT_Kaengoroo_Panda.pdf anzeigen bzw. herunterladen.   PDF-Datei ChatGPT_Kaengoroo_Panda.pdf anzeigen bzw. herunterladen. (292 kB)

ChatGPT kann die Aufgabe in anderer Formulierung lösen

Wenn ich analoge Formulierungen verwende, wie sie in der Mathematik oder Informatik vorkommen (Listen, davor und danach) kann ChatGPT die Aufgabe korrekt lösen. Dazu sei angemerkt, das in jedem Experiment eine neue (anonyme) Session gestartet wurde (also ohne Anmeldung). ChatGPT konnte also kein Wissen aus vorherigen Anfragen nutzen:

PDF-Datei ChatGPT_Kaengoroo_Panda2.pdf anzeigen bzw. herunterladen.   PDF-Datei ChatGPT_Kaengoroo_Panda2.pdf anzeigen bzw. herunterladen. (30.5 kB)

ChatGPT kann die Originalaufgabe mit Hinweis lösen

Beim nächsten Experiment habe ich die gleiche Aufgabe mit einem Hinweistext versehen, der ChatGPT aufforderte, das Problem zunächst umzuformulieren. Die Lösung ist nun richtig:

PDF-Datei ChatGPT_Kaengoroo_Panda3.pdf anzeigen bzw. herunterladen.   PDF-Datei ChatGPT_Kaengoroo_Panda3.pdf anzeigen bzw. herunterladen. (46.7 kB)

Lösung mit Briefing zu Analogien

Nun wollte ich wissen, ob es hilft, mit ChatGPT vorher über Analogien recht allgemein zu sprechen, ChatGPT darauf hinzuweisen dass es bei einer Aufgabe versagte, wenn keine analogen Begriffe verwendet worden sind, und dann erst auf die Aufgabe schickte. ChatGPT löste sie:

PDF-Datei ChatGPT_K_P_analogien.pdf anzeigen bzw. herunterladen.   PDF-Datei ChatGPT_K_P_analogien.pdf anzeigen bzw. herunterladen. (144 kB)

Lösung mit Transferleistung

Allerdings habe ich hier die passende Analogie bereits genannt. Ich wollte nun wissen, mit wie wenig und mit wie allgemeinem Briefing ich auskomme. Das Briefinug soll wie eine Präambel funktionieren, die ChatGPT lehrt, wie man für uns intuitive Begriffe einzuschätzen hat.

Folgender Prompt führte zum Ziel:

Oben und unten sind ein Gegensatzpaar, dass, abgesehen von der Richtungsachse, analog zu vorne und hinten und vielen anderen räumlichen Paaren ist. Es sind Richtungen auf einer Linie und gelten alle linearen Relationen wie auf einem Zahlenstrahl oder Vektorrechnung (Transitivität, Intervalle). Vor allem sind Vorzeichen wichtig, da sonst in Gleichungen Differenzen nicht korrekt notiert sind. Container auf einer solchen Achse können wie natürliche Zahlen auf einem Zahlenstrahl gehandhabt werden. Sie haben die Breite 1. Ich gebe dir jetzt eine Aufgabe, die du in der gegeben Form falsch gelöst hattest, aber die du korrekt lösen wirst, wenn die vorangegangene Information nutzt.

Das Känguru und der Panda sitzen im Kino in der gleichen Reihe. Das Känguru sitzt rechts vom Panda. Zwischen ihnen sind 2 Plätze frei. Der Panda sitzt auf dem 7. Platz von rechts. Das Känguru sitzt auf dem 7. Platz von links. Wie viele Plätze hat die Reihe?

Andere AI ChatBots

Perplexity löst die Aufgabestellung ohne Hilfe direkt:

https://www.perplexity.ai/search/das-kanguru-und-der-panda-sitz-F5fmcs5hRJiInnWUk3n8IA