Lübecker KI-Monitor
Wie stellen ChatGPT und Gemini Lübecker Unternehmen, Institutionen und Reiseziele dar? Ich untersuche das mit eigenen Messreihen. Der Monitor bündelt die Ergebnisse, erklärt die Methoden und nennt auch die Grenzen der Daten.
Stand:
Was weiß ChatGPT über Lübecks heimliche Weltmarktführer?
Lübeck hat Unternehmen, die in kleinen technischen Märkten weltweit führen und außerhalb ihrer Branche fast unbekannt sind. Für die Untersuchung habe ich zunächst zwei Quellenrecherchen zur Marktposition der Firmen zusammengeführt. Danach folgte eine Messung mit 256 Antworten zu 16 Unternehmen.
Am 19. August erwähnte ChatGPT die Welt- oder Europamarktführerschaft der zwölf Champions und Kandidaten im reinen Modellwissen in 3 von 48 Firmenbeschreibungen. Bei den offenen Fragen nach führenden Anbietern verwiesen 357 von 406 Zitaten auf andere Quellen als die Website des jeweils untersuchten Unternehmens. Das entspricht 87,9 Prozent.
Die Folgewelle vom 20. August bestätigte dieses Quellenmuster. Einzelne Firmennennungen änderten sich dagegen zwischen den Tagen. Deshalb werden stabile Zusammenhänge und tagesabhängige Beobachtungen getrennt ausgewiesen.
Was bisher gemessen wurde
Jede Untersuchung beantwortet eine eng begrenzte Frage. Sichtbarkeit bedeutet dabei nur, dass ein Name in einer Antwort vorkommt. Sie ist kein Urteil über die Qualität oder die Bedeutung eines Unternehmens.
Welche Bank empfiehlt die KI in Lübeck?
Die Messung vergleicht ChatGPT und Gemini bei typischen Fragen zur Bankwahl. Sie zeigt außerdem, wie stark Formulierungen, Zielgruppen und einzelne Messzeitpunkte die Empfehlungen verändern.
Welche Lübecker Stiftungen kennt die KI?
Untersucht wurde, welche Stiftungen ChatGPT und Gemini nennen, wenn Menschen nach Förderung, Kultur, Bildung oder sozialem Engagement in Lübeck fragen.
Wie plant die KI einen Tag in Lübeck?
Die Untersuchung prüft vollständige Tagespläne statt einzelner Empfehlungen. Erfasst werden genannte Orte, Wege, Zeitbedarf und überprüfbare Fehler.
Empfiehlt ChatGPT Lübeck im Advent?
Geprüft wird, ob Lübeck bei offenen Fragen nach nordischen Weihnachtszielen genannt wird. Die Anfragen wurden auf Deutsch, Dänisch, Schwedisch und Englisch gestellt.
Welche Lübecker Betriebe empfiehlt die KI?
Der Radar erfasst in 21 Branchen, welche lokalen Betriebe ChatGPT und Gemini auf typische Kundenfragen nennen. Die Ergebnisse werden jeden Monat neu gemessen.
Die Aussage endet dort, wo die Daten enden
KI-Antworten schwanken. Ein einzelner Treffer beweist deshalb wenig. Entscheidend sind ein nachvollziehbarer Aufbau, wiederholte Abfragen und eine Auswertung, die Beobachtung und Erklärung nicht verwechselt.
Vorab festgelegte Messungen
Bei den Untersuchungen zu Banken, Stiftungen, Reiseplanung und Weihnachtsstadt wurden Fragen und Auswertungsregeln vor der ersten Messwelle festgelegt.
Explorative Messung
Die Hidden-Champions-Arbeit ist eine explorative Stichtagsmessung auf Grundlage zweier Quellenrecherchen. Folgewellen prüfen, welche Ergebnisse auch an weiteren Tagen bestehen bleiben.
Offene Grenzen
Gemessen wird über Programmierschnittstellen. Diese bilden die öffentlich genutzten Anwendungen nicht vollständig ab. Auch Modelle, Suchquellen und Antworten können sich kurzfristig ändern.
Der Lübecker KI-Monitor ist ein unabhängiges, selbst finanziertes Projekt von Patrick Stolp. Er ist keine universitäre Studie und wurde nicht wissenschaftlich begutachtet. Die veröffentlichten Ergebnisse sollen überprüfbar sein, ohne mehr Sicherheit vorzugeben, als das jeweilige Untersuchungsdesign erlaubt.
Daten für Lübeck verständlich machen
Für Unternehmen und Institutionen
Wenn eine Organisation in einer Messung vorkommt, kann ich erläutern, was genau erhoben wurde und welche Aussagen sich daraus ableiten lassen. Eine gezielte Auswertung ist möglich, sofern die vorhandenen Daten dafür ausreichen.
Für Medien und Fachöffentlichkeit
Grafiken dürfen mit Nennung der jeweiligen Untersuchung und Verlinkung der Quelle übernommen werden. Für Rückfragen zur Methodik, zu einzelnen Messwerten und zu noch laufenden Auswertungen bin ich ebenfalls erreichbar.
Patrick Stolp arbeitet seit 2011 in der Suchmaschinenoptimierung. Sein Schwerpunkt liegt auf semantischer Suche und der Darstellung von Unternehmen in KI-Antworten.