Aufgrund des Feedbacks von Kunden und der Community hat OpenAI den Support für die Modelle gpt-3.5-turbo-0301, gpt-4-0314 und gpt-4-32k-0314 bis mindestens 13. Juni 2024 verlängert. Zuvor hatte das Unternehmen angekündigt, dass der Support für diese Modelle am 13. September 2023 auslaufen würde.
OpenAI erklärt, dass die Priorität bei der Veröffentlichung neuer Versionen darin besteht, die Intelligenz des Modells zu erhöhen, indem Aspekte wie die Befolgung von Anweisungen, die sachliche Genauigkeit und das Ablehnungsverhalten verbessert werden.
Bei der Einführung neuer Modelle sieht sich OpenAI mit Leistungseinbußen bei einigen Aufgaben konfrontiert und räumt ein, dass seine "Bewertungsmethodik nicht perfekt" ist, sich aber weiterentwickelt. "Während sich die meisten Metriken verbessert haben, kann es einige Aufgaben geben, bei denen sich die Leistung verschlechtert", so die Firma.
OpenAI ermöglicht es API-Nutzern, die Modellversion zu pinnen, um Stabilität gegen Änderungen zu gewährleisten, die sich auf die Leistung auswirken, und bittet um Beiträge zu seiner Evals-Bibliothek, um Fehler zu melden. Das Unternehmen arbeitet auch daran, den Entwicklern mehr Stabilität und Transparenz bei Modellveröffentlichungen und -abkündigungen zu bieten.
OpenAI ändert seinen Ansatz zur Kommunikation von Modelländerungen
In letzter Zeit haben sich einige Anwender über schlechtere Ergebnisse mit den neuesten GPT-Modellen beschwert, was zumindest teilweise auch durch eine wissenschaftliche Studie belegt wurde. Das scheint OpenAI nun dazu veranlasst zu haben, seine Position oder zumindest seine Kommunikationsstrategie, dass GPT-4 nicht dümmer wird, zu überdenken. Jetzt heißt es, es sei wichtig, "den Entwicklern mehr Stabilität und Transparenz darüber zu geben, wie wir Modelle freigeben und verfallen lassen".
Wir verstehen, dass Modell-Upgrades und Verhaltensänderungen für Anwendungen störend sein können.
OpenAI
Das neueste Modell, gpt-4-0613, wurde letzten Monat eingeführt. Mit diesem Modell haben auch wir einen Leistungsabfall bei GPT-4-basierten Aufgaben festgestellt, die wir in einigen unserer redaktionellen Prozesse verwenden, z. B. bei Social-Media-Posts und, wie hier berichtet, bei Zusammenfassungen.
Das neueste Modell folgte den Prompts weniger exakt und detailliert wie die ältere Version, GPT-4-0314, und verwechselte manchmal grundlegende Fakten, während das ältere Modell sie richtig wiedergab. API-Entwickler können ältere Modelle über die GPT-4-Versionsnummer gezielt aufrufen. Das generische GPT-4 zeigt stets auf die aktuellste Version.