Am vergangenen Dienstag veröffentlichte OpenAI im Rahmen der Präsentation seines neuesten Sprachmodells GPT-4 einen neuen, 98-seitigen technischen Bericht . Ben Schmidt, Ingenieur beim Kartierungsunternehmen Nomic, erklärte, dass man keine Details zum Training des neuen GPT preisgeben werde, um zu verhindern, dass andere Plattformen es kopieren.
Daher ist GPT-4 von Geheimnissen umgeben , über die wir im Laufe seiner Entwicklung mehr erfahren werden. OpenAI hat sehr sorgfältig darauf geachtet, dass die Hauptkonkurrenten nicht von der eigenen Arbeit und den erzielten Anstrengungen profitieren . Darüber hinaus hat das Unternehmen erklärt, bei der Erstellung des Berichts sehr transparent vorgegangen zu sein.
OpenIAs GPT-4 ist proprietär.
Der Bericht stammt von nur einem Autor, OpenAI, was bedeutet, dass das Unternehmen weder offengelegt hat, womit es das neue Modell trainiert hat, noch wie es dabei vorgegangen ist . Auch die Kosten für Hardware und Energie bei seiner Entwicklung sind unklar .
Der Grund dafür liegt im aktuellen Wettbewerbsumfeld und in Sicherheitsbedenken, da man befürchtet, dass die Veröffentlichung dieser Informationen von Konkurrenten nachgeahmt werden könnte. Tatsächlich enthält dieser Bericht nur sehr wenige Details zum Prozess und den damit verbundenen Schulungen.
Es wurde festgestellt, dass die zweite Seite des Berichts kurz auf den Umfang und die Grenzen des Modells eingeht. Darüber hinaus gaben die Autoren an, dass sie trotz der Bereitstellung weiterer Daten zu den Fähigkeiten des Modells keine internen Details zur Entwicklung offenlegen würden, um es Wettbewerbern nicht zu erleichtern, es zu kopieren.
All dies hat dazu geführt, dass die Einführung von GPT-4 die geheimste in der Geschichte des Unternehmens war. Einige Experten befürchten jedoch, dass diese neue Haltung von OpenAI die Sicherheit der Modelle gefährden könnte, da sie ohne vollständige Transparenz nicht mehr von anderen Organisationen oder unabhängigen Experten überprüft werden können.
Laut Ilya Sutskever, einem der Mitbegründer von OpenAI, ist das Gegenteil der Fall. Er glaubt, dass solche Modelle mit zunehmender Leistungsfähigkeit großen Schaden anrichten können . Daher sei es absolut sinnvoll, keine Informationen über die Entwicklung preiszugeben, um zu verhindern, dass böswillige Akteure dies ausnutzen.
„Angesichts des Wettbewerbsumfelds und der Sicherheitsrisiken für groß angelegte Modelle wie GPT-4 enthält dieser Bericht keine weiteren Details zur Architektur, Hardware, Trainingsberechnung, Datensatzkonstruktion, Trainingsmethode und ähnlichen Aspekten.“
Ilya Sutskever, einer der Mitbegründer von OpenAI
Darüber hinaus erklärte Ilya Sutskever , dass viele Konkurrenten dasselbe anstreben. Daher hält er OpenAIs neue Maßnahme für ein sehr reifes Bestreben, eines seiner Hauptprodukte zu schützen . Das Unternehmen hat sich somit von der Wissensweitergabe der Vorjahre hin zu einem stärker auf den Schutz seiner Entwicklungen ausgerichteten Ansatz entwickelt.
Sutskever erwähnte außerdem, dass OpenAI die ganze Zeit falsch gelegen habe, weshalb sie einen kompletten Kurswechsel vornehmen mussten. Früher hätten sie viele Informationen über ihre Modelle geteilt. Deshalb ist der Mitbegründer des Unternehmens der Ansicht, dass es keinen Sinn mache, den Quellcode offenzulegen, wenn künstliche Intelligenz so leistungsstark sei .
„Es ist sehr wahrscheinlich, dass die meisten Unternehmen innerhalb weniger Jahre erkennen werden, dass Open-Source-Künstliche Intelligenz für niemanden eine gute Idee ist; sie sollte geheim und in geschlossenen Systemen entwickelt werden.“
Ilya Sutskever, einer der Mitbegründer von OpenAI
Tatsächlich ist die Einführung von GPT-4 eine der neuesten Waffen von OpenAI im Wettlauf um künstliche Intelligenz mit anderen Unternehmen wie Google, Microsoft oder Meta, die vor kurzem LLaMA, einen Open-Source-Konkurrenten, der auf Computern installiert werden kann, auf den Markt gebracht haben.
Andererseits kündigte Google am vergangenen Mittwoch an, dass sein Sprachmodell PaLM eine API für Unternehmen und Entwickler freigeben wird. Auch Microsoft zog nach , indem es zahlreiche Mitarbeiter seines KI-Teams entließ und sein Engagement für OpenAI-Produkte fortsetzte.
Ich denke, wir können das Thema „Open AI“ endgültig abhaken: Die 98-seitige Abhandlung zur Einführung von GPT-4 verkündet stolz, dass sie *gar nichts* über den Inhalt ihres Trainingsdatensatzes preisgeben. pic.twitter.com/dyI4Vf0uL3
— Ben Schmidt / @ [email protected] (@benmschmidt) 14. März 2023
