OpenAI heeft zojuist zijn nieuwste AI-model, GPT-4, uitgebracht, dat prestaties op menselijk niveau laat zien in een verscheidenheid aan professionele en academische benchmarks. GPT-4 is een groot multimodaal model dat beeld- en tekstinvoer kan accepteren en tekstuitvoer kan genereren. In dit artikel zullen we de mogelijkheden, beperkingen en risico’s van GPT-4 bespreken. Aan het einde zult u een beter begrip hebben van de potentiële impact van GPT-4 en wat het wel en niet kan doen.
Mogelijkheden
De mogelijkheden van GPT-4 zijn verbeterd ten opzichte van het vorige model GPT-3.5 wat betreft betrouwbaarheid, creativiteit en controle van genuanceerde instructies. OpenAI testte het model op verschillende benchmarks, waaronder gesimuleerde menselijke examens, en ontdekte dat GPT-4 beter presteerde dan bestaande modellen voor grote talen. Het werkt ook goed in andere talen dan het Engels, inclusief talen met weinig middelen zoals Lets, Welsh en Swahili.
Visuele ingangen
GPT-4 kan zowel tekst als afbeeldingen als invoer accepteren, dus het kan tekstuitvoer genereren op basis van invoer bestaande uit tekst en afbeeldingen. Hoewel de visuele invoercapaciteit van het model zich nog in de onderzoeksbeoordelingsfase bevindt, heeft het vergelijkbare mogelijkheden getoond als invoer met alleen tekst.
Het rijden
OpenAI heeft gewerkt aan elk aspect van het plan dat wordt beschreven in het rapport over AI-gedrag, inclusief beheersbaarheid. Ontwikkelaars kunnen nu de stijl en taak van hun AI specificeren door instructies in een “systeem”-bericht te beschrijven. API-gebruikers kunnen hun gebruikerservaring aanpassen zonder grenzen te overschrijden, waardoor aanzienlijke personalisatie mogelijk is.
Beperkingen
GPT-4 is niet perfect en heeft vergelijkbare beperkingen als eerdere GPT-modellen. Het kan nog steeds feiten “hallucineren” en redeneerfouten maken, dus voorzichtigheid is geboden bij het gebruik van taalmodeluitvoer, vooral in contexten waar veel op het spel staat. GPT-4 is niet op de hoogte van gebeurtenissen na 2021. September, zodat hij simpele redeneerfouten kan maken en valse verklaringen als waar kan accepteren. Het kan ook zijn dat het problemen zoals mensen niet oplost, zoals het inbouwen van beveiligingsproblemen in de code. GPT-4 kan betrouwbare maar onjuiste voorspellingen doen en controleert zijn werk niet altijd zorgvuldig. Interessant is dat het basislijnmodel de nauwkeurigheid van zijn reacties goed voorspelt, maar dit vermogen neemt af na training.
Risico en beperking
Hoewel de mogelijkheden van GPT-4 aanzienlijk zijn, brengt het nieuwe risico’s met zich mee, zoals het genereren van kwaadaardige hints, foutieve code of onnauwkeurige informatie. OpenAI probeerde dit risico te verkleinen door samen te werken met meer dan 50 experts om het model tegen te testen en aanvullende gegevens te verzamelen om het vermogen van GPT-4 om gevaarlijke zoekopdrachten te weigeren, te verbeteren. Als gevolg hiervan heeft OpenAI veel verbeteringen aangebracht aan GPT-4 om het veiliger te maken dan GPT-3.5. GPT-4 biedt 82% minder kans op ongepaste inhoud dan de vorige versie en voldoet beter aan het beleid rond gevoelige onderwerpen zoals medisch advies en zelfbeschadiging. Hoewel OpenAI het model veerkrachtiger heeft gemaakt tegen slecht gedrag, is het nog steeds mogelijk om inhoud te maken die de gebruiksregels overtreedt. GPT-4 kan goed of slecht zijn voor de samenleving, zegt OpenAI, en het werkt samen met andere onderzoekers om de potentiële impact te begrijpen.
Leerproces
Net als eerdere GPT-modellen, werd het GPT-4-basismodel getraind om het volgende woord in een document te voorspellen met behulp van openbaar beschikbare gegevens en OpenAI-gelicentieerde gegevens. Het afstemmen van het gedrag van het model met behulp van leren met menselijke feedback (RLHF) komt overeen met de intenties van de gebruiker in de vangrail.
Voorspelbare schaalvergroting
Een groot doel van het GPT-4-project was het bouwen van een deep learning-stack die voorspelbaar schaalbaar is. OpenAI heeft infrastructuur en optimalisatie ontwikkeld met voorspellend gedrag op meerdere schalen en kan het uiteindelijke verlies van GPT-4 tijdens training nauwkeurig voorspellen.
Beschikbaarheid
Microsoft bevestigt dat de nieuwe Bing-zoekervaring nu werkt op GPT-4. Hoewel het een gebruikslimiet heeft, heb je ook toegang tot GPT-4 door je te abonneren op ChatGPT Plus. OpenAI kan de gebruikslimiet aanpassen op basis van vraag en systeemprestaties. Het bedrijf overweegt nog een abonnementsniveau toe te voegen om meer GPT-4-gebruik mogelijk te maken. Om toegang te krijgen tot de GPT-4 API, moet u zich registreren op de wachtlijst.
Conclusie
De creatie van GPT-4 markeert een belangrijke mijlpaal in de inspanningen van OpenAI om deep learning uit te breiden. Hoewel onvolmaakt, heeft het prestaties op menselijk niveau aangetoond in verschillende academische en professionele benchmarks, waardoor het een krachtig hulpmiddel is. Er moet echter voorzichtigheid worden betracht bij het gebruik van de output van een taalmodel in contexten van groot belang. OpenAI heeft gewerkt aan het verminderen van risico’s en het bouwen van een diepe leerstack die voorspelbaar schaalbaar is, wat van cruciaal belang zal zijn voor toekomstige AI-systemen.
Uitgelichte afbeelding: Muhammad S0hail/Shutterstock
Bron: OpenAI