Quantu hè intelligente ChatGPT?

ChatGPT, un mudellu di lingua sviluppatu da OpenAI, hè diventatu incredibbilmente populari annantu à l'annu passatu per via di a so capacità di generà risposti umani in una larga gamma di circustanze.

In fatti, ChatGPT hè diventatu cusì cumpetente, chì i studienti l'utilizanu avà per aiutà cù i so travaglii. Questu hà incitatu parechji distretti scolastici di i Stati Uniti per bluccà i dispositi da accede à u mudellu mentre sò in e so rete.

Allora, quantu hè intelligente ChatGPT?

In un rapportu tecnicu publicatu u 27 di marzu di u 2023, OpenAI hà furnitu un brief completo nantu à u so mudellu più recente, cunnisciutu cum'è GPT-4. Includite in questu rapportu eranu un inseme di risultati d'esame, chì Marcus Lu è Rosey Eason di Visual Capitalist anu visualizatu in u graficu sopra.

GPT-4 versus GPT-3.5

Per analizà e capacità di ChatGPT, OpenAI hà simulatu e teste di vari esami prufessiunali è accademici. Questu include SAT, l'esame di barra, è diverse finali di piazzamentu avanzatu (AP).

A prestazione hè stata misurata in percentili , chì sò basati nantu à e più recenti distribuzioni di punteggi dispunibuli per i testatori di ogni tipu d'esame.

Percentile scoring hè un modu di classificà u so rendimentu relative à u rendiment di l'altri. Per esempiu, se site in u 60 percentile nantu à una prova, questu significa chì avete puntuatu più di u 60% di i testatori.

A tavula seguente lista i risultati chì avemu visualizatu in u graficu.

I punteggi riportati sopra sò per GPT-4 cù input visuali attivati. Per piacè vede u rapportu tecnicu di OpenAI per risultati più cumpleti.

Comu pudemu vede, GPT-4 (liberatu in marzu 2023) hè assai più capace di GPT-3.5 (liberatu in marzu 2022) in a maiò parte di questi esami. Tuttavia, ùn hà micca pussutu migliurà in AP English è in prugrammazione cumpetitiva .

In quantu à l'AP English (è altri esami induve e risposte scritte eranu richieste), i sottomissioni di ChatGPT sò stati classificati da "1-2 cuntratturi di terzu qualificati cù una sperienza di travagliu pertinente chì classificanu quelli saggi". Mentre ChatGPT hè certamente capace di pruduce essais adatti, pò avè luttatu per capiscenu i suggerimenti di l'esame.

Per a prugrammazione cumpetitiva, GPT hà pruvatu 10 cuncorsi Codeforces 100 volte ognunu. Codeforces ospita cuncorsi di prugrammazione cumpetitiva induve i participanti devenu risolve prublemi cumplessi. A valutazione media di Codeforces di GPT-4 hè 392 (sottu à u 5u percentile), mentre chì u più altu in un cuncorsu unicu era di circa 1,300. Riferendu a pagina di classificazione di Codeforces, l'utilizatori di u puntu più altu hè jiangly from China cun una valutazione di 3,841.

Cosa hè cambiatu cù GPT-4?

Eccu alcuni spazii induve GPT-4 hà migliuratu l'esperienza di l'utilizatori nantu à GPT-3.5.

Accessu à Internet è Plugins

Un fattore limitante cù GPT-3.5 era chì ùn avia micca accessu à Internet è era furmatu solu nantu à e dati finu à ghjugnu 2021.

Cù GPT-4, l'utilizatori anu accessu à diversi plugins chì permettenu à ChatGPT di accede à l'internet, furnisce risposte più aggiornate è compie una gamma più larga di attività. Questu include plugins di terze parti da servizii cum'è Expedia chì permettenu à ChatGPT di riservà una vacanza sana per voi.

Ingressi visivi

Mentre GPT-3.5 puderia accettà solu input di testu, GPT-4 hà a capacità di analizà ancu l'imaghjini. L'utilizatori puderanu dumandà à ChatGPT per descriverà una foto, analizà un graficu, o ancu spiegà un meme.

Lunghezza di u cuntestu più grande

Infine, GPT-4 hè capaci di trattà quantità assai più grande di testu è mantene e conversazioni più longu. Per riferimentu, GPT-3.5 hà avutu un valore massimu di dumanda di 4,096 tokens, chì hè equivalente à circa 3,000 parole. GPT-4 hà duie varianti, una cù 8,192 tokens (6,000 parole) è un altru cù 32,768 tokens (24,000 parole).