Chat GPT bedöms vara ”hyfsat bra” på att koda
Färdigheter i att koda brukar ofta framhållas som en fördel med AI. Därför har ett antal forskare nu låtit genomföra en studie för att utröna hur pass bra Open AI:s Chat GPT egentligen är när det handlar om programmering. Och enligt studien – som publicerats i tidskriften IEEE Transactions on Software Engineering – så är GPT 3.5 ”hyfsat bra”.
Forskarna använde testplattformen Leetcode och utsatte GPT 3.5 för 728 programmeringsproblem i språken C, C++, Java, Javascript och Python. När det handlade om problem som funnits på Leetcode före 2021 så lyckades Chat GPT lösa de enklaste 89 procent av gångerna, de medelsvåra 71 procent av gångerna och de svåra 40 procent av gångerna.
När forskarna tittade på problem som tillkommit på plattformen efter 2021 blev siffrorna däremot sämre. Andelen enkla problem som Chat GPT lyckads lösa landade då på 52 procent. Och när det handlade om svåra problem slutade siffran på 0,66 procent.
Källförteckning 0
Sidor som artikeln länkar till, eller som vi har matchat mot den med textlikhet 0,7 eller mer. Från källorna visas bara rubriker, korta citat och länkar.
Sammanhang
- Göteborgsklipp och AI-bilder påstås visa upploppen
- Allt fler föräldrar tar hjälp av AI för vardagspusslet
- Hopp om att AI-teknik ska ge svar om saknade barn
- Napoleons krypterade brev knäcktes på sex timmar
- AI-lösningar skakar om matematikens värld: ”Det fullständigt bubblar”
- Chat GPT bedöms vara ”hyfsat bra” på att koda
Fler länkar i artikeln
Så tas sidan fram· automatisk språkanalys, ingen AI-textVisa ▾
TextHämtad oförändrad ons 21 okt kl. 07:09Visa
- 1Publicerad
Texten sparas som den publicerades. En ny version sparas bara när text, bilder eller länkar ändras. Läs originalet ↗
Källor0 länkade i artikeln · 0 matchade i nyhetssajternas sitemaps (textlikhet ≥ 0,7)Visa
Inga källsidor hittade än.
Länkad: artikeln länkar sidan. Matchad: rubriken i sajtens nyhetssitemap liknar artikeln (0–1). Textlikhet: hela texterna jämförda med en meningsmodell (0–1).
NamnInte analyserad än (namnigenkänning)Visa
Artikeln har inte gått igenom namnigenkänningen än. Det sker inom en halvtimme efter att den sparats.
Citat0 citat med talare (citatextraktion)Visa
Inga citat med talare hittade.
Talaren kommer från ordet efter citatet ("säger", "skriver" och fler), annars från stycket före. Citat från källsidorna räknas med.
Händelsetyp– (klassificerare)Visa
Inte klassad än. Klassificeraren tar de nyaste artiklarna först, 300 i timmen.
Klassificerare: KB-BERT finjusterad på märkta Omni-artiklar, 27 typer. En typ visas när den når modellens tröskel, annars den mest sannolika.
FaktakollInga meningar kontrollerade änVisa
Inga meningar kontrollerade än.
Varje mening jämförs med alla meningar i källsidorna (meningsmodell, 0–1). Från 0,70 räknas den som funnen hos källan.
Ingen text här är skriven eller sammanfattad av AI. Analysen är automatisk och kan ha fel.
Citera · BibTeX, APA, RISVisa ▾
@online{omni2024chat,
title = {Chat GPT bedöms vara ''hyfsat bra'' på att koda},
organization = {Omni},
date = {2024-07-09T12:00},
url = {https://omni.se/a/nyQ6Po},
urldate = {2026-10-21},
langid = {swedish},
note = {Huvudtext}
}Hela förteckningen finns också maskinläsbar i sidan som <script type="application/x-bibtex">, för referenshanterare som Zotero och JabRef.