Studie: Hälften av Chat GPT:s svar om kodning är fel
Ett team med forskare från Purdue University har publicerat en studie som visar att Chat GPT kommer med felaktiga svar på frågor om programmering 52 procent av gångerna. Det rapporterar sajten Neowin.
Just möjligheten att få hjälp med programmering har varit ett av huvudnumren med tjänster som Copilot, Gemini och Chat GPT.
I 39 procent av fallen så ska programmerarna dessutom inte ha upptäckt att svaren varit felaktiga.
Forskarna har tittat på svaren till 517 frågor som ställts på tjänsten Stack Overflow.
Källförteckning 0
Sidor som artikeln länkar till, eller som vi har matchat mot den med textlikhet 0,7 eller mer. Från källorna visas bara rubriker, korta citat och länkar.
Sammanhang
- Göteborgsklipp och AI-bilder påstås visa upploppen
- Allt fler föräldrar tar hjälp av AI för vardagspusslet
- Hopp om att AI-teknik ska ge svar om saknade barn
- Napoleons krypterade brev knäcktes på sex timmar
- AI-lösningar skakar om matematikens värld: ”Det fullständigt bubblar”
- Studie: Hälften av Chat GPT:s svar om kodning är fel
Fler länkar i artikeln
Så tas sidan fram· automatisk språkanalys, ingen AI-textVisa ▾
TextHämtad oförändrad ons 21 okt kl. 06:21Visa
- 1Publicerad
Texten sparas som den publicerades. En ny version sparas bara när text, bilder eller länkar ändras. Läs originalet ↗
Källor0 länkade i artikeln · 0 matchade i nyhetssajternas sitemaps (textlikhet ≥ 0,7)Visa
Inga källsidor hittade än.
Länkad: artikeln länkar sidan. Matchad: rubriken i sajtens nyhetssitemap liknar artikeln (0–1). Textlikhet: hela texterna jämförda med en meningsmodell (0–1).
NamnInte analyserad än (namnigenkänning)Visa
Artikeln har inte gått igenom namnigenkänningen än. Det sker inom en halvtimme efter att den sparats.
Citat0 citat med talare (citatextraktion)Visa
Inga citat med talare hittade.
Talaren kommer från ordet efter citatet ("säger", "skriver" och fler), annars från stycket före. Citat från källsidorna räknas med.
Händelsetyp– (klassificerare)Visa
Inte klassad än. Klassificeraren tar de nyaste artiklarna först, 300 i timmen.
Klassificerare: KB-BERT finjusterad på märkta Omni-artiklar, 27 typer. En typ visas när den når modellens tröskel, annars den mest sannolika.
FaktakollInga meningar kontrollerade änVisa
Inga meningar kontrollerade än.
Varje mening jämförs med alla meningar i källsidorna (meningsmodell, 0–1). Från 0,70 räknas den som funnen hos källan.
Ingen text här är skriven eller sammanfattad av AI. Analysen är automatisk och kan ha fel.
Citera · BibTeX, APA, RISVisa ▾
@online{omni2024studie,
title = {Studie: Hälften av Chat GPT:s svar om kodning är fel},
organization = {Omni},
date = {2024-05-27T07:00},
url = {https://omni.se/a/wge9VA},
urldate = {2026-10-21},
langid = {swedish},
note = {Huvudtext}
}Hela förteckningen finns också maskinläsbar i sidan som <script type="application/x-bibtex">, för referenshanterare som Zotero och JabRef.