Studie: Hälften av Chat GPT:s svar om kodning är fel

0 källorInga källor sparade
Originaltextcitatnamni

Ett team med forskare från Purdue University har publicerat en studie som visar att Chat GPT kommer med felaktiga svar på frågor om programmering 52 procent av gångerna. Det rapporterar sajten Neowin.

Just möjligheten att få hjälp med programmering har varit ett av huvudnumren med tjänster som Copilot, Gemini och Chat GPT.

I 39 procent av fallen så ska programmerarna dessutom inte ha upptäckt att svaren varit felaktiga.

Forskarna har tittat på svaren till 517 frågor som ställts på tjänsten Stack Overflow.

Källförteckning 0

Sidor som artikeln länkar till, eller som vi har matchat mot den med textlikhet 0,7 eller mer. Från källorna visas bara rubriker, korta citat och länkar.

Sammanhang

Så tas sidan fram· automatisk språkanalys, ingen AI-textVisa ▾
TextHämtad oförändrad ons 21 okt kl. 06:21Visa
Versioner
  1. 1Publicerad
Omfång4 stycken · 82 ord · 1 bild · 2 länkar
Omnis taggar
ÄmnesordChat GPTÄmnesordData, it & högteknologiÄmnesordForskning & vetenskapÄmnesordIt, Informationsteknologi

Texten sparas som den publicerades. En ny version sparas bara när text, bilder eller länkar ändras. Läs originalet ↗

Källor0 länkade i artikeln · 0 matchade i nyhetssajternas sitemaps (textlikhet ≥ 0,7)Visa

Inga källsidor hittade än.

Länkad: artikeln länkar sidan. Matchad: rubriken i sajtens nyhetssitemap liknar artikeln (0–1). Textlikhet: hela texterna jämförda med en meningsmodell (0–1).

NamnInte analyserad än (namnigenkänning)Visa

Artikeln har inte gått igenom namnigenkänningen än. Det sker inom en halvtimme efter att den sparats.

Citat0 citat med talare (citatextraktion)Visa

Inga citat med talare hittade.

Talaren kommer från ordet efter citatet ("säger", "skriver" och fler), annars från stycket före. Citat från källsidorna räknas med.

Händelsetyp– (klassificerare)Visa

Inte klassad än. Klassificeraren tar de nyaste artiklarna först, 300 i timmen.

Klassificerare: KB-BERT finjusterad på märkta Omni-artiklar, 27 typer. En typ visas när den når modellens tröskel, annars den mest sannolika.

FaktakollInga meningar kontrollerade änVisa

Inga meningar kontrollerade än.

Varje mening jämförs med alla meningar i källsidorna (meningsmodell, 0–1). Från 0,70 räknas den som funnen hos källan.

Ingen text här är skriven eller sammanfattad av AI. Analysen är automatisk och kan ha fel.

Citera · BibTeX, APA, RISVisa ▾
Format
@online{omni2024studie,
  title        = {Studie: Hälften av Chat GPT:s svar om kodning är fel},
  organization = {Omni},
  date         = {2024-05-27T07:00},
  url          = {https://omni.se/a/wge9VA},
  urldate      = {2026-10-21},
  langid       = {swedish},
  note         = {Huvudtext}
}

Hela förteckningen finns också maskinläsbar i sidan som <script type="application/x-bibtex">, för referenshanterare som Zotero och JabRef.