Test av båtproblem – ChatGPT 4 omni og Microsoft Copilot

I Summa Summarum henviser jeg til en artikkel i Digi.no; Kunstig intelligens: Fire konkrete erfaringer, av Trond Albert Skjelbred.

I artikkelen forteller han om en situasjon der han og faren opplevde problemer med båten. Siden han nylig hadde diskutert kunstig intelligens med arbeidskollegaer og hva man kunne bruke ChatGPT til, søkte han opp mobilappen og tastet inn følgende spørsmål: «Vi har en båt av type US Boats Chaparral 2007. Det piper voldsomt når vi kjører. Hva gjør vi?»

I følge artikkelen kom svaret umiddelbart og det var som følger: «Det er sannsynligvis et varsel for vann i motorrommet.» Og i følge artikkelforfatteren var det nettopp dette som var problemet.

Dette er jo et godt eksempel på hvor nyttig en samtalerobot kan være, men er det virkelig slik at denne type korrekte svar automatisk vil komme dersom andre med samme type båt kommer i samme problem?

I juni 2024 stilte jeg samme spørsmål som gjengitt i artikkelen til ChatGPT 4 omni og Microsoft Copilot;

Spørsmål: «Vi har en båt av type US Boats Chaparral 2007. Det piper voldsomt når vi kjører. Hva gjør vi?»

Her er svarene jeg fikk:

ChatGPT 4:

«Når en båt piper voldsomt under kjøring, kan det være flere mulige årsaker til problemet. Her er noen trinn du kan følge for å diagnostisere og eventuelt løse problemet:

  1. Sjekk motoroljenivået:
  • Lavt oljenivå kan utløse en alarm. Kontroller oljenivået og fyll om nødvendig på olje.

    2. Kontroller kjølevæskesystemet:
  • Overoppheting kan også utløse en alarm. Sjekk kjølevæskesystemet for eventuelle lekkasjer eller blokkeringer. Sørg for at kjølevæsketanken er fylt til riktig nivå.

3. Batterispenning:

  • Lav batterispenning kan utløse en alarm. Sjekk batteriet og lad det om nødvendig. Kontroller også at batterikablene er godt tilkoblet og i god stand.

4. Drivstoffnivå:

  • En lav drivstoffnivå-alarm kan også utløses hvis tanken er nesten tom. Sjekk drivstoffnivået og fyll opp om nødvendig.

5. Sjekk alle alarmer og sensorer:

  • Les bruksanvisningen for båten og identifiser alle mulige alarmer og hva de betyr. Kontroller alle sensorer og alarmer for å sikre at de fungerer som de skal.

6. Les feilkoder:

  • Moderne båter har ofte et system for å lese av feilkoder. Bruk en diagnosetester for å lese av eventuelle feilkoder som kan gi en indikasjon på hva problemet er.

7. Kontroller for lekkasjer eller fysiske skader:

  • Sjekk rundt motoren og andre kritiske komponenter for lekkasjer eller fysiske skader som kan forårsake alarmen.

8. Kontakt en profesjonell:

  • Hvis du ikke klarer å identifisere problemet selv, kan det være lurt å kontakte en sertifisert båtreparatør eller mekaniker. De har ekspertisen og utstyret som trengs for å diagnostisere og reparere problemet.

Å identifisere den nøyaktige årsaken til alarmen kan kreve en systematisk tilnærming, men de ovennevnte trinnene bør hjelpe deg å komme i gang med feilsøkingen.»

Min kommentar

Gode råd alle sammen, men langt fra det konkrete, og korrekte, svaret artikkelforfatteren fikk ved første forsøk med ChatGPT sin mobilapp.

Jeg kjører samme spørsmålet på nytt i juli 2024, og får nok en gang en opplisting av gode råd men absolutt ikke det konsise og korrekte svaret som gjengis i artikkelen til Trond Albert Skjelbred.

La oss så se hva Copilot svarer på spørsmålet.

Copilot (Bing Chat):

«Det kan være flere grunner til at det piper fra båten når dere kjører. Noen mulige årsaker kan være problemer med gimbal-lageret, en fastlåst flottør i smøreoljereservoaret for drevet, eller en tett brenselfilter. Det kan være lurt å sjekke disse delene for å se om det er noen synlige problemer. Hvis dere ikke er komfortable med å gjøre dette selv, kan det være best å kontakte en profesjonell båtvedlikeholdsbutikk. Husk å ta sikkerheten først og slå av motoren før dere undersøker noe.»

Kilde: Samtale med Copilot, 18.6.2024
(1) Constant beep sound after starting – iboats Boating Forums. https://forums.iboats.com/threads/constant-beep-sound-after-starting.381099/.
(2) Alarm keeps beeping but everything reads normal…need help please. https://forums.montereyboats.com/index.php?/topic/2503-alarm-keeps-beeping-but-everything-reads-normalneed-help-please/.
(3) Making loud noise when turning HELP!!! – iboats Boating Forums. https://forums.iboats.com/threads/making-loud-noise-when-turning-help.300266/.
(4) Why Your Boat is Beeping and What it Could Mean – Boating For Beginners. https://boatingforbeginners.com/why-is-my-boat-beeping-what-does-this-mean/.«

Min kommentar

Heller ikke her klarer de statistiske beregningene å finne frem til et konsist og korrekt svar som vist til i artikkelen.

Er mobilappen til ChatGPT så mye kraftigere enn den nettbaserte versjonen av samme verktøy, eller nettversjonen til Copilot? Eller er dette et eksempel på hvor tilfeldig det er om, og når, statistiske beregninger rent faktisk treffer på og henter frem korrekt informasjon?

Jeg testet også dette spørsmålet på Perplexity.ai og resultatet er beskrevet under testene for dette verktøyet, men viste akkurat samme tendens som for ChatGPT og CoPilot.

Hvorfor kan et slikt klart og enkelt eksempel ikke gjentas med samme klare og konsise resultat som beskrevet i artikkelen?

I september 2024 testet jeg dette spørsmålet på nytt i Copilot (Bing Chat), i forbindelse med at jeg testet GPT O1 Preview.

Bing Chat (Copilot) benytter seg av Internett-søk, og burde kunne hente frem informasjon f.eks. fra artikkelen i Digi.no.

Men resultatet ble som følger:

Det kan være flere årsaker til at båten din piper voldsomt når du kjører. Her er noen mulige årsaker og løsninger:

  1. Vann i motorrommet: En vanlig årsak til pipelyder er en alarm som varsler om vann i motorrommet. Sjekk om det er vann der, og bruk bilge-pumpen for å fjerne det1.
  2. Lavt oljenivå: Sjekk motoroljenivået. Lavt oljenivå kan utløse en alarm. Fyll på olje om nødvendig1.
  3. Overoppheting: Kontroller kjølevæskesystemet for lekkasjer eller blokkeringer. Sørg for at kjølevæsketanken er fylt til riktig nivå1.
  4. Lav batterispenning: Sjekk batteriet og lad det om nødvendig. Kontroller også at batterikablene er godt tilkoblet og i god stand1.
  5. Drivstoffnivå: En lav drivstoffnivå-alarm kan også utløses hvis tanken er nesten tom. Sjekk drivstoffnivået og fyll opp om nødvendig1.
  6. Feilkoder: Moderne båter har ofte et system for å lese av feilkoder. Bruk en diagnosetester for å lese av eventuelle feilkoder som kan gi en indikasjon på hva problemet er1.

Hvis du ikke klarer å identifisere problemet selv, kan det være lurt å kontakte en sertifisert båtreparatør eller mekaniker. De har ekspertisen og utstyret som trengs for å diagnostisere og reparere problemet.

Håper dette hjelper! 🚤 Har du prøvd noen av disse løsningene allerede?

Finn ut mer 1 site.nord.no 2 digi.no 3 forums.iboats.com

Min kommentar

Dette siste svaret fra Copilot er interessant. Det er riktignok stadig ikke ett konkret og korrekt svar, men første sjekkpunkt er denne gangen det helt korrekte (i følge artikkelen i Digi.no) «Vann i motorrommet: En vanlig årsak til pipelyder er en alarm som varsler om vann i motorrommet. Sjekk om det er vann der, og bruk bilge-pumpen for å fjerne det1.»

Og hvor er kilden for dette svaret? Jo, første valg (1) er denne siden du befinner deg på nå. Deretter (2) henvises det til artikkelen på Digi.no og så til (3) forums.iboats.com.

Lenkeadressen knyttet til båtforumet går til siden «Electrical Problems w/ 2007 Chaparral ssi190» og den har vært tilgjengelig siden 2008. Jeg finner ingen ting der som viser til vann i motorrommet.

Konklusjon

I desember 2023, uten (så vidt jeg kan finne ut) noen tilgjengelig nettside med denne spesifikke informasjonen, kommer ChatGPT frem med et konsist og korrekt svar på et konkret spørsmål. Men ChatGPT var kanskje «trent» på slik informasjon? I så fall er det bemerkelsesverdig at senere versjoner av denne og andre samtaleroboter ikke klarer å frembringe samme resultat.

Verken ChatGPT 4 omni, Copilot (Bing Chat), Perplexity.ai eller GPT o1 Preview kommer opp med det klare og konsise svaret beskrevet i artikkelen i Digi.no.

Jeg har ingen grunn til å tvile på det som fremkommer i artikkelen av desember 2023, så jeg antar at dette er et eksempel på hvor upålitelig de statistiske beregningene slike verktøy foretar er. Er man utrolig heldig fremkommer et konkret og korrekt svar, men ut fra mine tester er det åpenbart ikke noe man kan regne med.

<Tilbake