Fishbuddys AI: artsgjenkjenning på et øyeblikk og størrelsesestimering fra bilder

Vi lanserer en oppgradert motor for bildegjenkjenning. Den kjenner igjen arten med 93 % treffsikkerhet og anslår lengden med et gjennomsnittlig avvik på 3,1 cm i testing. Mobilmotoren gir svar på under ett sekund på en vanlig mobil.

Systemet er laget for å være raskt, lett og tilgjengelig på vanlige smarttelefoner. Vi kombinerer en svært optimalisert mobilmotor for bilder tatt ute på vannet med større nettmodeller for krevende analyser. Slik får sportsfiskere, forskere og yrkesfiskere et verktøy for artsgjenkjenning, anslag på lengde og vekt og enkel fangstregistrering.

To motorer som utfyller hverandre

• Mobilmotor på enheten: Bygget med EfficientNetV2-S og DINOv2-Small for analyse på under ett sekund direkte på telefonen. Laget for virkelige forhold ute, og virker på vanlige smarttelefoner, også eldre modeller, uten nett, dybdesensor eller LiDAR.
• Store nettmodeller: Kjører på nettplattformen vår for mer krevende analyser. Laget for bilder med svært høy oppløsning, vurdering av sjeldne arter og vanskelige vinkler. Alle kan teste og sammenligne resultatene direkte i nettleseren.

Det viktigste

• 93 % treffsikkerhet (top-1): Trent på over 265 arter, med blikk for små detaljer i kroppsform, finner og farger.
• 3,1 cm gjennomsnittlig avvik i lengde: Målt på et uavhengig testsett med 1 600 ekte bilder. Lengden anslås fra bildet, uten målebrett.
• Anslått vekt basert på art og lengde: Den anslåtte lengden (L) kobles automatisk til artens kjente koeffisienter (a og b) med formelen W = a·Lᵇ. Slik får du et anslag på vekten fra bildet, uten å veie fisken.
• Fungerer med bildegalleriet: Gamle bilder får nytt liv. Analyser tidligere fangster rett fra kamerarullen, og få et anslag på hvor stor bestefars legendariske fisk kan ha vært.
• Svar på under ett sekund: Mobilmotoren analyserer bildet på under ett sekund på en vanlig mobil, så du får svaret med en gang ute på vannet.

Ytelse og presisjon

Mobilmotoren analyserer et enkelt bilde uten å være avhengig av ARKit eller egne dybdesensorer. Analysen består av to deler:

1. Artsgjenkjenning: En EfficientNetV2-modell, trent med label smoothing og cosinus-læringsplan, fanger opp små kjennetegn ved over 265 sportsfiskarter.
2. Lengdeestimering: En DINOv2-basert visjonstransformer ser på hele bildet og anslår fiskens lengde i centimeter (L), med et dokumentert gjennomsnittlig avvik på 3,1 cm i testsettet.

For krevende bilder med dårlig lys, skjulte finner eller sjeldne arter bruker nettmotoren større modeller til en mer omfattende analyse, rett her på nettsiden.

Fart og tilgjengelighet

Vi trenger verken LiDAR-sensor eller dybdekart fra flere bilder. Du kan derfor få et anslag på fiskens størrelse fra et vanlig mobilbilde:

• Virker på vanlige smarttelefoner, også eldre modeller: Tilgjengelig på både iOS og Android, uten behov for en egen dybdesensor.
• Svar med en gang: Mobilmotoren analyserer bildet på under ett sekund, så du raskt kan registrere fangsten.
• Ikke noe ekstra utstyr for et anslag: Du trenger verken målebånd, målebrett eller vekt for å få et anslag på lengde og vekt fra bildet.

Sjekk gamle bilder fra galleriet

AR-måling krever vanligvis at bildet tas gjennom kameraet mens målingen gjøres. Med Fishbuddys AI kan du også analysere bilder du allerede har. DINOv2-motoren bruker visuelle kjennetegn i hele bildet til å anslå fiskens lengde.

Enten du går gjennom fjorårets fangstlogg eller vil få klarhet i en gammel fiskehistorie i familien, kan du få et anslag på lengde og vekt fra tidligere fangstbilder. Resultatet avhenger blant annet av bildekvaliteten og hvor godt fisken er synlig.

Kom i gang

Du kan teste Fishbuddys AI for artsgjenkjenning og størrelsesestimering på to måter:

Prøv i nettleseren: Test nettmodellen rett her på siden. Last opp et bilde fra kamerarullen og få forslag til art og et anslag på lengde og vekt.

Last ned appen: Ta med deg AI-en ut på vannet. Appen finnes både i App Store (iOS) og Google Play (Android). Den gir svar på under ett sekund direkte på telefonen, uten mobildekning eller måleutstyr.

Enten du vil sjekke en gammel fangst fra galleriet eller måle dagens storfisk ved vannkanten, er du i gang på sekunder.