Syntetiska bilder av koraller (Desmophyllum pertusum) med objektigenkänningmodeller
https://doi.org/10.5878/hp35-4809
Två objektigenkänningsmodeller som använder sig av Darknet/YOLOv4 har tränats på bilder av korallen Desmophyllum pertusum från Kosterhavets nationalpark. I en av modellerna har träningsbilddata förstärkts ytterligare med generativ modellering enligt StyleGAN2.
Datasetet innehåller 2266 syntetiska bilder med positionsmärken och 409 originalbilder av koraller som använts för att träna maskininlärningsmodellen. Det innehåller också YOLOv4-modellerna samt StyleGAN2-nätverket.
Bildmaterialet är ett stillbildsurval från råvideo som samlats in med en fjärrstyrd undervattensfarkost.
De 409 JPEG-bilderna från råvideon är i upplösningen 720x576. Vissa har beskurits från koordinater som varit synliga på OSD-display.
De syntetiska bilderna är i upplösningen 512x512 och i PNG-format.
StyleGAN2-nätverket finns tillgänglig som serialiserad pickle-fil (*.pkl).
Objektigenkänningsmodellerna finns med i .weights-formatet som används i Darknet/YOLOv4-paketet. Den ena modellfilen är bara tränad på originalbilder, och den andra på originalbilder tillsammans med syntetiska bilder.
Den maskininlärningsmjukvara som använts finns i dagsläget (2022) tillgänglig på Github.
StyleGAN2: https://github.com/NVlabs/stylegan2
YOLOv4: https://github.com/AlexeyAB/darknet
Citering och åtkomst
Citering och åtkomst
Tillgänglighetsnivå:
Skapare/primärforskare:
- Sarah Al-Khateeb – MMT Sweden AB / Ocean Infinity
- Jannes Germishuys – Combine AB
Forskningshuvudman:
Data innehåller personuppgifter:
Nej
Citering:
Språk:
Metod och utfall
Metod och utfall
Tidsperiod(er) som undersökts:
Dataformat/datastruktur:
Arter och taxon:
Datainsamling - Inspelning
Datainsamling - Inspelning
Insamlingsmetod:
Inspelning
Beskrivning av insamlingsmetod:
Videoinspelningar från 35 st forskningskryssningar i Kosterhavets nationalpark med ROV.
Tidsperiod(er) för datainsamling:
1999 - 2004
Datainsamlare:
- Institutionen för marina vetenskaper, Göteborgs universitet
Öppnar nytt fönster hos ror.org.
ROR
Datainsamling - Transkription
Datainsamling - Transkription
Insamlingsmetod:
Transkription
Beskrivning av insamlingsmetod:
Klassifikationen av Desmophyllum pertusum på stillbilder från videodatan har genomförts genom medborgarforskning och frivilliga deltagare via klassifikationsverktyget på webbplatsen The Koster seafloor observatory.
Tidsperiod(er) för datainsamling:
2020
Datainsamlare:
- The Koster seafloor observatory
Geografisk täckning
Geografisk täckning
Geografisk plats:
Geografisk beskrivning:
Kosterhavets Nationalpark
Administrativ information
Administrativ information
Ansvarig institution/enhet:
Institutionen för marina vetenskaper
Finansiering
Finansiering
Finansiär:
- Forskningsrådet för miljö, areella näringar och samhällsbyggande (FORMAS)
Öppnar nytt fönster hos ror.org.
ROR
Referensnummer:
2021-02465_Formas
Projektnamn på ansökan:
National implementation of a platform for analysis of sub-sea images (PLAN-SUBSIM)
Information om finansiering:
Datainsamlingen finansierades av Swedish Biodiversity Data Infrastructure (VR), Ocean Data Factory (Vinnova), och PLAN-SUBSIM (FORMAS)
Finansiär:
- Vetenskapsrådet
Öppnar nytt fönster hos ror.org.
ROR
Referensnummer:
2019-00242
Projektnamn på ansökan:
Swedish Biodiversity Data Infrastructure
Information om finansiering:
Datainsamlingen finansierades av Swedish Biodiversity Data Infrastructure (VR), Ocean Data Factory (Vinnova), och PLAN-SUBSIM (FORMAS)
Finansiär:
Referensnummer:
2019-02256
Projektnamn på ansökan:
Ocean Data Factory
Information om finansiering:
Datainsamlingen finansierades av Swedish Biodiversity Data Infrastructure (VR), Ocean Data Factory (Vinnova), och PLAN-SUBSIM (FORMAS)
Ämnesområde och nyckelord
Ämnesområde och nyckelord
Ämnesklassificering enligt INSPIRE:
Relationer
Relationer
Publikationer
Publikationer
Citering:
Alkhateeb, Sarah, Obst, Matthias, Anton, Victor and Germishuys Jannes. (2023). A methodology to detect deepwater corals using Generative Adversarial Networks. GigaScience. [Submitted manuscript].
