NEC utvikler AI-teknologi som automatisk fjerner uønskede objekter ved rask generering av 3D-modeller

NEC og Keio AI Center har i fellesskap utviklet et system som automatisk fjerner uønskede objekter fra videomateriale tatt opp med vanlige kameraer og raskt genererer høyoppløselige 3D-modeller. Teknologien er utviklet for å støtte innføringen av digitale tvillinger innen infrastruktur og bygg- og anleggssektoren, samt fremme industriell automatisering.

Bakgrunn for samarbeidet og partenes roller
Infrastrukturoperatører og entreprenører står overfor utfordringer knyttet til mangel på arbeidskraft og økende reisekostnader ved inspeksjon av anlegg. Digitale tvillinger, som gjenskaper fysiske miljøer i et virtuelt rom, gjør det mulig å analysere og overvåke anlegg på avstand. Eksisterende teknologier for generering av 3D-modeller krever imidlertid kostbart spesialutstyr og innebærer ofte at arbeidet på stedet må stanses under opptak, noe som har vært en betydelig hindring for praktisk implementering. For å løse disse tekniske utfordringene har NEC og Keio AI Center kombinert sin ekspertise og utviklet en ny bildeanalysealgoritme tilpasset reelle driftsmiljøer.

Teknisk løsning og virkemåte
Løsningen kombinerer Gaussian Splatting-teknologi, der rom representeres ved hjelp av et stort antall partikler, med en egenutviklet AI-modell. Systemet analyserer automatisk den visuelle kompleksiteten i det innkommende videomaterialet. Områder med komplekse former representeres med høy partikkeltetthet, mens enklere områder modelleres med færre partikler for å optimalisere datastrukturen. Systemet oppdager og fjerner også automatisk personer og midlertidige objekter som vises i opptaket, og rekonstruerer bakgrunnen ved hjelp av omkringliggende bildedata. Gjennom denne prosessen gjengis detaljerte former og instrumenter med høy presisjon, samtidig som behandlingstiden reduseres til en tidel sammenlignet med konvensjonelle metoder. Dermed kan en ferdig 3D-modell genereres på så lite som rundt ett minutt.

Implementering og systemintegrasjon
Systemet benytter videodata fra vanlige kameraer, for eksempel kameraer i smarttelefoner, og kan derfor tas i bruk uten omfattende endringer i eksisterende utstyr eller infrastruktur. De genererte 3D-modellene er optimalisert slik at de kan vises umiddelbart på vanlige datamaskiner og nettbrett. Siden datainnsamling og behandling kan utføres uten å stoppe den pågående driften, kan løsningen integreres sømløst i kontinuerlige driftsmiljøer. NEC fortsetter utviklingen og valideringen av teknologien med mål om kommersialisering i løpet av regnskapsåret 2027.

Bruksområder og operasjonelle fordeler
De viktigste bruksområdene omfatter fjernstyring av infrastruktur, blant annet innen kraftforsyning, samt bygge- og anleggsplasser. Typiske bruksområder inkluderer fjerninspeksjon av infrastrukturanlegg og rask situasjonsvurdering ved avvik eller hendelser. Ved å kunne dele detaljerte 3D-modeller hvor uønskede objekter automatisk er fjernet, uten å avbryte den løpende driften, kan beslutningsprosesser akselereres, personellressurser utnyttes mer effektivt, og stabiliteten og sikkerheten i feltarbeidet forbedres.

Redigert av Natania Lyngdoh, redaktør i Induportals, med hjelp fra KI.

www.nec.com