Necoverse-hankkeessa kehitettiin virtuaaliympäristöjä hyödyntäviä työtapoja teollisuuden tarpeisiin. Työtavoissa hyödynnettiin muun muassa puheentunnistusta ja konekäännöstä, ja tavoite oli luoda reaaliaikaisia, monikielisiä  vuorovaikutusmahdollisuuksia teollisissa ja koulutusympäristöissä. Kolmivuotinen hanke on päättymässä touko-kesäkuun taitteessa. 

Virtuaaliympäristöt tarjoavat mahdollisuuden tehokkaaseen etätyöskentelyyn tai -koulutukseen. Kieliteknologioiden avulla virtuaaliympäristössä on helppo vuorovaikuttaa muiden asiantuntijoiden kanssa, vaikka kaikki puhuisivat eri kieliä. 

Puheesta käännöstekstitykseen -ratkaisua on kehitetty ja testattu pilotointiympäristössä. Lingsoftin konekäännös-, puheentunnistus- ja tekstitys-APIt integroitiin Turun ammattikorkeakoulun VR-ympäristöön. Hankkeessa testatut kielet ovat suomi, ruotsi ja englanti. 

Lingsoftin työ keskittyi erityisesti robotiikan koulutuspilottiin, jossa tavoitteena oli mahdollistaa monikielinen vuorovaikutus ja ohjaus metaverse-ympäristössä. Puheentunnistuksen ja konekäännöksen avulla käyttäjien puhe voitiin muuntaa käännöstekstitykseksi toiselle käyttäjälle lähes reaaliaikaisesti. 

Pilotissa Turun ammattikorkeakoulun rakentamassa metaverse-pohjaisessa oppimisympäristössä opiskelijat harjoittelivat teollisuusrobotin käyttöä digitaalisen kaksosen (digital twin) avulla. Oppiminen yhdisti itsenäisen harjoittelun, ohjatun opetuksen ja vertaistyöskentelyn monikäyttäjäympäristössä. Lingsoftin teknologiat tukivat erityisesti oppimisen vuorovaikutteisuutta: opiskelijat pystyivät selittämään ääneen, mitä olivat oppineet reflektiota varten. 

Pedagogisesti ratkaisu mahdollisti joustavan siirtymisen yksilö- ja ryhmäoppimisen välillä sekä työelämätilanteen simuloinnin. Robottiharjoittelu jää usein ajallisesti vähäiseksi, mutta virtuaaliympäristössä harjoittelemaan pääsi enemmän. Harjoittelu oli digitaalisen kaksosen avulla myös ajasta ja paikasta riippumatonta.

Tulevaisuudessa Lingsoft jatkaa erilaisten kieliälyratkaisujen tutkimista virtuaaliympäristöissä.

Lue lisää pilotista: (englanniksi): https://necoverse.fi/pilot-case/robot-programming-training/
Necoverse-hankkeen sivut (englanniksi): https://necoverse.fi/