GPT-3 on sanfranciscolaisen OpenAI:n vuonna 2020 julkaisema autoregressiivinen kielimalli. Syväoppimisen avulla se kykenee tuottamaan käyttäjän antamien syötteiden perusteella lauseita, runoja ja tarinoita, joita ei voi erottaa ihmisen kirjoittamista.

Autoregressiivinen kielimalli tässä tapauksessa tarkoittaa sitä, että GPT-3 generoi lisää tekstiä käyttäen perustanaan aiempaa tekstiä. Se on siis ikään kuin hyvin edistyksellinen ennustava tekstinsyöttö. Mallin opetuksen aikana sille on syötetty erityyppisiä aineistoja, jotka kattavat satoja miljardeja sanoja.

GPT-3:a ei ole tarkoitettu runojen kirjoittamiseen vaan se pystyy myös tuottamaan koodia, esimerkiksi Javascriptiä. Tämä monikäyttöisyys erottaa esimerkiksi tämän runokirjan muista koneella tuotetuista runokirjoista.

Kyllä. GPT-3-kielimalli on lihavoidulla kirjoitetun syötteen perusteella kirjoittanut teoksen runot. Niitä ei ole editoitu muuten kuin välimerkkien ja säkeenvaihtojen osalta. GPT-3:n antamista versioista parhaat on valittu Aum Golly -runokirjaan.

Runoja on tuotettu tietokoneen avulla vuosikymmeniä. Myös Suomessa on tehty useita kunnianhimoisia, kokeellisia runoprojekteja.

GPT-3:n tuottama teksti eroaa aiemmasta konerunoudesta samassa mittakaavassa kuin leivänpaahdin eroaa iPadista. Se ei välttämättä tarkoita sitä, että Aum Gollyn runot olisivat yhtään parempia kuin aiempi ihmisen tai koneen tuottama runous.

Aum Golly on ennen kaikkea esimerkki luovasta tulevaisuudesta – sen uhkista ja mahdollisuuksista. Tällä sivulla oleva liikkuva kuva OpenAI:n näkymästä, jossa tekstiä voi generoida, on ikkuna tulevaisuuteen. GPT-3 on pelottavan hyvä tuottamaan ihmisen kirjoittamalta kuulostavaa tekstiä. Aum Gollyn runot ovat esimerkkejä sen taiteellisesta monipuolisuudesta, mutta taide on vain pienenpieni osa GPT-3:n monipuolisuudesta.

Se, että runokirja on tuotettu 24 tunnissa vuonna 2021 antaa osviittaa siitä, että tulevaisuudessa kokonaisia runokirjoja voi tuottaa nopeammin. Yksittäisiä runoja voi tuottaa silmänräpäyksessä vaikka lukijalle yksilöityinä. Ihmisen kirjoittamasta runosta voi tuottaa kymmeniä uusia versioita silmänräpäyksessä. Huomattavaa kuitenkin on se, että GPT-3:a ei ole suunniteltu tekemään runoja. Se pystyy tuottamaan YouTube-videon otsikkoja, reseptejä, tiivistämään lakitekstiä, muuttamaan artikkelin helppolukuisemmaksi…

Aum Golly on luovan tulevaisuuden airut. Se on aikaansa jähmetetty teos. Se on muistutus siitä, mitä me vuonna 2021 pidimme edistyksellisenä.

Sekä teoksen nimi että teoksen teemat – onni, rakkaus ja merkityksellisyys – ovat tekoälyn ehdottamia. Teokset teemat syntyivät tämän syötteen ja vastauksen avulla:

Kolme tärkeintä teemaa meille nykyajan ihmisille ovat:

1. Tarve olla onnellinen.
2. Tarve tulla rakastetuksi.
3. Tarve olla merkityksellinen.

GPT-3 on ehdottanut teoksen nimeä. Aum Golly ei tietääksemme tarkoita mitään. Teoksen nimi syntyi tämän syötteen pohjalta:

Luovia kirjan nimiä runokirjalle rakkaudesta, onnesta ja merkityksellisyydestä: 

Erittäin hyvä idea

Aum Golly

Vähän tästä, vähän tuosta

Rakkauden kirja

Näistä vaihtoehdoista valitsimme teoksen nimeksi Aum Golly.

Eri palveluntarjoajilla on erilaisia ehtoja. Yleensä kuitenkin esimerkiksi syväoppimiseen perustuvien tekstintuottajien tai kuvantuottajien tuotosten tekijänoikeudet ovat tekoälyä ohjaavalla ihmisellä. Aum Golly -runojen tekijänoikeudet ovat Jukka Aalholla.

GPT-3 tuottaa tekstiä pääosin englanniksi. Aum Golly -teoksen runot ovat siis alun perin englanniksi. Jukka Aalho on kääntänyt ne suomeksi teoksen tekemiseen kuluneen 24 tunnin aikana. Raakakäännökseen on käytetty ilmaista Google Translatea.

FM Jukka Aalho on opiskellut englantilaista filolofiaa ja suomen kieltä. Hän on urallaan kääntänyt myös muita tekstejä ennen Aum Gollya.

GPT-3 tuottaa tekstiä perustuen valtavaan aineistoon, jolla se on opetettu. Se voi joskus käyttää samanlaisia lauseita ja ilmaisuja kuin aineistossa on. Tämän teoksen runot on tarkistettu eikä suoria vastaavuuksia ole löytynyt. Tekoälylle annetut syötteet ovat Jukka Aalhon originaalitekstejä.

GPT-3 osaa tuottaa tekstiä monella eri kielellä ja kääntää kielien välillä. Kielimalli osaa tuottaa suomenkielisen syötteen perusteella myös suomea, mutta tuotosten laatu ja syvyys ei vielä ole samalla tasolla kuin englanniksi. Kyse on oletettavasti siitä, että kielimalli on opetettu pääosin englanninkielisellä materiaalilla.

OpenAI laskuttaa API:n, eli käytännössä GPT-3:n, käytöstä sen perusteella kuinka paljon tekstiä tuotetaan. Aum Gollyyn tarvittavat tekstien tuottaminen maksoi 2,64 dollaria. Betakäyttäjille tekoälyn käyttäminen tosin oli ilmaista.

OpenAI API on tällä hetkellä beta-versiona käytettävissä niille, jotka hyväksytään ohjelmaan. Lähinnä API on tarkoitettu niille toimijoille, jotka aikovat rakentaa API:n päälle erilaisia sovelluksia, kuten vaikka chatbotteja. Lue lisää OpenAI API:sta.

Kyllä tietää. Jukka Aalho on koko prosessin ajan tiedottanut OpenAI:ta projektin etenemisestä. OpenAI:n ohjeet ovat olleet, että teoksesta täytyy käydä ilmi, mitkä osat ovat ihmisen ja mitkä tekoälyn kirjoittamia. Tekoälyn ohjaaja myös viime kädessä vastaa teoksen sisällöstä.

Koko Aum Golly -projekti on käyttänyt erilaisia tekoälysovelluksia. Runot on tehnyt GPT-3, kirjan taustakuvan ja sen sata varianttia on generoinut Artbreeder, mainoksissa on käytetty erilaisia videogenerointityökaluja kuten Myheritagen Deep Nostalgiaa.

Aum Golly on esimerkki siitä, miten luovia projekteja tulevaisuudessa voidaan tehdä. Yksittäisiä taiteilijoita, kuten kansikuvataiteilijaa tai animaattoria, ei ole tarvittu. Kustannusprosessiin liittyville ihmisille on maksettu.

Taiteilijoiden oikeuksia ei ole projektissa poljettu. Heitä ei vain ole tarvittu niin montaa kuin perinteisessä kirjaprojektissa.

Tätä esittelytekstiä varten kysyimme GPT-3:lta, miten se suosittelisi lukijaa tutustumaan tähän runokirjaan. Saimme tämän vastauksen:

“Kertoisin lukijalle, että tämä kirja on täynnä runoja, jotka saavat hänet ajattelemaan. Jotka saavat hänet tuntemaan. Ja tarttumaan toimeen.”