Uutiset

Uusi chatbot etsii tietoa sovelluksista

”Hey GUI” on keskusteleva chatbot, joka etsii tietoa sovelluksista ja niiden käyttöliittymistä, ja mikä parasta käyttäjä ei tarvitse koodaustaitoja.
Hey GUI is a chatbot that can be used to find images or textual information about apps and their user interfaces using natural language conversations.
“Hey GUI” on uusi chatbot, joka osaa vastata kysyjälle kuvina ja tekstinä ja etsiä tietoa sovelluksista ja käyttöliittymistä käyttäjän kielellä.

Chatbotit ovat jo arkipäivää. Niiden perusajatus on ohjata käyttäjä kohti ratkaisua. Kysyjä voi tulevaisuudessa saada vastauksen tekstin sijaan myös kuvina. ”Hey GUI” chatbot osaa vastata kysymyksiin lähettämällä kuvia ja kuvakaappauksia sovelluksista tai yksinkertaisilla lauseilla. Tutkijat hyödynsivät työssään puhelimessa olevia sovelluksia ja sovellusten datatietoa.

”Chatbot toimii ilman mitään koodaustaitoja ja voi esimerkiksi hakea tietoa, mikä puhelimen sovelluksistani on päivitetty viimeksi tai mitkä sovelluksistani pyytävät lupaa käyttää puhelimen kameraani”, tutkijatohtori Kashyap Todi Aalto-yliopistosta kertoo.

Tärkeää tietoa chatbottien kehittäjille ja tutkijoille

Erilaiset sovellukset ja graafiset käyttöliittymät sisältävät itsessään jo valtavasti tietoa. Tietoa voidaan käyttää erilaisiin tarpeisiin. Tutkijat selvittivät työssään, mitkä ovat käyttäjien mielestä chatbotin tärkeimmät ominaisuudet ja miten käyttäjät haluavat keskustella chatbotin kanssa.

Tutkimuksessa otettiin huomioon kolme kohderyhmää: suunnittelijat, ohjelmistokehittäjät ja peruskäyttäjät. Ohjelmistokehittäjät voivat käyttää chatbotia, kun suunnittelevat uusia sovelluksia, mutta samalla chatbot auttaa tavallisia käyttäjiä löytämään tietoa sovelluksista eri älylaitteissa.

”Tutkimuksen tavoitteena oli lisätä ymmärrystä siitä, mitä toimintoja käyttäjät enimmäkseen hakevat chatbotista ja miten he muotoilevat kysymyksiä, erityisesti millaisia sanoja ja missä muodossa he käyttävät niitä”, Kashyap sanoo.

Tutkimus tehtiin verkkokyselynä, jonka tavoitteena oli selvittää, mitkä chatbotin ominaisuudet käyttäjien mielestä ovat hyödyllisiä ja miten he muotoilevat kysymyksensä. Kyselyyn vastasi yli 100 ihmistä ja heiltä saatiin tietoa 21 yleisimmästä chatbotin ominaisuudesta ja yli 1300 kysymystä, joita he ehdottivat ja kertoivat käyttävänsä eniten chatboteissa.

”Suunnittelijat voivat saada esimerkiksi inspiraatiota, miten suunnitella verkkokaupan käyttöliittymä, kun chatbot osaa tarjota heille vastauksena kuvakaappauksia olemassa olevista vaihtoehdoista. Ohjelmistokehittäjät voivat kysyä chatbotilta, millaisia värikoodeja on käytetty sisäänkirjautumispainikkeessa ja chatbot tarjoaa heille useita vaihtoehtoja, Kashyap kertoo.

Peruskäyttäjien kysymyksissä painottuivat erityisesti yksityisyyteen ja saavutettavuuteen liittyvät asiat. Yleisimpiä kysymyksiä olivat erilaiset auttamiseen liittyvät kysymykset kuten, missä puhelimen sovelluksissani on kartta. “Hey GUI” auttaa kysyjää löytämään tiedon itse käyttöliittymästä ja keskustelee kuvien ja kuvakaappausten avulla. Chatbotin vastaukset perustuvat kyselyssä esiin tulleisiin yleisimpiin ilmaisumuotoihin.

Tutkimus on tehty yhteistyössä Luxemburgin ja Bayreuthin yliopistojen kanssa ja tulokset esitellään alan ”Designing Interactive Systems” -konferenssissa. Chatbotin prototyyppi on parhaillaan työn alla. Kyselyssä kerätty aineisto ja chatbotille esitetyt kysymykset löytyvät osoitteesta https://osf.io/g97my/ 

Lue lisää:
Projektisivu
Tutkimusartikkeli
Lyhyt video chatbotin toiminnasta
Pitkä video chatbotin toiminnasta

Lisätietoa:
Kashyap Todi (englanniksi)
Tutkijatohtori, Aalto-yliopisto, tietoliikenne- ja tietoverkkotekniikan laitos
kashyap.todi@gmail.com
050 4723 177

Antti Oulasvirta
Professori, Aalto-yliopisto, tietoliikenne- ja tietoverkkotekniikan laitos
antti.oulasvirta@aalto.fi
050 3841 561

Suomen tekoälykeskus FCAI

Suomen tekoälykeskus FCAI on osaamiskeskittymä, jonka ovat käynnistäneet Aalto-yliopisto, Helsingin yliopisto ja Teknologian tutkimuskeskus VTT. FCAI:n tavoitteena on kehittää uudenlaista tekoälyä,...

Read more
FCAI
  • Päivitetty:
  • Julkaistu:
Jaa
URL kopioitu

Lue lisää uutisia

Ihmisiä aaltoilevalla katutasanteella, vieressä korkea valkoinen kellotorni pilvisen taivaan alla
Palkinnot ja tunnustukset, Tutkimus ja taide Julkaistu:

Näytös/Näyttely26 – muodin ja tekstiilin juhla valloitti Helsingin Lasipalatsin

Lasipalatsin aukio Helsingin ydinkeskustassa toimi Aalto-yliopiston vuosittaisen muotinäytöksen päänäyttämönä torstaina 28. toukokuuta.
Neljän miehen kasvokuvat rinnakkain, kasvot sumennettu, eri paidat ja taustat
Tutkimus ja taide Julkaistu:

Neljälle fysiikan tutkijalle merkittävä rahoitus Jane ja Aatos Erkon säätiöltä

Hankkeissa etsitään ratkaisua muun muassa kvanttitietokoneiden ylikuumentumiseen ja lasipintojen huurtumiseen.
BCA-vierailu
Tutkimus ja taide Julkaistu:

Singapore haki oppeja Building 2030:n menestysmallista

Aalto-yliopiston ja 16 yrityskumppanin konsortio on herättänyt kansainvälistä huomiota jo vuosien ajan eri seminaareissa ja tutkimusjulkaisuissa. Toukokuussa 2026 se sai Singaporesta vieraita, jotka halusivat ymmärtää, miten jo 10 vuotta toiminut ryhmä on onnistunut kehittämään Suomen rakennusalaa.
Harmaa kivinen pörssirakennus, korkeat ikkunat ja sisäänkäynnillä liput, joissa lukee BÖRS ja PÖRSSI
Mediatiedotteet, Tutkimus ja taide Julkaistu:

Sijoittamisesta on tullut suomalaisten arkea – tutkimus murtaa myytin säästötilikansasta

Professori Samuli Knüpfer selvitti suomalaisten osake- ja rahastosijoittamista. Sijoittaminen on Suomessa Ruotsin jälkeen toiseksi yleisintä.