SkarpSkarp

Chapter 3 of 25

Hyväksymättömän tekoälyn raja

Säädös vetää tiukimman rajansa käytäntöjen ympärille, joita pidetään unionin arvojen kanssa yhteensopimattomina. Tässä moduulissa tarkastellaan manipuloinnin, hyväksikäytön, sosiaalisen pisteytyksen ja muiden käytäntöjen kieltämisen perusteita samalla, kun lainvalvontaviranomaisten biometriset poikkeukset sallitaan vain tiukasti valvottuina.

8 min readfi

1. Raja-alueen tulkinta: mitä nämä johdanto-osan kappaleet tekevät

Johdanto-osan kappaleet määrittävät perustelut

Tämä oppitunti käsittelee johdanto-osan kappaleita (28)–(45). Ne selittävät, miksi jotkin tekoälykäytännöt ylittävät hyväksymättömän rajan, mutta niissä käytetään yleensä sanaa pitäisi, ei 5 artiklan velvoittavaa sanamuotoa on.

Kyseessä olevat arvot

Johdanto-osan kappale (28) perustaa rajan ihmisarvoon, vapauteen, yhdenvertaisuuteen, demokratiaan, oikeusvaltioon ja perusoikeuskirjan oikeuksiin, mukaan lukien syrjimättömyys, tietosuoja, yksityisyys ja lapsen oikeudet.

Ajantasaisuutta koskeva huomautus

  1. heinäkuuta 2026 annettu Digital Omnibus -muutos on allekirjoitettu, mutta odottaa julkaisemista eikä ole voimassa. Se lisää muita 5 artiklan kieltoja, mutta ei muuta tässä tänään opetettavaa lähdetekstiä.

2. Manipulointi ja hyväksikäyttö: haitallinen vääristäminen

Kaikki vaikuttaminen ei ole manipulointia

Johdanto-osan kappale (29) keskittyy käyttäytymisen olennaisen vääristämisen tavoitteeseen tai vaikutukseen yhdessä merkittävän haitan tai sen kohtuullisen todennäköisyyden kanssa. Pelkkä suostuttelu ei tämän perusteella riitä.

Miten vääristymistä voi tapahtua

Johdanto-osan kappaleessa mainitaan havaitsemiskynnyksen alittavat ärsykkeet sekä manipuloivat tai harhaanjohtavat tekniikat, joita ihmiset eivät voi tunnistaa, hallita tai vastustaa. Virtuaalitodellisuus ja kone–aivorajapinnat voivat tehostaa ärsykkeiden hallintaa.

Haavoittuvuus ja kasautuva haitta

Hyväksikäyttö voi koskea ikää, vammaisuutta tai tiettyä sosiaalista tai taloudellista tilannetta. Haitta voi kohdistua kohdennettuun henkilöön, toiseen henkilöön tai ryhmiin, ja se voi kasautua ajan myötä.

Tahallisuutta ei aina vaadita

Ulkoiset, ennalta arvaamattomat tekijät, joita ei voida lieventää, voivat estää tarkoituksen olettamisen käyttäytymisen vääristämiseksi. Tarkoitusta aiheuttaa merkittävää haittaa ei kuitenkaan tarvita, jos haitta johtuu manipuloivista tai hyväksikäyttävistä tekoälyavusteisista käytännöistä.

3. Käytännön esimerkit: vääristäminen, suostumus ja hyväksyttävä käytäntö

Skenaario A: haitallinen VR-paine

Huomaamattomat vihjeet ja rajoitetut valinnat voivat kuulua johdanto-osan kappaleeseen (29), jos ne huomattavasti heikentävät itsenäistä päätöksentekoa ja aiheuttavat tai niiden voidaan kohtuudella odottaa aiheuttavan merkittävää taloudellista haittaa.

Skenaario B: hyväksikäyttö on ehdollista

Haavoittuva ryhmä ei yksinään täytä koko testiä. Yhdistä haavoittuvuus, hyväksikäyttö, käyttäytymisen olennainen vääristäminen sekä merkittävä haitta tai haitan kohtuullinen todennäköisyys.

Skenaario C: lääketieteellinen hoito

Sovellettavan lainsäädännön ja lääketieteellisten standardien mukaisesti toteutettuun lailliseen psykologiseen hoitoon tai fyysiseen kuntoutukseen, esimerkiksi nimenomaisella suostumuksella, ei pitäisi vaikuttaa tämän johdanto-osan kappaleen kiellon perustelujen.

Skenaario D: mainonta

Vaatimustenmukaista tavanomaista mainontaa ei pitäisi sellaisenaan pitää haitallisena manipulointina. Tekoälysäädöksen perustelut täydentävät myös kuluttajaoikeuden sääntöjä sopimattomista käytännöistä riippumatta siitä, käytetäänkö tekoälyä vai ei.

4. Biometrinen luokittelu ja sosiaalinen pisteytys

Arkaluonteinen päättely biometrisistä tiedoista

Johdanto-osan kappale (30) koskee kasvojen, sormenjälkien tai muiden biometristen tietojen käyttöä lueteltujen poliittisten, uskonnollisten, ammattiliittoon liittyvien, rodullisten, sukupuolielämää tai seksuaalista suuntautumista koskevien ominaisuuksien johtamiseksi tai päättelemiseksi.

Mikä jää tämän kuvauksen ulkopuolelle

Laillisesti hankittujen biometristen tietoaineistojen laillista lajittelua itse biometristen ominaisuuksien, kuten hiusten tai silmien värin, mukaan ei pitäisi kattaa. Ero on lajittelun ja arkaluonteisten ominaisuuksien päättelyn välillä.

Sosiaalisen pisteytyksen rakenne

Sosiaalinen pisteytys voi yhdistää eri tilanteissa ilmenevää käyttäytymistä ajan mittaan tunnettuihin, pääteltyihin tai ennustettuihin henkilökohtaisiin tai persoonallisuuden ominaisuuksiin ja tuottaa henkilöitä tai ryhmiä koskevan pisteytyksen.

Moitittava lopputulos

Johdanto-osan kappale (31) keskittyy haitalliseen kohteluun asiaankuulumattomassa sosiaalisessa yhteydessä tai kohteluun, joka on suhteetonta tai perusteetonta käyttäytymisen vakavuuteen nähden. Tietyt lailliset arvioinnit säilyvät erillisinä.

5. Reaaliaikainen etäbiometrinen tunnistaminen: suppea poikkeuskehys

Miksi reaaliaikainen käyttö on erityisen tunkeilevaa

Julkisissa tiloissa reaaliaikainen etätunnistaminen voi vaikuttaa suureen osaan väestöstä, normalisoida valvonnan, estää kokoontumista ja voimistaa vinoumia. Sen välittömyys jättää vain vähän aikaa virheiden tarkistamiseen tai korjaamiseen.

Ei yleinen poliisityökalu

Johdanto-osan kappale kuvaa kiellon lukuun ottamatta tyhjentävästi lueteltuja, suppeasti määriteltyjä tilanteita. Käytön on oltava ehdottoman välttämätöntä merkittävän yleisen edun vuoksi, jonka merkitys on riskejä suurempi.

Neljän vuoden vakavuuskynnys

Liitteessä lueteltujen rikosten osalta jäsenvaltion lainsäädännössä on säädettävä "vapausrangaistuksesta tai säilöönottomääräyksestä, jonka enimmäiskesto on vähintään neljä vuotta".

Kohdentaminen ja valmistelu

Käytöllä pitäisi vahvistaa nimenomaisesti kohdennetun henkilön henkilöllisyys, ja sen pitäisi olla rajattu ajan, maantieteellisen alueen ja henkilöiden osalta. Perusoikeusvaikutusten arviointi ja tietokantaan rekisteröinti vaaditaan yleensä ensin.

6. Lupa, kiireellisyys, kansalliset säännöt ja tietorajat

Ennakkolupa on periaate

Jokaisella käytöllä pitäisi olla oikeusviranomaisen tai riippumattoman hallintoviranomaisen, jonka päätös on sitova, nimenomainen ja yksilöity lupa. Tavanomainen järjestys on lupa ennen käyttöä.

Kiireellisyydellä on tiukat edellytykset

Kiireellisyys edellyttää asianmukaisesti perusteltua tapausta, jossa ennakkoluvan saaminen on tosiasiallisesti ja objektiivisesti mahdotonta. Käytön pitäisi olla ehdottoman välttämätöntä vähäisempää, ja siihen pitäisi soveltaa kansallisessa lainsäädännössä ja tapauksessa asetettuja suojatoimia.

24 tunnin vaatimus

Kiireellisessä tilanteessa viranomaisen pitäisi pyytää perusteltua lupaa "ilman aiheetonta viivytystä ja viimeistään 24 tunnin kuluessa." Hylkäys tarkoittaa käytön välitöntä lopettamista ja siihen liittyvien tietojen poistamista.

Kansallinen valinta ja ilmoittaminen

Jäsenvaltiot voivat päättää olla luomatta mitään lupamenettelyä. Kun ne hyväksyvät sitä koskevat yksityiskohtaiset säännöt, "Tällaisista kansallisista säännöistä pitäisi ilmoittaa komissiolle 30 päivän kuluessa niiden hyväksymisestä."

7. Ennakoiva poliisitoiminta, kasvojen haravointi ja tunteiden havaitseminen

Ennuste ei ole todiste

Johdanto-osan kappale (42) torjuu yksinomaan profilointiin tai persoonallisuuden piirteisiin perustuvan rikosriskin arvioinnin. Se ei koske analyyseja, jotka eivät perustu yksilölliseen profilointiin, kuten yritysten epäilyttävien liiketoimien analysointia.

Kohdentamaton kasvonkuvien haravointi

"Tekoälyjärjestelmät, jotka luovat tai laajentavat kasvojentunnistustietokantoja haravoimalla kohdentamattomasti kasvonkuvia internetistä tai CCTV-materiaalista, pitäisi kieltää".

Tunteiden havaitseminen epätasa-arvoisissa tilanteissa

Rajallinen luotettavuus ja kulttuurinen vaihtelu yhdistyvät työpaikan ja koulutuksen valtaepätasapainoon. Johdanto-osan kappale erottaa järjestelmät, jotka saatetaan markkinoille tiukasti lääketieteellisistä tai turvallisuussyistä, kuten terapeuttiset järjestelmät.

Muu unionin oikeus on edelleen merkityksellinen

Johdanto-osan kappaleessa (45) todetaan, ettei tämä asetus saisi vaikuttaa unionin tietosuoja-, syrjimättömyys-, kuluttajansuoja- tai kilpailulainsäädännössä kiellettyihin käytäntöihin.

8. Rajalaboratorio: luokittele neljä tapausta

Päätä ensin, tarkista sitten perustelusi

Tunnista kunkin tapauksen osalta suoraan merkityksellisin johdanto-osan kappale ja tärkein edellytys.

  1. Yliopisto asentaa kamerajärjestelmän, joka päättelee, ovatko opiskelijat luentojen aikana tylsistyneitä, ahdistuneita vai sitoutuneita, ja lähettää sitten raportteja opettajille. Onko keskeinen kysymys johdanto-osan kappale (44), ja miksi koulutusympäristöllä on merkitystä?
  1. Poliisilaitos käyttää vilkkaan aukion livekameraa nimetyn kadonneen lapsen paikantamiseen. Sillä on soveltuva viitetietokanta, tehty perusoikeusvaikutusten arviointi ja nimenomainen yksilöity lupa. Mitkä osatekijät viittaavat johdanto-osan kappaleiden (33)–(35) suppeaan kehykseen? Mikä lisäkysymys jää kansallisesta lainsäädännöstä johdanto-osan kappaleen (37) nojalla?
  1. Hallitus pisteyttää asukkaita etuushakemusten, joukkoliikennesakkojen ja verkkotoiminnan perusteella ja evää sen jälkeen asumismahdollisuuden tuloksena syntyneen pisteytyksen perusteella. Tunnista johdanto-osan kappaleen (31) kaksi lopputuloksen piirrettä: onko asumista koskeva päätös asiaankuulumattomassa sosiaalisessa yhteydessä, ja onko se suhteeton tai perusteeton käyttäytymisen vakavuuteen nähden?
  1. Tulli analysoi kuljetusreittejä ja ilmoitettuja lastimalleja ennustaakseen, missä laittomia tavaroita voi olla. Kuvaako johdanto-osan kappale (42) tätä kiellettynä yksilöllisen riskinarvioinnin tyyppinä? Selitä käyttäen sen nimenomaista erottelua.

Itsetarkistus

  1. Työpaikalla tai koulutuksessa tapahtuva tunteiden havaitseminen on keskeinen kysymys; valtaepätasapaino ja tunkeileva luonne ovat merkityksellisiä.
  2. Tapaus muistuttaa tyhjentävästi lueteltua tarkoitusta, mutta jäsenvaltion on myös pitänyt nimenomaisesti säätää luvan mahdollisuudesta yksityiskohtaisissa kansallisissa säännöissä.
  3. Pisteytyskäytännöstä tekee hyväksymättömän haitallinen eri yhteyteen ulottuva tai suhteeton/perusteeton kohtelu.
  4. Ei: johdanto-osan kappale antaa esimerkkinä kiellon perustelujen ulkopuolelle jäävistä vastaavista riskiin liittyvistä analyyseista, jotka eivät perustu yksilölliseen profilointiin.

9. Muistikortit: palauta edellytykset mieleen

Käännä jokainen kortti ja sano ehto muistista ennen vastauksen lukemista.

Mikä on johdanto-osan kappaleen (29) keskeinen huolenaihe?
Käyttäytymisen olennainen vääristäminen havaitsemiskynnyksen alittavilla, manipuloivilla, harhaanjohtavilla tai hyväksikäyttävillä tekoälyavusteisilla käytännöillä, joka aiheuttaa tai jonka voidaan kohtuudella odottaa aiheuttavan merkittävää haittaa.
Edellyttääkö johdanto-osan kappale (29) tarkoitusta aiheuttaa merkittävää haittaa?
Ei. Siinä todetaan, ettei tarkoitusta aiheuttaa merkittävää haittaa tarvita, edellyttäen että haitta johtuu manipuloivasta tai hyväksikäyttävästä tekoälyavusteisesta käytännöstä.
Mikä tekee sosiaalisesta pisteytyksestä hyväksymätöntä johdanto-osan kappaleessa (31)?
Pisteytys, joka johtaa haitalliseen tai epäedulliseen kohteluun asiaankuulumattomissa sosiaalisissa yhteyksissä tai kohteluun, joka on suhteetonta tai perusteetonta sosiaalisen käyttäytymisen vakavuuteen nähden.
Mikä on johdanto-osan kappaleen (33) biometrisen tunnistamisen poikkeuksen rikoskynnys?
Rikoksesta on kyseisessä jäsenvaltiossa voitava määrätä "vapausrangaistus tai säilöönottomääräys, jonka enimmäiskesto on vähintään neljä vuotta".
Mikä on kiireellisen luvan määräaika johdanto-osan kappaleessa (35)?
Viranomaisen pitäisi pyytää lupaa "ilman aiheetonta viivytystä ja viimeistään 24 tunnin kuluessa."
Minkä kasvojentunnistustietokantoja koskevan käytännön johdanto-osan kappale (43) tunnistaa?
Kasvojentunnistustietokantojen luominen tai laajentaminen haravoimalla kohdentamattomasti kasvonkuvia internetistä tai CCTV-materiaalista.

10. Tietovisa: kiireellinen poikkeus

Valitse vastaus, joka noudattaa täsmällisimmin johdanto-osan kappaletta (35).

Mikä toimintajärjestys vastaa parhaiten johdanto-osan kappaletta (35) asianmukaisesti perustellussa kiireellisessä tapauksessa?

  1. Viranomainen voi käyttää järjestelmää ilman lupapyyntöä, jos tavoite on tärkeä.
  2. Viranomainen voi aloittaa vain, jos ennakkoluvan saaminen on tosiasiallisesti ja objektiivisesti mahdotonta, rajoittaa käytön ehdottoman välttämättömään vähimmäiseen ja pyytää lupaa ilman aiheetonta viivytystä sekä viimeistään 24 tunnin kuluessa.
  3. Viranomainen voi käyttää järjestelmää 24 tuntia ennen kuin se päättää, tarvitaanko lupaa.
  4. Viranomainen voi luottaa yksinomaan järjestelmän tuotokseen, jos se poistaa tiedot myöhemmin.
Show Answer

Answer: B) Viranomainen voi aloittaa vain, jos ennakkoluvan saaminen on tosiasiallisesti ja objektiivisesti mahdotonta, rajoittaa käytön ehdottoman välttämättömään vähimmäiseen ja pyytää lupaa ilman aiheetonta viivytystä sekä viimeistään 24 tunnin kuluessa.

Johdanto-osan kappale (35) sallii kiireellistä tilannetta koskevan poikkeuksen vain ilmoitetulla mahdottomuusedellytyksellä. Se edellyttää käytön rajoittamista välttämättömään vähimmäiseen, suojatoimia ja lupapyyntöä ilman aiheetonta viivytystä sekä viimeistään 24 tunnin kuluessa. Siinä todetaan myös, ettei mitään haitallisia oikeusvaikutuksia aiheuttavaa päätöstä pitäisi perustaa yksinomaan tuotokseen.

11. Tietovisa: sosiaalisen pisteytyksen täsmällinen tulkinta

Valitse vastaus, jossa johdanto-osan kappaleen (31) täsmennykset säilyvät.

Mikä käytäntö vastaa lähimmin johdanto-osan kappaleessa (31) kuvattua hyväksymätöntä sosiaalisen pisteytyksen lopputulosta?

  1. Yliopisto arvostelee opiskelijan palauttaman kokeen julkaistujen arviointisääntöjensä mukaisesti.
  2. Pankki arvioi lainahakemusta kyseistä lainaa varten käyttäen luottokelpoisuuden kannalta laillisesti merkityksellisiä tietoja.
  3. Kaupunki yhdistää asukkaiden käyttäytymistä useissa eri yhteyksissä pisteytykseksi ja käyttää sitä asumisrajoitusten asettamiseen, jotka eivät liity siihen, missä tiedot kerättiin, ilman käyttäytymiseen suhteutettua perustelua.
  4. Poliisi varmistaa tajuttoman onnettomuusuhrin henkilöllisyyden henkilökohtaisessa henkilöllisyyden tarkastuksessa.
Show Answer

Answer: C) Kaupunki yhdistää asukkaiden käyttäytymistä useissa eri yhteyksissä pisteytykseksi ja käyttää sitä asumisrajoitusten asettamiseen, jotka eivät liity siihen, missä tiedot kerättiin, ilman käyttäytymiseen suhteutettua perustelua.

Johdanto-osan kappale (31) keskittyy useisiin sosiaalista käyttäytymistä koskeviin tietopisteisiin tai ajan mittaan kertyviin henkilökohtaisiin ominaisuuksiin perustuviin pisteytyksiin, jotka johtavat haitalliseen kohteluun asiaankuulumattomassa sosiaalisessa yhteydessä tai kohteluun, joka on suhteetonta tai perusteetonta käyttäytymisen vakavuuteen nähden. Se säilyttää tiettyä tarkoitusta varten unionin ja kansallisen lainsäädännön mukaisesti toteutettavan laillisen arvioinnin.

Key Terms

Recital
Johdanto-osan kappale, joka selittää asiayhteyden, tavoitteet ja tulkinnan. Tässä lähdeosiossa johdanto-osan kielenkäyttöä, kuten "pitäisi", ei saa muotoilla uudelleen velvoittavaksi itsenäiseksi "on"-velvollisuudeksi.
Lex specialis
Tarkempi oikeudellinen kehys, joka sääntelee tiettyä kysymystä yleisemmän säännön sijasta. Johdanto-osan kappaleessa (38) tätä käsitettä käytetään asetuksen lainvalvontaa koskevasta reaaliaikaisen biometrisen tunnistamisen kehyksestä.
Social scoring
Luonnollisten henkilöiden tai ryhmien arviointi tai luokittelu käyttämällä useita eri tilanteissa ilmenevää sosiaalista käyttäytymistä koskevia tietopisteitä tai ajan mittaan tunnettuja, pääteltyjä tai ennustettuja henkilökohtaisia tai persoonallisuuden ominaisuuksia.
Untargeted scraping
Kasvonkuvien laaja kerääminen internetistä tai CCTV-materiaalista kohdentamatta sitä tiettyihin henkilöihin kasvojentunnistustietokantojen luomiseksi tai laajentamiseksi.
Biometric categorisation
Järjestelmä, joka käyttää biometrisiä tietoja, kuten kasvoja tai sormenjälkeä, ihmisten luokittelemiseen. Johdanto-osan kappale (30) keskittyy lueteltujen arkaluonteisten ominaisuuksien johtamiseen tai päättelemiseen.
Materially distorting behaviour
Käyttäytymisen muuttaminen johdanto-osan kappaleessa (29) kuvatulla tavalla tekniikoilla, jotka heikentävät tai haittaavat autonomiaa, päätöksentekoa tai vapaata valintaa, yhdessä johdanto-osan kappaleen merkittävää haittaa koskevan edellytyksen kanssa.
Fundamental-rights impact assessment
Arviointi, jonka johdanto-osan kappaleen (34) mukaan asianomaisen lainvalvontaviranomaisen pitäisi tehdä ennen reaaliaikaisen etäbiometrisen tunnistamisen käyttöä, jollei johdanto-osan kappaleen täsmennyksistä muuta johdu.
Real-time remote biometric identification
Luonnollisten henkilöiden etätunnistaminen yleisön saatavilla olevissa tiloissa reaaliajassa; johdanto-osan kappaleissa (32)–(39) kuvataan erityinen lainvalvontakehys ja suppeat poikkeukset.

Finished reading?

Test your understanding with a custom practice exam on this chapter.

Test yourself