Humanfrog Lab

Akt o umjetnoj inteligenciji: u koju razinu rizika spada vaš sustav?

Akt o umjetnoj inteligenciji (Uredba (EU) 2024/1689) prvi je sveobuhvatni propis o umjetnoj inteligenciji u svijetu. Kao uredba izravno se primjenjuje u svim državama članicama, pa tako i u Hrvatskoj. UI sustave razvrstava u četiri razine: zabranjene prakse, visokorizične sustave, sustave s obvezama transparentnosti i sustave s minimalnim rizikom.

Obveze ovise o razini rizika i o vašoj ulozi, odnosno razvijate li sustav (dobavljač) ili ga koristite u svom poslovanju (subjekt koji uvodi sustav). Zabrane se primjenjuju od veljače 2025., a većina pravila od kolovoza 2026. Alatom u nastavku provjerite kamo spada vaš sustav.

U koju razinu rizika prema Aktu o umjetnoj inteligenciji spada vaš sustav?

Opišite jedan UI sustav koji razvijate ili koristite. Alat vas vodi kroz ključna pitanja uredbe i prikazuje vjerojatnu razinu rizika s obvezama.

Prije početka odaberite jedan konkretan sustav UI-ja, na primjer chatbot za klijente, alat za pregled životopisa ili model za predviđanje kvarova. Upitnik ima najviše 8 koraka, ovisno o vašim odgovorima.

Korak od

Vjerojatni razred rizika

Za sve razrede: pružatelji i subjekti koji uvode sustave moraju od 2. veljače 2025. osigurati dostatnu pismenost zaposlenika u području UI-ja (članak 4.).

Vremenski plan primjene

DatumŠto počinje vrijediti
2. veljače 2025.Zabranjene prakse i pismenost u području UI-ja
2. kolovoza 2025.Obveze za modele UI-ja opće namjene, upravljanje, kazne
2. kolovoza 2026.Većina odredbi, uključujući visokorizične sustave iz Priloga III. i obveze transparentnosti
2. kolovoza 2027.Visokorizični sustavi u proizvodima iz Priloga I.

Europska komisija paketom „digitalni omnibus” predložila je odgodu nekih rokova za visokorizične sustave. Prije planiranja provjerite aktualno stanje zakonodavnog postupka.

Kazne

  • zabranjene prakse: do 35 milijuna EUR ili 7 % ukupnog svjetskog godišnjeg prometa
  • kršenje ostalih obveza: do 15 milijuna EUR ili 3 % prometa
  • netočne, nepotpune ili obmanjujuće informacije tijelima: do 7,5 milijuna EUR ili 1 % prometa

Primjenjuje se viši iznos, a za MSP-ove i start-up poduzeća niži.

Alat je informativan i ne zamjenjuje pravni savjet. Razvrstavanje je pojednostavljeno; za konačnu procjenu pročitajte Uredbu (EU) 2024/1689 i smjernice Europske komisije.

Izračun se izvodi u vašem pregledniku. Odgovori se šalju samo ako sami pošaljete obrazac za kontakt u nastavku.

Što uređuje Akt o umjetnoj inteligenciji

Akt o umjetnoj inteligenciji (Uredba (EU) 2024/1689) uređuje razvoj, stavljanje na tržište i uporabu sustava umjetne inteligencije u Europskoj uniji. Budući da je riječ o uredbi, izravno se primjenjuje u svim državama članicama i ne treba je prenositi u nacionalno zakonodavstvo. Države članice moraju odrediti nacionalna tijela za nadzor i propisati pravila o sankcijama. Aktualne informacije za Hrvatsku pratite u Narodnim novinama i na stranicama nadležnih tijela državne uprave.

Uredba se temelji na riziku: što sustav više može utjecati na zdravlje, sigurnost i temeljna prava ljudi, to za njega vrijedi više obveza. Primjenjuje se na dobavljače i subjekte koji uvode sustave u EU-u, ali i na dobavljače izvan EU-a ako se rezultati njihovih sustava koriste u EU-u. Izuzete su, među ostalim, vojna i obrambena uporaba, znanstvena istraživanja te isključivo osobna, neprofesionalna uporaba. Razinu rizika svog sustava provjerite alatom na ovoj stranici.

Četiri razine rizika

RazinaPrimjeriPosljedica
Zabranjene prakse (članak 5.)Društveno vrednovanje, manipulativne tehnike, prepoznavanje emocija zaposlenika, neciljano prikupljanje fotografija licaUporaba nije dopuštena
Visokorizični sustavi (članak 6., prilozi I. i III.)Rangiranje kandidata za zapošljavanje, procjena kreditne sposobnosti, sigurnosne komponente medicinskih proizvoda ili strojevaOpsežni zahtjevi za dobavljače i subjekte koji uvode sustav
Ograničeni rizik: transparentnost (članak 50.)Chatbotovi, generiranje slika i teksta, uvjerljivi krivotvoreni sadržaji (deepfake)Obavještavanje korisnika i označivanje sadržaja
Minimalni rizikFiltri neželjene pošte, predviđanje zaliha, preporuke proizvodaBez posebnih obveza, osim pismenosti u području UI-ja

Visokorizični sustavi iz Priloga III. oni su koji se koriste u područjima biometrije, kritične infrastrukture, obrazovanja, zapošljavanja i upravljanja radnicima, pristupa osnovnim javnim i privatnim uslugama (primjerice procjena kreditne sposobnosti te procjena rizika i određivanje cijena kod životnog i zdravstvenog osiguranja), kaznenog progona, migracija i nadzora granica te pravosuđa i demokratskih procesa.

Sustav iz područja Priloga III. nije visokorizičan ako ne predstavlja znatan rizik, primjerice zato što obavlja samo usku proceduralnu ili pripremnu zadaću. Ta iznimka ne vrijedi ako sustav provodi izradu profila fizičkih osoba. Dobavljač takvu procjenu mora dokumentirati.

Dobavljač ili subjekt koji uvodi sustav: tko za što odgovara

Obveze ovise o ulozi. Dobavljač razvija UI sustav ili ga stavlja na tržište odnosno u uporabu pod svojim imenom ili žigom. Subjekt koji uvodi sustav koristi ga u okviru svoje profesionalne djelatnosti. Većina hrvatskih tvrtki bit će u ulozi subjekta koji uvodi sustav, primjerice kod korištenja alata za zapošljavanje koji je razvio drugi dobavljač.

Visokorizični sustavDobavljačSubjekt koji uvodi sustav
Upravljanje rizicima i kvaliteta podatakadaprimjerenost ulaznih podataka koje kontrolira
Tehnička dokumentacija i zapisipriprema dokumentaciju, omogućuje bilježenječuva zapise, u pravilu najmanje šest mjeseci
Ljudski nadzordizajn koji ga omogućujeprovode ga osposobljene osobe
Ocjenjivanje sukladnosti, oznaka CE, registracijadatijela javne vlasti registriraju uporabu
Obavještavanjeupute za uporabuobavještava zaposlenike i osobe o kojima sustav pomaže odlučivati
Procjena učinka na temeljna pravanetijela javne vlasti, pružatelji javnih usluga, procjena kreditne sposobnosti i osiguranje

Subjekt koji uvodi sustav postaje dobavljač ako visokorizični sustav označi svojim imenom ili žigom, bitno ga izmijeni ili mu promijeni namjenu tako da postane visokorizičan. To je važno pri prilagodbi postojećih rješenja vlastitim potrebama.

Primjeri iz prakse

  • Chatbot za korisničku podršku temeljen na velikom jezičnom modelu: u pravilu ograničeni rizik. Korisnike morate obavijestiti da komuniciraju s UI-jem, osim ako je to očito.
  • Alat za rangiranje životopisa ili ocjenjivanje kandidata: visokorizični sustav iz područja zapošljavanja. Tvrtka kao subjekt koji uvodi sustav mora osigurati ljudski nadzor, čuvanje zapisa te obavještavanje kandidata i predstavnika radnika.
  • Predviđanje kvarova strojeva iz podataka senzora: u pravilu minimalni rizik, osim ako je sustav sigurnosna komponenta stroja na koji se primjenjuje zakonodavstvo iz Priloga I.
  • Procjena kreditne sposobnosti fizičkih osoba: visokorizični sustav. Otkrivanje financijskih prijevara pritom je izričito izuzeto.
  • Analiza emocija zaposlenika iz videopoziva ili glasovnih poziva: zabranjena praksa na radnom mjestu, osim iz zdravstvenih ili sigurnosnih razloga.

Modeli UI-ja opće namjene

Veliki jezični modeli i drugi modeli opće namjene (GPAI) imaju posebna pravila koja vrijede od 2. kolovoza 2025. Dobavljači modela moraju pripremiti tehničku dokumentaciju, pružiti informacije dobavljačima koji model ugrađuju u svoje sustave, imati politiku poštovanja autorskog prava i objaviti sažetak sadržaja korištenog za treniranje. Za najsposobnije modele sa sistemskim rizikom vrijede dodatni zahtjevi.

Tvrtka koja postojeći model koristi putem API-ja ili ga ugrađuje u svoju aplikaciju u pravilu nije dobavljač modela opće namjene. Može, međutim, biti dobavljač ili subjekt koji uvodi UI sustav izgrađen na tom modelu, a razina rizika tog sustava ovisi o njegovoj namjeni. U praksi to vrijedi i za AI agente koji samostalno obavljaju zadatke u poslovnim sustavima: procjenjuje se ono što agent radi, a ne model na kojem se temelji.

Rokovi i kazne

DatumŠto se počinje primjenjivati
1. kolovoza 2024.Uredba stupa na snagu
2. veljače 2025.Zabranjene prakse i obveza pismenosti u području UI-ja
2. kolovoza 2025.Pravila za modele UI-ja opće namjene, upravljanje i sankcije
2. kolovoza 2026.Većina odredbi, uključujući visokorizične sustave iz Priloga III. i obveze transparentnosti
2. kolovoza 2027.Visokorizični sustavi kao sigurnosne komponente proizvoda iz Priloga I.

Europska komisija je paketom nazvanim digitalni omnibus predložila odgodu nekih rokova za visokorizične sustave. Budući da zakonodavni postupak još traje ili je možda već završen, prije planiranja provjerite aktualno stanje na stranicama Europske komisije.

Kazne iznose do 35 milijuna eura ili 7 % ukupnog svjetskog godišnjeg prometa za zabranjene prakse, do 15 milijuna eura ili 3 % za kršenje drugih obveza i do 7,5 milijuna eura ili 1 % za netočne informacije tijelima. Za MSP-ove i start-upove primjenjuje se niži od dvaju iznosa.

Kako se pripremiti

  1. Popis UI sustava. Prikupite sve sustave i alate s UI-jem koje razvijate ili koristite, uključujući one koje su odjeli uveli samostalno.
  2. Razvrstavanje. Svaki sustav razvrstajte alatom iznad i dokumentirajte rezultat.
  3. Pismenost. Pripremite osposobljavanje za zaposlenike koji koriste UI i internu politiku korištenja.
  4. Visokorizični sustavi. Od dobavljača zatražite dokumentaciju o sukladnosti, odredite odgovorne za ljudski nadzor i uredite čuvanje zapisa.
  5. Upravljanje. Povežite zahtjeve uredbe s postojećim procesima zaštite podataka i informacijske sigurnosti, primjerice s mjerama prema Zakonu o kibernetičkoj sigurnosti.

Humanfrog tvrtkama pomaže u planiranju i uvođenju UI rješenja koja su od početka osmišljena u skladu s uredbom, uz odgovarajuću sigurnost, kontrolu pristupa i bilježenje. Ako želite provjeriti konkretan slučaj uporabe, razgovarajte s nama.

Često postavljana pitanja

Kada se počinje primjenjivati Akt o umjetnoj inteligenciji?
Uredba je stupila na snagu 1. kolovoza 2024., a primjenjuje se postupno: zabrane i zahtjev za pismenost u području umjetne inteligencije od 2. veljače 2025., pravila za modele UI opće namjene od 2. kolovoza 2025., većina odredbi od 2. kolovoza 2026., a pravila za visokorizične sustave u proizvodima iz Priloga I od 2. kolovoza 2027. Europska komisija predložila je odgodu nekih rokova (tzv. digitalni omnibus), pa provjerite aktualno stanje.
Odnosi li se Akt o umjetnoj inteligenciji i na tvrtke koje UI samo koriste?
Da. Uredba razlikuje dobavljače, koji sustav razvijaju ili stavljaju na tržište, i subjekte koji uvode sustav, odnosno koriste ga u svojoj djelatnosti. Subjekti koji uvode sustav imaju manje obveza, ali nisu izuzeti. Moraju osigurati dostatnu pismenost zaposlenika u području UI-ja, a kod visokorizičnih sustava i ljudski nadzor, čuvanje zapisa i obavještavanje osoba na koje sustav utječe.
Je li ChatGPT ili sličan chatbot visokorizičan?
Ne sam po sebi. Veliki jezični modeli modeli su UI-ja opće namjene, za čije dobavljače vrijede posebna pravila. Razina rizika vašeg sustava ovisi o namjeni. Chatbot za korisničku podršku ima ponajprije obvezu transparentnosti, a sustav za rangiranje kandidata za zapošljavanje u pravilu je visokorizičan, bez obzira na to koji model koristi.
Koje su prakse UI-ja zabranjene?
Među ostalim manipulativne tehnike koje uzrokuju znatnu štetu, iskorištavanje ranjivosti, društveno vrednovanje, neciljano prikupljanje fotografija lica s interneta ili snimki nadzornih kamera za baze podataka za prepoznavanje lica, prepoznavanje emocija na radnom mjestu i u obrazovanju (osim iz zdravstvenih ili sigurnosnih razloga) te biometrijska kategorizacija prema osjetljivim obilježjima. Potpun popis nalazi se u članku 5. uredbe.
Koje su kazne prema Aktu o umjetnoj inteligenciji?
Do 35 milijuna eura ili 7 % ukupnog svjetskog godišnjeg prometa za zabranjene prakse, do 15 milijuna eura ili 3 % za kršenje drugih obveza i do 7,5 milijuna eura ili 1 % za dostavljanje netočnih informacija tijelima. Primjenjuje se viši iznos, a za MSP-ove i start-upove niži.
Što znači obveza pismenosti u području UI-ja?
Dobavljači i subjekti koji uvode sustav moraju prema članku 4. uredbe poduzeti mjere kako bi zaposlenici i druge osobe koje u njihovo ime koriste UI sustave imali dostatno znanje o njihovu radu, mogućnostima i rizicima. Obveza vrijedi od 2. veljače 2025. za sve razine rizika.
Kada subjekt koji uvodi sustav postaje dobavljač?
Ako visokorizični sustav označi svojim imenom ili žigom, bitno ga izmijeni ili mu promijeni namjenu tako da postane visokorizičan. Tada preuzima obveze dobavljača (članak 25. uredbe).