Ce este Supravegherea umană (human-in-the-loop)?

Cerința ca sistemele AI cu risc ridicat să poată fi monitorizate, contrazise și oprite de oameni cu competența necesară.

Denumire completă

Supraveghere umană (art. 14 AI Act) – sistemele cu risc ridicat trebuie proiectate astfel încât persoane fizice să le poată supraveghea efectiv

Ce înseamnă Supravegherea umană (human-in-the-loop)

Art. 14 din AI Act cere ca sistemele cu risc ridicat să fie proiectate, inclusiv prin interfețe potrivite, astfel încât să poată fi supravegheate efectiv de persoane fizice cât timp sunt folosite. Măsurile sunt stabilite de furnizor și sunt fie integrate în sistem, fie aplicate de implementator (alin. (3)).

Implementatorul atribuie supravegherea unor persoane cu competența, pregătirea și autoritatea necesare (art. 26 alin. (2)). Separat, GDPR dă persoanei dreptul de a nu fi supusă unei decizii bazate exclusiv pe prelucrare automată care produce efecte juridice sau o afectează similar în mod semnificativ, cu excepțiile din art. 22 alin. (2).

Cum funcționează

Persoana care supraveghează trebuie să poată (art. 14 alin. (4)): să înțeleagă capacitățile și limitele sistemului și să-i monitorizeze funcționarea; să rămână conștientă de tendința de a se baza excesiv pe rezultat (automation bias); să interpreteze corect rezultatul; să decidă să nu folosească sistemul sau să ignore, să anuleze ori să inverseze rezultatul; să intervină sau să oprească sistemul printr-un buton „stop” sau o procedură similară care îl aduce într-o stare sigură.

La identificarea biometrică la distanță (anexa III, punctul 1 lit. (a)), nicio acțiune nu se ia pe baza identificării decât dacă a fost verificată și confirmată separat de cel puțin două persoane cu competența necesară, cu excepțiile din art. 14 alin. (5).

Cerințele se aplică sistemelor din anexa III din 2 decembrie 2027 și celor din anexa I din 2 august 2028 (Regulamentul (UE) 2026/1744).

Pe înțelesul tuturor

Pilotul automat al unui avion zboară o mare parte din traseu, dar piloții urmăresc instrumentele și pot prelua comanda oricând. Nu stau în cabină doar ca să semneze jurnalul de zbor.

Exemplu

Un program de triere a CV-urilor propune o listă scurtă. Recrutorul vede criteriile, poate adăuga sau scoate candidați și poate opri folosirea sistemului dacă observă erori; respingerile nu se trimit automat.

De reținut

  • Un om care doar apasă „aprobă”, fără timp, informații sau autoritate, nu asigură supravegherea efectivă cerută de art. 14.
  • Expresia „human-in-the-loop” nu apare în AI Act; legea vorbește de „supraveghere umană” (human oversight). Măsurile trebuie să fie proporționale cu riscurile, nivelul de autonomie și contextul (art. 14 alin. (3)).

Nu confunda

  • Ghidurile de etică pentru o AI de încredere ale grupului de experți al Comisiei (2019) disting human-in-the-loop (omul intervine în fiecare ciclu de decizie), human-on-the-loop (omul monitorizează și poate interveni) și human-in-command (omul decide când și cum se folosește sistemul).

Termeni înrudiți