CEO-ul OpenAI, Sam Altman, cere standarde internaționale pentru AI de frontieră la Consiliul de Securitate al ONU - propune măsurarea capabilităților, raportare rapidă a incidentelor și „supraveghere umană”

Sam Altman cere standarde internaționale pentru „frontier AI” și raportare rapidă a incidentelor , avertizând că ritmul accelerat al progresului poate depăși instituțiile și poate concentra puterea în prea puține mâini, potrivit OpenAI , după discursul susținut de CEO-ul companiei în fața Consiliului de Securitate al Națiunilor Unite. În intervenția sa, Altman a descris o fereastră de timp „comprimată” de evoluția rapidă a modelelor, în care beneficiile devin mai tangibile, dar și riscurile mai imediate. Mesajul central pentru zona de politici publice și reglementare: sistemele foarte puternice trebuie păstrate sub control uman, iar guvernele trebuie să construiască un cadru comun de evaluare, supraveghere și reacție la incidente. Două riscuri majore: pierderea controlului și concentrarea puterii Altman a indicat două direcții în care progresul ar putea „merge foarte prost”: pierderea controlului asupra sistemelor , dacă acestea avansează atât de repede încât oamenii nu mai pot urmări ce se întâmplă sau interveni la nevoie; concentrarea excesivă a puterii , dacă cele mai capabile modele ajung să fie folosite de prea puțini actori (companii sau state) pentru a impune o viziune asupra altora. În acest context, el a susținut că industria nu ar trebui să accepte „prea mult risc tehnologic” doar pentru că beneficiile sunt mari și competiția e intensă. OpenAI afirmă că a încetinit unilateral în trecut și că va face acest lucru și în viitor, pentru a evita construirea unor sisteme pentru care nu pot fi oferite garanții de „aliniere” (adică funcționare conform intențiilor umane), monitorizare și siguranță. „Nu substituiți procesul democratic”: deciziile-cheie, în afara laboratoarelor Un alt punct cu relevanță directă pentru reglementare este avertismentul că firmele nu trebuie să substituie procesul democratic. Altman a argumentat că, dacă inteligența artificială trebuie să fie „democratică”, deciziile cele mai importante nu pot fi luate doar de laboratoare, ci trebuie modelate prin procese democratice și de guverne responsabile în fața cetățenilor. La nivel internațional, el a cerut cooperare între state, inclusiv între competitori, pentru a gestiona o tehnologie cu impact sistemic. Ce mecanisme propune: standarde „frontier AI”, verificare și raportare de incidente Altman a cerut un mecanism de standarde complementare naționale și internaționale pentru „frontier AI” (modele de vârf, cu capabilități foarte ridicate), care să acopere: măsurarea capabilităților și evaluarea riscurilor ; stabilirea dacă măsurile de protecție sunt suficiente; păstrarea unei supravegheri umane semnificative pe măsură ce sistemele devin mai autonome; standarde comune care să permită compararea dovezilor și verificarea conformității; raportare rapidă și precisă a incidentelor , cu protocoale de clasificare și raportare, pentru ca lumea să învețe din eșecuri înainte să devină catastrofe; canale securizate între guverne, operatori de infrastructură critică și experți tehnici pentru schimb de vulnerabilități și amenințări emergente. El a adăugat că standardele nu ar trebui să „blocheze” competiția sau să favorizeze un model de afaceri, ci să poată fi aplicate atât dezvoltatorilor de modele deschise, cât și celor de modele închise, inclusiv noilor intrați și laboratoarelor consacrate. Fiecare guvern ar urma să decidă cum integrează standardele în propriul sistem legal. Contextul tehnologic invocat: progrese rapide și sisteme tot mai autonome Pentru a ilustra viteza progresului, Altman a oferit un exemplu din matematică: de la performanțe modeste la nivel de aritmetică de bază, la rezultate comparabile cu nivelul de „medalie de aur” într-o competiție internațională de matematică, iar ulterior la rezolvarea unei probleme din categoria „Millennium Prize Problems”, menționând ecuațiile Navier–Stokes și utilizările lor (proiectare aeronautică, prognoză meteo, studierea fluxului sanguin). În același timp, el a avertizat asupra apropierii de sisteme care își pot îmbunătăți propriile versiuni viitoare („auto-îmbunătățire recursivă”), ceea ce ar putea accelera și mai mult ritmul dezvoltării și ar cere „prudență extremă”. De ce contează pentru companii și guverne Discursul plasează în prim-plan o agendă de guvernanță a IA : standarde de evaluare, obligații de raportare a incidentelor și cooperare transfrontalieră. Pentru companii, direcția sugerată implică un mediu în care accesul la modele de vârf și lansarea de capabilități noi ar putea depinde tot mai mult de dovezi de siguranță, monitorizare și control uman. Pentru guverne, miza este construirea unor reguli care să reducă riscurile sistemice fără a consolida poziția actorilor dominanți. Altman a încheiat spunând că OpenAI „nu are toate răspunsurile” și că este deschisă la idei mai bune, declarându-se pregătită să lucreze cu statele pentru a defini „dovezi, măsuri de protecție și supraveghere” acceptate la nivel global. [...]