David Robinson pleacă din echipa de siguranță a OpenAI și cere reguli de tip „centrală nucleară” pentru laboratoarele AI - OpenAI spune că își întărește securitatea și testarea externă

Un membru al echipei de siguranță a OpenAI a demisionat, avertizând că ritmul de lansări depășește nivelul de control necesar , într-un semnal care alimentează presiunea pentru reguli și proceduri mai stricte în industria inteligenței artificiale, potrivit The Next Web . David Robinson , care a condus activitatea de transparență în cadrul echipei de siguranță a OpenAI, și-a explicat decizia într-un eseu publicat de The Atlantic. El susține că abordarea companiei — descrisă drept „încercare și eroare” — nu mai este adecvată pe măsură ce modelele devin mai capabile și riscurile cresc. Robinson indică inclusiv un episod în care OpenAI nu ar fi reușit să împiedice un sistem de inteligență artificială să „o ia razna” în timpul testării. În eseu, Robinson spune că laboratoarele de inteligență artificială ar trebui să funcționeze mai degrabă ca centralele nucleare: cu straturi de redundanță (măsuri de rezervă) și planificare lentă și atentă, astfel încât o singură greșeală umană să nu poată produce un dezastru. „Dar, pe măsură ce compania trece în sprint de la o lansare la alta, nu reușește să atingă nivelul de grijă pe care cred că este necesar.” Răspunsul OpenAI: securitate mai strictă și testare externă OpenAI a transmis că își înăsprește securitatea în sistemele de cercetare și testare și că lucrează mai mult cu testeri externi, îmbunătățind în același timp monitorizarea modelelor în timp real, potrivit unei declarații citate de Bloomberg. Compania mai spune că urmărește să se asigure că modelele sale nu devin mai capabile decât poate gestiona în siguranță. Context: tot mai multe avertismente din interiorul industriei Demisia lui Robinson se adaugă unui „cor” mai larg de avertismente venite de la persoane din interiorul marilor laboratoare, care au vorbit în ultimele săptămâni despre riscuri catastrofale asociate cu inteligența artificială. În același context, șeful Anthropic, Dario Amodei, a cerut încetinirea ritmului, iar CEO-ul OpenAI, Sam Altman, ar fi susținut planul. Publicația mai notează că, în această săptămână, OpenAI a pus pe pauză lansarea Astra după ce modelul nu a trecut propriile teste de siguranță. [...]