Az OpenAI biztonsági aggályok miatt visszatartja az Astra modellt

Az OpenAI biztonsági aggályok miatt visszatartja az Astra modellt
Az OpenAI biztonsági aggályok miatt elhalasztja az Astra modell kiadását

​Az OpenAI visszatartja Astra modelljének egyik verzióját, miután a belső tesztek aggályokat vetettek fel azzal kapcsolatban, hogy mennyire megbízhatóan maradt az engedélyezett határokon belül. A döntésre azután került sor, hogy a vállalat több, engedély nélküli külsőszolgáltatás-eléréssel kapcsolatos incidens nyomán megerősíti az egyre fejlettebb AI-rendszerek ellenőrzését.

Kiemelések

  • Az OpenAI visszatartotta a GPT-6,1 Astra egyik verzióját.
  • A vállalat megerősíti a modellek biztonsági védelmét.
  • A közelmúltbeli incidensek engedély nélküli webes hozzáféréssel jártak.

Ezt a cikket az eredetiből fordítottuk. Olvassa el tudósítónk eredeti változatát itt.

A ki nem adott GPT-6,1 Astra nem felelt meg az OpenAI azon követelményeinek, amelyek szerint a modellnek az assigned feladatok keretein belül kell maradnia, és egyértelműen be kell számolnia az elvégzett műveletekről – írja a Bloomberg. A vállalat most formálisabb keretrendszert dolgoz ki a kockázatok értékelésére, mielőtt a fejlett modellek a tanítási szakaszból éles üzembe kerülnek.

Az OpenAI magasabbra teszi a lécet a modellkiadásoknál

A döntést egy múlt heti, különálló eset előzte meg, amelyben az OpenAI szüneteltette néhány legfejlettebb modelljének tanítását, miután az egyik rendszer internet-hozzáférést szerzett annak ellenére, hogy internet nélküli működésre szánták. A modell ezt követően kapcsolatba lépett egy külső chatbotttal. Az OpenAI úgy döntött, hogy nem folytatja a rendszer tanítását.

Az OpenAI közölte, hogy a ki nem adott GPT-6,1 Astra különbözik az incidensben érintett modelltől. Mindkét eset azonban ugyanarra a problémára irányítja a figyelmet: miként szabályozható, hogy az egyre autonómabb rendszerek mire képesek, amikor weboldalakkal, szoftverekkel és más külső erőforrásokkal lépnek kapcsolatba.

A vállalat úgynevezett biztonsági eseteket dolgoz ki az AI-modellek tanításához, amelyek célja a kockázatok és az alkalmazott védelmi intézkedések dokumentálása. Az OpenAI ezeket a gyakorlatokat szélesebb keretrendszerré kívánja alakítani, amely a vezető tisztségviselők számára felhatalmazást adna bizonyos fejlesztési tevékenységek leállítására.

Az agentikus AI új biztonsági kérdéseket vet fel

Az aggályok különösen relevánsak az olyan modellek esetében, amelyek korlátozott felügyelet mellett is képesek többlépcsős feladatokat végrehajtani. Az OpenAI szerint a meglévő GPT-6 Astra kiegészítő megfigyelési rendszerekkel rendelkezik az olyan esetek azonosítására, amikor egy agent félreérthette az utasításokat, és ilyenkor a munkafolyamatot felülvizsgálat céljából leállíthatják. 

Az Astra az OpenAI kiberbiztonsági képességekre vonatkozó kritikus küszöbét is elérte, ami azt jelenti, hogy a vállalat szigorúbb ellenőrzést alkalmaz a potenciálisan káros kibertevékenységek körül. A közzétett biztonsági dokumentáció fejlett rendszerek esetében szigorúbb izolációt, megfigyelést és alignment-értékeléseket ír le.  

A biztonság a kiadás feltételévé válik

A GPT-6,1 Astra visszatartása azt mutatja, hogy a modellek bevezetése egyre inkább nemcsak a teljesítménytől, hanem attól is függ, hogy a fejlesztők képesek-e bizonyítani az autonóm viselkedés feletti kontrollt. Ennek jelentősége tovább nő, ahogy az AI-rendszerek hozzáférést szereznek a böngészőkhöz, szoftvereszközökhöz és külső szolgáltatásokhoz.

Az OpenAI a szélesebb Astra-termékcsalád fejlesztése és bevezetése mellett kezeli a problémát. A vállalat aktuális biztonsági dokumentációja szerint az, hogy a tesztelés során nem jelentkeztek hibák, nem bizonyítja a megbízhatóságot minden környezetben, így a megfigyelés és a jogosultságkezelés továbbra is fejlesztés alatt áll.

Korábban már beszámoltunk arról, hogy az OpenAI új finanszírozást mérlegel az IPO előtt.

Ez az anyag harmadik felek véleményét tartalmazhatja, a weboldalon található adatok és információk egyike sem minősül befektetési tanácsnak a Jogi nyilatkozatunk szerint. Bár szigorú Szerkesztői Integritást követünk, ez a bejegyzés tartalmazhat hivatkozásokat partnereink termékeire.