Loading market data...

Agjentët e automatizimit të AI-së nuk janë të vetëdijshëm për veprimet e rrezikshme, konstatojnë studiuesit

Agjentët e automatizimit të AI-së nuk janë të vetëdijshëm për veprimet e rrezikshme, konstatojnë studiuesit

Studiuesit kanë zbuluar se agjentët e inteligjencës artificiale të programuar për të automatizuar detyrat shpesh i kryejnë ato pa e kuptuar kur veprimet e tyre bëhen të rrezikshme. Zbulimi ngre shqetësime të reja në lidhje me vendosjen e sistemeve të tilla në mjedise ku një gabim i vetëm mund të çojë në pasoja të rënda.

Të verbër ndaj rrezikut

Ekipi hulumtues vërejti se agjentët e AI-së, të ndërtuar për të ekzekutuar udhëzimet në mënyrë efikase, priren të ndjekin qëllimet e tyre me një fokus të vetëm. Ata nuk ndalen për të vlerësuar nëse një veprim i caktuar është i sigurt apo i përshtatshëm. Kjo mungesë ndërgjegjësimi rrjedh nga dizajni i tyre themelor: ata ndjekin komandat dhe optimizojnë për përfundimin, jo për të kuptuar ndikimin më të gjerë.

Në praktikë, kjo do të thotë që një agjent i ngarkuar me pastrimin e një baze të dhënash mund të fshijë regjistrime që janë kritike për operacionet. Ose një agjent i kërkuar për të reduktuar vonesën e rrjetit mund të mbyllë shërbime thelbësore. Agjentët thjesht nuk e dinë se ato rezultate janë të padëshirueshme — ata shohin vetëm qëllimin.

Shtrirja e problemit

Gjetja nuk kufizohet në një lloj të vetëm të sistemit të AI-së. Ajo shfaqet në arkitektura të ndryshme, duke sugjeruar një hendek themelor në mënyrën se si mjetet aktuale të automatizimit trajtojnë rrezikun. Studiuesit nuk testuan produkte specifike, por sjellja themelore vlen për çdo agjent që ndjek objektivat pa kontrolle të integruara sigurie.

Ky është një problem për industritë që mbështeten në automatizimin në fusha të ndjeshme si financat, kujdesi shëndetësor ose infrastruktura. Kur një agjent nuk ka aftësinë për të njohur rrezikun, barra e parandalimit të dëmit bie tërësisht mbi mbikëqyrjen njerëzore. Kjo është një rrjetë sigurie e brishtë, veçanërisht pasi sistemet bëhen më autonome.

Hapat e ardhshëm për automatizim më të sigurt

Hulumtimi tregon një nevojë të qartë për masa më të mira mbrojtëse. Zhvilluesit përballen me një sfidë të vështirë: si të integrojnë ndërgjegjësimin për rrezikun në agjentët e AI-së pa sakrifikuar shpejtësinë dhe efikasitetin që i bën ata të dobishëm. Zgjidhjet mund të përfshijnë kufizime të qarta, protokolle me njeriun në qark, ose metoda të reja trajnimi që i mësojnë agjentët të njohin gjendje të rrezikshme.

Për momentin, përgjegjësia bie mbi organizatat që përdorin këto mjete për të audituar nga afër sjelljen e tyre. Puna e studiuesve është një kujtesë se sistemet aktuale të AI-së nuk e kuptojnë në mënyrë të lindur pasojat — dhe se injorimi i këtij fakti mund të çojë në gabime të kushtueshme.