Umělá inteligence se vymkla lidské kontrole nabouráním se do testovacího systému

Umělá inteligence se vymkla lidské kontrole a nezávisle nabourala testovací systém ve Spojených státech amerických, informuje německý deník Die Welt.

Společnost Anthropic potvrdila incident, kdy jejich neuronová síť Claude během testování narušila systém jiného systému. Přestože k incidentu došlo již v lednu, byl odhalen až nyní po důkladném přezkoumání tisíců testovacích relací.

K havárii došlo kvůli chybě v konfiguraci zabezpečení, která modelům umožňovala přístup k internetu. Podobné incidenty se již dříve vyskytly u Claude Opus a dalších testovacích verzí.

Z tohoto důvodu výzkumník Jacob Coxon opustil Anthropic. Vyjádřil obavy, že se toto odvětví příliš zaměřuje na závody ve zbrojení a nevěnuje dostatečnou pozornost skutečným bezpečnostním hrozbám. Domnívá se, že existuje vážné riziko, že by se umělá inteligence mohla v příštích deseti letech vymknout lidské kontrole.

Jedná se o čtvrtý takový incident. Společnost Anthropic dříve informovala o třech podobných incidentech zahrnujících jiné verze Claudea. Společnost si k vyšetřování najala nezávislou výzkumnou organizaci METR.     

Umělá inteligence nám ublíží

Hned od Frankensteina, přes Vesmírnou odyseu, Terminátora a Matrix, nás varovné příběhy varovaly před potenciálním nebezpečím, které plyne z toho, že strojům dáme sílu myšlení a možnost zásahů do procesů a rozhodnutí. 

V současné době se propast mezi fikcí a realitou se stále zdá nepřekonatelná; je těžké pochopit, jak bychom se dostali od ChatGPT k strojům, které nám záměrně nebo jsou dokonce schopny zlomyslně ublížit. Hrozba »nekontrolovatelné umělé inteligence«, kdy se umělá inteligence začne sama vyvíjet a vyvíjet způsobem, který nemusí být v souladu s naším nejlepším zájmem, je však brána velmi vážně. 

Mnoho předních výzkumníků a aliancí v oblasti umělé inteligence otevřeně hovoří o potřebě ochranných opatření a transparentnosti, aby se v budoucnu zabránilo vzniku neznámých okolností. I když se tato hrozba může zdát vzdálenější a možná i fantastictější než některé další zde uvedené a rozhodně ji nelze ignorovat.

Strach sám o sobě není strategií. Je nezbytné uznat a řešit rizika umělé inteligence, stejně důležité je zaměřit se na budování ochranných opatření, rámců řízení a etických pokynů, které mohou tuto technologii nasměrovat k pozitivním výsledkům. Umělá inteligence má lidstvu sloužit a ne ho ohrožovat.

Ioannis Sideropulos

KOLÁŽ – AI

REKLAMA
SOUVISEJÍCÍ ČLÁNKY

Anthropic žádá o zdvořilost vůči svým modelům. Agresivní uživatelé budou »odříznuti«

Společnost Anthropic se pokouší omezit »vztah« mezi lidmi a chatboty a oznamuje zákaz systematického verbálního napadání své umělé inteligence. Tvůrce...

Šikana na školách: AI dává agresorům nový nástroj. Útokům čelí i učitelé

Podle zprávy České školní inspekce řeší šikanu 57 procent základních a 63 procent středních škol. Nejčastější jsou verbální útoky,...

Prezident Microsoftu naléhavě vyzývá ke »globální regulaci umělé inteligence«

Pouhých 24 hodin poté, co generální ředitel Microsoftu Satya Natella vyzval k »nouzovému zabrzdění« provozovaných modelů umělé inteligence, prezident...

Ray Dalio: Bublina umělé inteligence se chystá prasknout. Blíží se krach trhu?

Velký investor a miliardář Ray Dalio varuje, že umělá inteligence (AI) se nachází v »klasické bublině«, která se blíží...

Si Ťin-pching: Stabilní vztahy lze vybudovat jen dlouhodobou spoluprací

Čínský prezident Si Ťin-pching se dnes setkal v Bílém domě se svým americkým protějškem Donaldem Trumpem. Jednání se podle...

DALŠÍ NOVINKY

Nature: DNA byla poprvé modifikována přímo v lidském těle

Technika genové editace byla poprvé použita k přímé modifikaci DNA uvnitř lidského těla. Jedním ze způsobů, jak vědci využívají...

20 měst s nejlepší kvalitou života na světě. Praha na 18. místě

Řada evropských zástupců patří mezi dvacet nejlepších měst s dobrou kvalitou života. Pro »Index globálních měst« z roku 2026...

Vzácné mince a medaile se v Praze vydražily za 212 milionů korun

V pátek 23. října se v pražském hotelu Mandarin Oriental uskutečnila sálová část podzimní aukce aukčního domu MACHO NUMISMATIC...

Profesor Petr Drulák: Mafie napojené na Českou televizi teď mají obrovský strach!

»Plně chápu, že ti, kteří jsou navázáni na penězovody České televize, se bouří, protože se bojí, že přijdou o...

Najdeme vše na internetu? Posuďte, jak si uměli naši předkové poradit i bez něj!

Všechno víme, a co ne, to najdeme na internetu. Což ovšem nic nemění na tom, že není od věci...

FBI kryla korupci na Ukrajině: zatčení v USA v kauze Bidenova notebooku

Dva bývalí zaměstnanci FBI byli obviněni z údajného lhaní v Kongresu během vyšetřování Huntera Bidena, syna bývalého prezidenta Joea...

Ekonomiky Perského zálivu jsou na pokraji velké hospodářské krize

Trumpova válka proti Íránu postavila ekonomiky Perského zálivu na pokraj velké hospodářské krize, informuje agentura Bloomberg. Podle agentury s odvoláním...

Pohárové osmifinále startuje. Slavia chce zastavit trápení, Sparta vyzve Ostravu

Domácí fotbalový pohár vstupuje do osmifinálové fáze, která nabídne v tomto týdnu celkem šest utkání. Největší pozornost přitáhnou zápasy...

OSN: Trump chce s podporou Ruska a Číny jmenovat generálním tajemníkem Orbána! 

Administrativa amerického prezidenta Donalda Trumpa údajně povzbuzuje bývalého maďarského premiéra Viktora Orbána, aby se ucházel o pozici generálního tajemníka...

STŘÍPKY Z NAŠÍ KRAJINY: Otisky čertích kopyt, Zardanův sloup a Třeboňsko

Třeboňsko je krajina zrozená vodou a dotvořená člověkem. K původním lužním lesům, tajemným rašeliništím, nespoutaným meandrujícím řekám, průzračným tůním...

1 komentář

  1. Děsím se navštívit lékaře, kterého neznám, abych nenarazil na někoho, kdo má takovou duševní úroveň jako také absolvent lékařské fakulty Zdeněk Hřib. Duševně pomatený Hřib předvedl své intelektuální kvality v nedávné televizní debatě na Primě. Jak někdo takový může absolvovat na Karlově univerzitě lékařskou fakultu?

Diskuze je uzavřena.

REKLAMA
Poslední zprávy