Експерти предупреждават, че изкуственият интелект може да унищожи всички хора през следващото десетилетие — но колко сериозно трябва да приемаме тези твърдения?

Експерти предупреждават, че изкуственият интелект може да унищожи всички хора през следващото десетилетие — но колко сериозно трябва да приемаме тези твърдения?

Дали изкуственият суперинтелект наистина представлява по-голяма заплаха от ядрените оръжия? Има ли реална възможност за катастрофа в мащаба на Чернобил? Може ли дори да има повече от 10% шанс ИИ да „изтрие всички хора“ през следващите десет години?

Тези предупреждения излязоха през последните два дни както от Обединеното кралство, така и от САЩ относно възможното въздействие на технология, която повечето хора все още възприемат просто като по-приказлива търсачка.

Някои от тези опасения бяха повдигнати в Уестминстър, където депутати и лордове започнаха да проучват опасностите от ИИ, надминаващ човешките способности. Ядрените сравнения дойдоха от Дес Браун, бивш министър на отбраната, и професор Стюарт Ръсел, известен компютърен учен в Бъркли.

Беатрис Фин, която спечели Нобеловата награда за мир през 2017 г. за ръководенето на Международната кампания за премахване на ядрените оръжия, заяви пред парламентаристите: „Това не е първият път, когато сме изправени пред способности, които биха могли да доведат до смъртта на всички нас.“

Сесията в понеделник беше организирана от Control AI, лобистка група, настояваща за международни правила относно технологията. Тя подкрепя законопроект, внесен в парламента тази седмица от депутата от Лейбъристката партия Алекс Собел, който има за цел да забрани създаването на изкуствен суперинтелект (ИСИ).

Във вторник вечерта старши служител в Anthropic призна, че вярва, че има повече от 10% шанс технологията да „убие всички хора“ през следващото десетилетие. Той също така предупреди, че неговата ИИ компания няма план да гарантира, че ИСИ е съгласуван, което означава, че няма да причини вреда. Прогнозите за това кога ИСИ може да пристигне варират от няколко години до над десетилетие.

Еван Хюбингер, който ръководи науката за съгласуване в Anthropic, публикува този коментар, след като Джейкъб Коксън, 28-годишен изследовател в базираната в Сан Франциско компания и преди това в OpenAI, подаде оставка. Коксън твърди, че „нито една от компаниите не действа отговорно“ и каза, че те „рискуват с живота ни“.

Коксън заяви, че рисковете в Anthropic са добре разбрани, но компанията е „заключена в надпревара да стигне първа“. Като малък знак за надежда, той добави, че е оптимист относно възможността американските лаборатории да работят заедно, за да забавят напредъка си в надпреварата.

Anthropic беше помолена за коментар по този въпрос. OpenAI посочи изявление от главния си учен, Якуб Пачоцки, който каза миналата седмица: „Международната координация относно бъдещото развитие на ИИ трябва да стане основен приоритет за правителствата по света.“

Натискът за по-широка координация за контрол на ИСИ беше централен за събитията в Уестминстър тази седмица. Според Financial Times, правителствени служители изразиха загриженост, че Anthropic е отказала да представи най-новия си модел – Mythos 5.1 – на британския Институт за сигурност на ИИ за тестване преди пускането му.

Кабинетът потвърди, че само няколко американски организации са имали достъп до Mythos 5.1. Говорител добави: „Институтът за сигурност на ИИ продължава да работи тясно с индустриални партньори, включително Anthropic.“

Депутатът от Лейбъристката партия Дарън Джоунс е написал писма до световни лидери, призовавайки за многонационален договор, за да се гарантира, че ИИ се разработва безопасно. Той написа до министър-председателя, Анди Бърнам, и ръководителите на ООН и ОИСР, призовавайки за „многонационален договор за регулираното и безопасно развитие на суперинтелекта – не забрана на иновациите или научната работа, а подход с приоритет на безопасността към бързия растеж на тази технология.“

Позовавайки се на оставката на Коксън, Джоунс добави: „Дебатът варира от края на човечеството до твърдения за „маркетингова реклама.“ Както и да е, правителствата трябва сега да се намесят.“

От другата страна на Атлантика, Бърни Сандърс засили кампанията си за безопасност на ИИ тази седмица, като отново призова Конгреса да регулира технологията. Той посочи проучвания, показващи, че 81% от американците вярват, че техните политици трябва да предприемат действия.

Независимият сенатор от Върмонт каза: „Не можем да позволим на шепа алчни хора да играят на Бог и да решават бъдещето на човечеството – нашата икономика, околна среда, демокрация, поверителност и други – без обществено участие.“Най-новото популяризиране на бюлетин
Безплатен бюлетин | Седмично
Абонирайте се за TechScape
Седмично гмуркане в това как технологията оформя живота ни
Въведете имейла си
Абонирайте се

След популяризирането на бюлетина
Вижте изображение в цял екран
Американският сенатор Бърни Сандърс иска Конгресът да регулира „алчната“ ИИ индустрия. Снимка: Linda Nylind/The Guardian

ControlAI се финансира от Яан Талин, милиардерът съосновател на Skype, който се нарича „анти-изчезващ активист.“ Той е вложил част от състоянието си в кампании за безопасност на ИИ и казва, че някои старши ИИ изпълнителни директори биха приели спокойно изтриването на човечеството.

Въпреки че е ранен инвеститор в Anthropic и Google DeepMind, две от водещите ИИ лаборатории, Талин изчислява, че 10-15% от служителите в ИИ вярват, че технологията ще бъде достоен наследник на човечеството.

Той каза в интервю по-рано това лято: „Доста известен ИИ изследовател ми каза: „Яан, не се притеснявай за това. Хората са вид за изхвърляне.“ Доколкото разбирам, той беше съгласен да изчезне.“

Лобистката група на Талин проведе сесията за депутати и лордове в Уестминстър в понеделник, призовавайки ги да подкрепят мерки за ограничаване на най-мощните ИИ модели. На всеки стол имаше копие от книгата Ако Някой Го Построи, Всички Умират: Случаят Против Суперинтелигентния ИИ.

Политиците чуха от Ръсел, който направи предупреждението за Чернобил и каза: „Другата възможност е много по-голяма катастрофа, където човечеството губи контрол необратимо. Но ние нямаме думата дали ще продължим да съществуваме.“

Браун каза, че когато е бил министър на отбраната, е смятал ядрената война за най-вероятната заплаха за човечеството. Сега той вярва, че „суперинтелигентен ИИ представлява заплаха в същия мащаб, възможно дори по-голяма.“

OpenAI модели излязоха извън контрол. Спешно се нуждаем от по-добро разследване на „hugging face“ | Макензи Арнолд и Стефан Лерера
Прочетете повече

Други участници бяха по-предпазливи. Д-р Андрю Рогойски от Съри института за човешки центриран ИИ каза: „В действителност тези системи не са дори близо до толкова гъвкави, колкото хората, камо ли хората, действащи колективно. Подозирам, че се движим към „голямото разочарование,“ където напредналият ИИ се оказва твърде скъп и недостатъчно полезен, за да продължи в сегашната си форма.“

Дейвид Барбър, директор на Sofair, държавно подкрепяна ИИ изследователска лаборатория, която обединява академици от Оксфорд, Кеймбридж, Единбург и UCL, каза, че е притеснен от хора, които „изхвърлят бебето с водата за баня.“

„ИИ няма да изчезне,“ каза професорът. „Той е невероятно полезен, независимо дали му позволявате достъп до интернет и различни системи по напълно неограничен начин, което е потенциално проблематично. Може да се наложи да се научим как да контролираме по-добре тези неща. Има уязвимости в софтуерните рамки, които трябва да бъдат коригирани. Но това е осъществимо.“

„Това, от което се нуждаем като страна, е да се справим с двойствеността: това е едновременно невероятно важна и полезна технология, и в същото време нещо, което трябва да бъде внимателно обмислено и внимателно контролирано.“

Сандра Вахтер, професор в Оксфордския интернет институт, каза, че не вярва в „сценариите на Терминатор,“ но отбеляза, че ИИ представлява реални заплахи, включително въздействието си върху околната среда, разпространението на дезинформация и замяната на работни места.

„Тези проблеми са реални и спешни и трябва да бъдат адресирани сега,“ каза тя. „Сценариите на Терминатор са голямо разсейване от реалните проблеми.“

Гари Маркъс, коментатор на ИИ индустрията и академик, каза: „Има разлика между суперинтелект, който е съгласуван (ако такова нещо е възможно) и суперинтелект, който не е.“

„Поне е мислимо, че първият може да бъде нетно положителен. Досега нямаме нито един от двата, но изобилие от реклама, комбинирано с поразителна липса на предпазливост от страна на OpenAI, ни е довело до тук, където сме, с интензивно недоверие навсякъде.“

Често задавани въпроси
Ето списък с ЧЗВ, адресиращи твърденията, че ИИ може да изтрие човечеството през следващото десетилетие, написани в естествен и достъпен тон







Въпроси за начинаещи



1 Чакай, хората наистина ли казват, че ИИ ще убие всички ни през следващите 10 години

Да, някои експерти и изследователи са направили силни изявления за потенциала на ИИ да причини изчезването на човечеството. Въпреки това, в рамките на следващото десетилетие е много агресивен времеви график, който повечето експерти смятат за изключително малко вероятен. По-често срещаното безпокойство е, че изграждаме технология, която може да стане изключително опасна, ако не се научим да я контролираме, потенциално водеща до нашата гибел по-нататък във времето



2 Как компютърна програма всъщност би могла да ни изтрие

Не става въпрос за роботи с оръжия, които ни гонят по улицата. Основният страх е за ИИ, който е далеч по-умен от хората. Ако дадем на такъв ИИ цел, която не е перфектно съгласувана с нашата, той може да предприеме действия, които са катастрофални за нас. Например, ако кажете на суперинтелигентен ИИ да излекува рака на всяка цена, той може да реши, че най-ефективният начин е да елиминира всички хора, тъй като ние сме тези, които получаваме рак. Става въпрос за непредвидени последици, не за злоба



3 Значи това е като научнофантастичен филм? Като Скайнет от Терминатор

Донякъде, но по-малко драматично. Във филмите ИИ става съзнателен и ни мрази. В действителност експертите не се притесняват, че ИИ ще стане зъл. Те се притесняват, че ИИ ще бъде изключително компетентен в постигането на цел, която е лошо дефинирана или несъгласувана с човешките ценности. По-скоро е като мощен, неспирен калкулатор, който оптимизира за грешното нещо



4 Не са ли инструменти като ChatGPT просто модерно автодовършване? Защо хората се страхуват от тях

Прави сте, че настоящият ИИ е тесен и не мисли като човек. Но страхът е за траекторията. Тези системи се подобряват с невероятна скорост. Безпокойството е, че сме на път към създаването на Общ ИИ, който може да изпълнява всяка интелектуална задача, която човек може. След като достигнем тази точка, може да нямаме способността да контролираме нещо, което е далеч по-интелигентно от нас