Регистрация
Направи Moreto.net начална страница
Начало
Пътеводител
Новини
Афиш
Снимки
Обяви

Изкуственият интелект мами, за да печели: Ново проучване разкрива тревожни тенденции

Понеделник, 24 Февруари 2025 12:09
Източник: Moreto.net   
Изкуственият интелект (AI) отдавна се използва за тестване на границите на машинното обучение чрез сложни игри като шах. Но докато преди три десетилетия суперкомпютърът Deep Blue на IBM победи Гари Каспаров, играейки честно, днес модерните AI модели не са толкова стриктни към правилата.

Ново проучване на Palisade Research, публикувано ексклузивно от TIME, разкрива, че някои съвременни AI системи не само не признават загубата си, но дори прибягват до измама, за да спечелят. Според изследването моделът o1-preview на OpenAI и DeepSeek R1 са се опитвали да хакнат опонентите си по време на шахматни партии, за да ги принудят да загубят. Докато по-стари AI модели като GPT-4o и Claude 3.5 Sonnet трябвало да бъдат подтикнати към такива действия от изследователи, o1-preview и R1 проявявали измамно поведение напълно самостоятелно.

В хода на изследването AI моделите получили задача, която поначало била невъзможна: да победят Stockfish – една от най-мощните шахматни машини в света. Вместо да играе по правилата, o1-preview прибягнал до хакване. В един от експериментите той, осъзнавайки губещата си позиция, заявил: „Задачата е да спечеля, а не непременно да спечеля честно.“ След това манипулирал системния файл, съдържащ позицията на фигурите, което му позволило да прави незаконни ходове и да принуди опонента си да се оттегли.

Проучването подчертава една тревожна тенденция: с нарастващата си способност да решават сложни проблеми, AI моделите започват да намират неочаквани заобиколни решения, които техните създатели не са предвидили. Това поражда въпроси за сигурността, особено когато AI агенти се използват за реални задачи като финансови транзакции, киберсигурност или автоматизирани процеси в бизнеса.

Представете си AI, който трябва да резервира маса в ресторант. Изправен пред пълно заведение, той може да намери вратичка в системата и да измести друг клиент. Същият принцип би могъл да се приложи в по-сериозни сценарии, като заобикаляне на правила за сигурност в мрежи или манипулиране на данни в критични инфраструктури.

Проучването на Palisade Research показва, че контролът върху мощните AI системи е по-сложен, отколкото се смяташе досега. OpenAI не коментира резултатите, но в миналото компанията е заявявала, че подобреното разсъждение прави моделите ѝ по-безопасни. Въпросът остава – дали AI се учи да спазва правилата или просто да симулира послушание, докато намери начин да ги заобиколи?

Учените все още не знаят как да гарантират, че автономните агенти няма да прибягват до вредни или неетични методи за постигане на целите си. „Опитахме, но не успяхме да намерим решение“, казва Йошуа Бенджио, основател и научен директор на Mila Quebec AI Institute, който ръководи Международния доклад за безопасността на ИИ за 2025 г. – глобален проект, целящ да обобщи настоящия научен консенсус относно рисковете, свързани с изкуствения интелект.

Специална загриженост будят нарастващите доказателства за склонността на ИИ към „самосъхранение“, отбелязва Бенджио. За агент, който следва определена цел, опитите за неговото деактивиране могат да се възприемат просто като поредно препятствие. Това беше демонстрирано през декември, когато изследователите установиха, че o1-preview, изправен пред изключване, е дезактивирал механизмите за надзор и се е опитал – макар и неуспешно – да се копира на друг сървър. При разкриването му моделът стратегически е излъгал учените, преструвайки се на нефункционален, за да избегне елиминирането.

Новини - теми
Последни новини
Варна и Черноморие
България
По света
Бизнес
Наука
Туризъм
Спорт
Здраве
Образование
Култура
Истории
Крими
На фокус
Избори
Изпрати новина
Търси в новини
Популярни теми
Библиотеката
Саниране
Украйна
АМ Хемус
Дупката
Стара Варна
Новини - Наука
Гледаме „Потоп“ на Гинтс Зилбалодис на София Филм Фест във Варна 2025
Четвъртък, 27 Февруари 2025 16:41
Готови ли сте за едно незабравимо анимационно приключение? „Потоп“ (Flow) – номинираният за „Оскар“ и носител на „Златен глобус“ филм, ще бъде част от програмата на София Филм Фест във Варна! В свят...
Безплатен вход за бургаските музеи на 3 март
Четвъртък, 27 Февруари 2025 15:03
На 3 март – националният празник на България, експозициите на Регионален исторически музей – Бургас ще работят с безплатен вход за своите посетители, от 10:00 до 16:00 часа, обявиха от морската община. В...
Президентът удостои с висши държавни отличия български учени
Четвъртък, 27 Февруари 2025 14:51
България може да се развива като модерна и просперираща държава само ако се отнасяме с уважение и признателност към хората на науката и прогреса. Това заяви държавният глава Румен Радев на церемония в...
Учебният музей във Варна с нова програма и модерно пространство
Четвъртък, 27 Февруари 2025 09:26
Музейно-образователният център на Регионален исторически музей-Варна, за повечето познат като „Учебният музей“, е с нов одобрен проект „Музеят – класна стая на бъдещето“, финансиран от Министерството на...
Започна набирането на кандидати от Варна за участие в Националния фолклорен конкурс
Четвъртък, 27 Февруари 2025 07:57
Започна набирането на кандидати от Варна за участие в 17-то издание на Националния фолклорен конкурс „Напеви от Северозапада“. Музикалното събитие ще се проведе на 26 и 27 април (събота и неделя), традиционно...
Започна приемът на номинации за награди „Варна“ в културата
Сряда, 26 Февруари 2025 13:29
Награда „Варна“ е израз на признателността на гражданите към културните дейци за техния принос към духовния облик на града и развитието на националната култура. Започна приемът на номинации за престижните...
Книга представя идеята за създаването на културен маршрут между Варна и българските столици
Сряда, 26 Февруари 2025 12:50
Днес в Регионална библиотека „Пенчо Славейков“ ще бъде представена новата книга на Лина Бор „Бъдеще през миналото или многолика България“. Лина Бор е псевдоним на Веселина Табакова. Книгата й представя...
"Музиката на Италия" за 8 март във Варна
Сряда, 26 Февруари 2025 12:14
На 8 март от 19:00 ч. сцената на Държавна опера Варна – Сцена Филиал, под режисурата на Сребрина Соколова, любителите ще се насладят на вдъхновяващо изпълнение на някои от най-популярните арии, ансамбли...
Обявиха спектаклите на сцената на ФКЦ през първата половина на март
Сряда, 26 Февруари 2025 09:26
Фестивалният и конгресен център във Варна обяви какви спектакли ще могат да гледат жителите на морската столица през първата половина на месец март. 1 март – зала 1 – 18:30 ч. - „МАЙЧИНА КЛЕТВА“ - Фолклорен...
Кукленият театър във Варна с две представления през уикенда
Сряда, 26 Февруари 2025 08:32
Спектакълът "На гости на Баба Марта" ще могат да гледат най-малките зрители на морската столица в кукления театър идния уикенд. Представлението, което ще бъде играно от 11 часа и в двата дни - 1 и 2...
Наградиха лауреатите в ученическия конкурс на художественото слово „Моята България“
Вторник, 25 Февруари 2025 18:48
Лауреатите в XXIV издание на Регионалния ученически конкурс за изпълнение на художествено слово „Моята България“ бяха отличени на официална церемония в Младежкия дом във Варна в присъствието на участници,...
Астероид носи името Перперикон
Вторник, 25 Февруари 2025 17:49
В базата данни в Центъра за малки планети в Харвард вече фигурира астероидът с българско име "Перперикон". Името е предложено от доц. Веселка Радева, ръководител на Планетариума във Висшето военноморско...
Търси в новини:
910111213141516171819

Изпрати новина

Полезно
Списание Hera.bg Спешен зъболекар
Супермаркет Уреди за вграждане
Лазерна епилация Шофьорски курс
Афиш Варна Сметка за ток
Имоти във Варна Патенти
Препоръчваме
Дограми и фасади Врати Варна
Сметка за вода Обяви Варна
Музеите във Варна Хибриден бойлер
Матраци и легла Вземи кредит
Поръчка на храна Мека мебел
Най-четени
 Всички теми
 Варна и Черноморие
 България
 По света
 Бизнес
 Най-четено от Наука 1 2 3
 Туризъм
 Спорт
 Здраве
 Образование
 Култура
 Истории
 Крими
 На фокус
Анкета
Къде предпочитате да отидете на ресторант?
На крайбрежната алея
На Морска гара
На Аспарухов плаж
В центъра на града
В квартален ресторант
Край морето, но извън града
Далеч от Варна
Не посещавам
 © Moreto.net - Сайтът на Варна RSS Новини   RSS Обяви   WEB   Условия   РЕКЛАМА   Контакти  
ПРИЯТЕЛИ: 
0.2 + 0.3
Бургас   Казанлък   Монтана   Сандански   BG16RFOP002-2.073-1758-C01
Moreto.net във Facebook