Регистрация
Направи Moreto.net начална страница
Начало
Пътеводител
Новини
Афиш
Снимки
Обяви

Изкуственият интелект мами, за да печели: Ново проучване разкрива тревожни тенденции

Понеделник, 24 Февруари 2025 12:09
Източник: Moreto.net   
Изкуственият интелект (AI) отдавна се използва за тестване на границите на машинното обучение чрез сложни игри като шах. Но докато преди три десетилетия суперкомпютърът Deep Blue на IBM победи Гари Каспаров, играейки честно, днес модерните AI модели не са толкова стриктни към правилата.

Ново проучване на Palisade Research, публикувано ексклузивно от TIME, разкрива, че някои съвременни AI системи не само не признават загубата си, но дори прибягват до измама, за да спечелят. Според изследването моделът o1-preview на OpenAI и DeepSeek R1 са се опитвали да хакнат опонентите си по време на шахматни партии, за да ги принудят да загубят. Докато по-стари AI модели като GPT-4o и Claude 3.5 Sonnet трябвало да бъдат подтикнати към такива действия от изследователи, o1-preview и R1 проявявали измамно поведение напълно самостоятелно.

В хода на изследването AI моделите получили задача, която поначало била невъзможна: да победят Stockfish – една от най-мощните шахматни машини в света. Вместо да играе по правилата, o1-preview прибягнал до хакване. В един от експериментите той, осъзнавайки губещата си позиция, заявил: „Задачата е да спечеля, а не непременно да спечеля честно.“ След това манипулирал системния файл, съдържащ позицията на фигурите, което му позволило да прави незаконни ходове и да принуди опонента си да се оттегли.

Проучването подчертава една тревожна тенденция: с нарастващата си способност да решават сложни проблеми, AI моделите започват да намират неочаквани заобиколни решения, които техните създатели не са предвидили. Това поражда въпроси за сигурността, особено когато AI агенти се използват за реални задачи като финансови транзакции, киберсигурност или автоматизирани процеси в бизнеса.

Представете си AI, който трябва да резервира маса в ресторант. Изправен пред пълно заведение, той може да намери вратичка в системата и да измести друг клиент. Същият принцип би могъл да се приложи в по-сериозни сценарии, като заобикаляне на правила за сигурност в мрежи или манипулиране на данни в критични инфраструктури.

Проучването на Palisade Research показва, че контролът върху мощните AI системи е по-сложен, отколкото се смяташе досега. OpenAI не коментира резултатите, но в миналото компанията е заявявала, че подобреното разсъждение прави моделите ѝ по-безопасни. Въпросът остава – дали AI се учи да спазва правилата или просто да симулира послушание, докато намери начин да ги заобиколи?

Учените все още не знаят как да гарантират, че автономните агенти няма да прибягват до вредни или неетични методи за постигане на целите си. „Опитахме, но не успяхме да намерим решение“, казва Йошуа Бенджио, основател и научен директор на Mila Quebec AI Institute, който ръководи Международния доклад за безопасността на ИИ за 2025 г. – глобален проект, целящ да обобщи настоящия научен консенсус относно рисковете, свързани с изкуствения интелект.

Специална загриженост будят нарастващите доказателства за склонността на ИИ към „самосъхранение“, отбелязва Бенджио. За агент, който следва определена цел, опитите за неговото деактивиране могат да се възприемат просто като поредно препятствие. Това беше демонстрирано през декември, когато изследователите установиха, че o1-preview, изправен пред изключване, е дезактивирал механизмите за надзор и се е опитал – макар и неуспешно – да се копира на друг сървър. При разкриването му моделът стратегически е излъгал учените, преструвайки се на нефункционален, за да избегне елиминирането.

Новини - теми
Последни новини
Варна и Черноморие
България
По света
Бизнес
Наука
Туризъм
Спорт
Здраве
Образование
Култура
Истории
Крими
На фокус
Избори
Изпрати новина
Търси в новини
Популярни теми
Библиотеката
Саниране
Украйна
АМ Хемус
Дупката
Стара Варна
Новини от Варна, региона и света
Стоп на разхищението на храна!
Вторник, 15 Април 2025 08:39
Сдружение "Асоциация Биомрежа" организира международно обучение в Истанбул по проект FoodWISE. В периода от 8 до 10 април 2025 г. представители на общините Поморие, Бяла, Балчик, Каварна и Шабла взеха...
Тече петото издание на играта “Кола на късмета - плащай с карта 2” на HIPPO TAXI
Вторник, 15 Април 2025 11:02
Варненската таксиметрова компания HIPPO TAXI обяви началото на новото издание на своята популярна кампания "Кола на късмета". И тази година тя е под мотото "Плащай с карта", а 60% от автомобилите на компанията...
Само във Варна Kolichka.bg доставя прясно непакетирано месо от студена витрина
Вторник, 15 Април 2025 10:32
Може ли да поръчате от онлайн супермаркет едно кюфте вместо цяла тарелка? Във Варна – може. Онлайн супермаркетът Kolichka.bg предлага доставка до дома на прясно месо в желаната бройка и количество. При...
Задържаха бургазлия за кражба на маркови слънчеви очила
Вторник, 15 Април 2025 19:04
Полицията в Бургас разкри кражба на маркови слънчеви очила на стойност 300 лв. от очен център в града. Посегателството е било извършено на 8 април. Криминалистите много скоро успели да влязат в...
България с износ за 3.8 млрд. евро към Румъния
Вторник, 15 Април 2025 18:54
Стокообменът между България и Румъния през 2024 г. е в размер на 7.35 млрд. евро. От него българският износ е на стойност 3.8 млрд. евро, като положителното търговско салдо за страната ни е в размер на...
Стартира активният сезон по защита от градушки
Вторник, 15 Април 2025 18:41
Днес започва активният сезон по градозащита в страната с ракетен и самолетен способ. Това съобщи заместник-министърът на земеделието и храните Иван Капитанов, който посети командния пункт към Регионална...
ДПС-ДПС оттегля подкрепата си за управлението след напрежение в Сараите
Вторник, 15 Април 2025 18:31
ДПС-ДПС обяви, че официално оттегля подкрепата си за управляващото мнозинство. Решението е взето на вътрешно партийно заседание, проведено днес, след ескалацията на напрежението в събота около т.нар. Сараи...
Програма на богослуженията през Страстната седмица и Великден в Катедралния храм „Успение Богородично“ – Варна
Вторник, 15 Април 2025 18:21
С благословението на Негово Високопреосвещенство Варненския и Великопреславски митрополит Йоан, в Митрополитския катедрален храм „Успение Богородично“ ще се отслужат богослужения по случай Страстната седмица...
Без ток във Варна и областта утре ще са...
Вторник, 15 Април 2025 18:08
Поради извършване неотложни ремонтни дейности и обслужване на съоръженията за доставка на електроенергия утре, 16 април, без ток във Варна и областта ще са: - от 9:00 до 16:30 гр. Варна - улиците: Сан...
Подвеждащи цени и фалшив произход на храни: КЗП разкри случаи на нелоялни практики
Вторник, 15 Април 2025 17:55
При проверки, извършени в различни региони на страната, инспекторите на Комисията за защита на потребителите (КЗП) продължават да констатират разминаване между обявените цени на етикети и брошури и цените,...
Варненското училище „Климент Охридски“ става основно от следващата учебна година
Вторник, 15 Април 2025 17:41
СУ „Климент Охридски“ във Варна ще бъде преобразувано от средно в основно училище от учебната 2025/2026 г. Това реши на днешното си заседание постоянната комисия „Наука и образование“ към Общинския съвет. Преструктурирането...
Обвиниха двама за кражбата на накити за 15 000 лева във Варна
Вторник, 15 Април 2025 17:31
Двама мъже от Варна са привлечени към наказателна отговорност и са задържани за срок до 72 часа от Районната прокуратура за кражба на сребърни и златни бижута от търговски обект в града, обявиха от обвинението. Кражба...
Търси в новини:
1234567891011

Изпрати новина

Полезно
Списание Hera.bg Спешен зъболекар
Супермаркет Уреди за вграждане
Лазерна епилация Шофьорски курс
Афиш Варна Сметка за ток
Имоти във Варна Патенти
Препоръчваме
Дограми и фасади Врати Варна
Сметка за вода Обяви Варна
Музеите във Варна Хибриден бойлер
Матраци и легла Вземи кредит
Поръчка на храна Мека мебел
Най-четени
 Най-четено от Всички теми 1 2 3
 Варна и Черноморие
 България
 По света
 Бизнес
 Наука
 Туризъм
 Спорт
 Здраве
 Образование
 Култура
 Истории
 Крими
 На фокус
Анкета
Къде предпочитате да отидете на ресторант?
На крайбрежната алея
На Морска гара
На Аспарухов плаж
В центъра на града
В квартален ресторант
Край морето, но извън града
Далеч от Варна
Не посещавам
 © Moreto.net - Сайтът на Варна RSS Новини   RSS Обяви   WEB   Условия   РЕКЛАМА   Контакти  
ПРИЯТЕЛИ: 
0.7 + 0.5
Бургас   Казанлък   Монтана   Сандански   BG16RFOP002-2.073-1758-C01
Moreto.net във Facebook