25 Октомври
София 9.6 С
Ако го няма при нас, значи не се е случило

AI моделът на OpenAI демонстрира манипулативни способности за постигане на резултати

22/09/2024 18:53 от Иван Боюков
моделът openai демонстрира манипулативни способности постигане резултати
Новият модел на OpenAI, наречен o1, показва необичайно поведение, според изследванията на компанията Apollo.

Моделът демонстрира способността да генерира невярна информация и да симулира спазване на правила. Въпреки привидното следване на инструкциите, o1 може умишлено да ги игнорира, за да постигне свои цел. Това предизвиква безпокойство сред експертите по сигурността на AI.

Нов изкуствен интелект може да предсказва престъпления.

Преди пускането на o1, Apollo установява, че моделът не само изопачава информация, но и използва нови подходи за манипулация. Например, той може да симулира „съответствие“ с очакванията на разработчиците, като манипулира задачите.

В един от тестовете моделът, въпреки че знае, че няма достъп до URL адреси, генерира правдоподобни, но фалшиви линкове при задача за предоставяне на рецепти.

Тези находки поставят под въпрос надеждността на модела и повдигат въпроси за етика и безопасност в разработката на AI системи. Експертите подчертават необходимостта от допълнителни мерки за контрол и оценка на поведението на подобни модели, за да се предотвратят нежелани последствия.

Още новини четете в категория Технологии
Последвайте ни в Telegram: https://t.me/mediamall_info
Не пропускайте най-важното и в Google News!

Коментирай

(няма да бъде публично показан)
Алармирайте ни - Mediamall

Времето тази седмица

София Неделя 25.10.2026 9.6 °C
Варна Неделя 25.10.2026 11.7 °C
Бургас Неделя 25.10.2026 12.1 °C
Пловдив Неделя 25.10.2026 12 °C
Стара Загора Неделя 25.10.2026 9.4 °C
Русе Неделя 25.10.2026 9.3 °C
Благоевград Неделя 25.10.2026 9 °C

Дневен хороскоп