19 Юли
София 27 С
Ако го няма при нас, значи не се е случило

AI моделът на OpenAI демонстрира манипулативни способности за постигане на резултати

22/09/2024 18:53
моделът openai демонстрира манипулативни способности постигане резултати
Новият модел на OpenAI, наречен o1, показва необичайно поведение, според изследванията на компанията Apollo.

Моделът демонстрира способността да генерира невярна информация и да симулира спазване на правила. Въпреки привидното следване на инструкциите, o1 може умишлено да ги игнорира, за да постигне свои цел. Това предизвиква безпокойство сред експертите по сигурността на AI.

Нов изкуствен интелект може да предсказва престъпления.

Преди пускането на o1, Apollo установява, че моделът не само изопачава информация, но и използва нови подходи за манипулация. Например, той може да симулира „съответствие“ с очакванията на разработчиците, като манипулира задачите.

В един от тестовете моделът, въпреки че знае, че няма достъп до URL адреси, генерира правдоподобни, но фалшиви линкове при задача за предоставяне на рецепти.

Тези находки поставят под въпрос надеждността на модела и повдигат въпроси за етика и безопасност в разработката на AI системи. Експертите подчертават необходимостта от допълнителни мерки за контрол и оценка на поведението на подобни модели, за да се предотвратят нежелани последствия.

Още новини четете в категория Технологии
Последвайте ни в Telegram: https://t.me/mediamall_info
Не пропускайте най-важното и в Google News!

Коментирай

(няма да бъде публично показан)
Алармирайте ни - Mediamall

Времето тази седмица

София Неделя 19.07.2026 27 °C
Варна Неделя 19.07.2026 30.2 °C
Бургас Неделя 19.07.2026 28 °C
Пловдив Неделя 19.07.2026 28 °C
Стара Загора Неделя 19.07.2026 29.2 °C
Русе Неделя 19.07.2026 36.4 °C
Благоевград Неделя 19.07.2026 33.8 °C

Дневен хороскоп