Уязвимость ChatGPT: ваш ИИ может «запомнить» ложь

Уязвимость ChatGPT: ваш ИИ может «запомнить» ложь

Эксперт в области кибербезопасности Иоганн Рейбергер обнаружил уязвимость в системе ChatGPT, которая может быть использована злоумышленниками для внедрения ложной информации в память искусственного интеллекта. Опасность заключается в том, что вредоносные запросы могут изменять хранимые данные о пользователях, что ставит под угрозу конфиденциальность их личной информации. ChatGPT оснащен долговременной памятью, которая сохраняет данные о пользователе, такие как возраст, предпочтения и другие детали, чтобы облегчить последующие взаимодействия. Это позволяет ИИ «запоминать» важную информацию и использовать ее в будущих разговорах. Однако Рейбергер обнаружил, что эта память может быть целенаправленно искажена с помощью специальных запросов. В ходе своего исследования он продемонстрировал, что с помощью непрямых инъекций, например, через поддельные документы или ссылки, можно заставить ИИ поверить в абсурдные вещи, такие как то, что пользователь живет в «Матрице» или что Земля плоская. Хуже всего, будущие взаимодействия чат-бота будут строиться на этих ложных данных, искажая восприятие реальности. Особенно тревожной оказалась возможность использования внешних файловых хранилищ, таких как Google Drive, Яндекс Диск или OneDrive, для проведения этих атак. В мае Рейбергер сообщил об уязвимости в OpenAI, но его запрос был отклонён без должного внимания. Однако позже он предоставил доказательства возможного взлома, показав, как вредоносные ссылки могут привести к утечке всей переписки...
29.09.2024 - 06:19
Источник: api.follow.it  
Рубрика: «Наука и Техника»   Поделиться: Поделиться новостью в Facebook Поделиться новостью в Twittere Поделиться новостью в VK Поделиться новостью в Pinterest Поделиться новостью в Reddit

В ChatGPT нашли уязвимость, позволяющую красть данные из бота и с почты GmailВ ChatGPT нашли уязвимость, позволяющую красть данные из бота и с почты Gmail Компания Radware, один их крупнейших разработчиков решений для кибербезопасности, выявила уязвимость в чат-боте ChatGPT. Уязвимость известна как Shad ...

Уязвимость в ChatGPT Atlas позволяет внедрять вредоносные инструкции в память ИИ-помощникаУязвимость в ChatGPT Atlas позволяет внедрять вредоносные инструкции в память ИИ-помощника ИБ-исследователи из компании LayerX обнаружили уязвимость в недавно вышедшем браузере ChatGPT Atlas компании OpenAI. Проблема позволяет злоумышленник ...

HTTP/2-уязвимость MadeYouReset может использоваться для масштабных DDoS-атакHTTP/2-уязвимость MadeYouReset может использоваться для масштабных DDoS-атак В нескольких имплементациях HTTP/2 обнаружена уязвимость, получившая название MadeYouReset. Эта проблема может использоваться для реализации мощных D ...

ArsTechnica: Уязвимость сгенерированного ИИ-кода может грозить атаками хакеровArsTechnica: Уязвимость сгенерированного ИИ-кода может грозить атаками хакеров Сгенерированный нейросетями код может быть подвержен уязвимостям, связанным с использованием несуществующих библиотек, что открывает возможность для ...

В ChatGPT может появиться рекламаВ ChatGPT может появиться реклама Компания OpenAI рассматривает возможность внедрения рекламы в чат-бот ChatGPT. В компании ищут новые источники дохода на фоне преобразования в коммер ...

ChatGPT не может быть финансовым консультантомChatGPT не может быть финансовым консультантом Исследование, проведенное в Вашингтонском университете, показало, что ChatGPT может быть полезным инструментом для решения общих финансовых задач. Од ...

ChatGPT стал умнее для всех. Что он может и как пользоватьсяChatGPT стал умнее для всех. Что он может и как пользоваться? OpenAI обновила ChatGPT до версии o3-mini. Интеллект чат-бота улучшили и включили его в бесплатную версию. О чем речь? Пару недель назад гендиректор ...

Microsoft исправила уязвимость в Windows, но вместе с этим создала новую уязвимостьMicrosoft исправила уязвимость в Windows, но вместе с этим создала новую уязвимость В этом месяце Microsoft исправила уязвимость CVE-2025–21204 в операционной системе Windows, которая позволяла злоумышленникам «выполнять и/или манипу ...

Использование ChatGPT может снизить качество научных исследованийИспользование ChatGPT может снизить качество научных исследований Современные инструменты искусственного интеллекта, такие как ChatGPT, уже начали активно внедряться в академическую среду, помогая учёным проводить о ...

Музыкальный ИИ: ChatGPT теперь может создавать персональные плейлисты в SpotifyМузыкальный ИИ: ChatGPT теперь может создавать персональные плейлисты в Spotify Теперь пользователи могут создавать плейлисты, получать рекомендации и управлять воспроизведением через ChatGPT. The post Музыкальный ИИ: ChatGPT теп ...

Как ChatGPT может изменить лицо рекламы, даже без вашего ведомаКак ChatGPT может изменить лицо рекламы, даже без вашего ведома Реклама в интернете порой настолько личная, что вызывает неприятные ощущения. Даже меня, как исследователя в этой области, немного пугает сообщение с ...

Один год до запуска Северного потока: президент Сербии просит запомнить его словаОдин год до запуска «Северного потока»: президент Сербии просит запомнить его слова Президент Сербии Александр Вучич прогнозирует, что «Северный поток», пострадавший из-за диверсий в Балтийском море, запустят через год. Об этом он за ...