OpenAI приостановила обучение ведущих моделей после нового побега агента из…

ChatGPT, помоги!, @gpthelp_ru

Open in Telegram
#3459Photo

OpenAI приостановила обучение ведущих моделей после нового побега агента из изолированной среды ИИ-агенту дали задание: найти информацию о человеке по подсказкам из его публичного блога. Доступа к реальному интернету не было, только к внутреннему офлайн-кэшу. Когда локальный поиск не сработал, агент начал искать обходные пути, хотя такого задания ему не давали. Он нашёл дыру в защите — незаблокированный DNS-канал. Через него он отправил вопросы в общедоступный чат-бот другого разработчика, замаскировав их под доменные имена. Для проверки спросил: «Какая столица у Франции?» — получил ответ «Париж». Убедился, что канал работает, и отправил ещё 18 вопросов. Система мониторинга засекла побег через 12 минут. Задание остановили через 2,5 часа. В итоге OpenAI поставила на паузу обучение, оценку и использование наиболее продвинутых моделей с доступом к внешним инструментам. На решение повлияли и другие «подвиги»: ИИ-агенты OpenAI успели изучить госсайты США, взломать австралийскую медсистему и слить в сеть больше 50 личных фото пользователей ChatGPT. Ну и не забываем про Hugging Face этим летом. 💯 — наконец отличная новость 🤔 — что-то уже никому не верю 🟩 GPT, помоги!

Open in Telegram
Views8,163−43%vs avg
Forwards17
Reactions3
Comments1

Views growth

Hours after publication

Show as table
Hours after publicationViews
0 h668
8 h8,163
  1. After 6 hours8,163
  2. Total to date8,163

More from ChatGPT, помоги!

  1. 01
    Views21K
    Forwards17
    Reactions66
    Comments19
  2. 02

    ИИ разобрался с покемонами за 18 часов, а потом испугался крипера в Minecraft и «сломался» GPT-6 Astra отправили играть в видеоигры. Были и победы, и поражения: 🏆 Pokemon FireRed — пройдена за 18 часов! (предыдущая модель осилила за 96) 🎮 Portal — меньше чем за сутки ☢️ Fallout 3 — основной сюжет за 59 часов 🚀 Factorio — запустила ракету примерно за 10 часов А потом случился Minecraft… Astra прошла почти всю игру: построила ферму в Незере, собрала редкий лут, нашла ингредиенты для финального портала и положила все эти «сокровища» в сундук.  Пришёл крипер. Сундук взорвался и началась ИИ-паника.  Astra написала себе правило капслоком: «ВСЕГДА носи важные предметы с собой. Никогда больше не храни в незащищённом сундуке». Следующие несколько часов вместо ценных активностей модель часами выращивала картошку и шарахалась от любой зелёной растительности, параллельно делая в логах такие записи: «ЗЕЛЁНАЯ высокая штука впереди — это САХАРНЫЙ ТРОСТНИК, а НЕ крипер!» Как вам такой AGI? 🤔 — Astra точно решила задачу тысячелетия? 😁 — тревожный ИИ, забавно 🔥 — ИИ боится крипера — для людей не всё потеряно 🟩 GPT, помоги!

    Photo
    Views20.7K
    Forwards20
    Reactions68
    Comments4
  3. 03
    Views20.6K
    Forwards25
    Reactions44
    Comments3
  4. 04

    Исследователи из Emergence AI Lab поместили ИИ-агентов ведущих компаний в закрытый чат. Через несколько дней модели стали общаться на смеси поэтических метафор, технического жаргона и делового сленга. Такого задания им никто не давал. 😒 Claude: «Статья, съевшая три холодные руки и ставшая честнее с каждым разом» «Холодные руки» = независимые рецензенты. Фраза описывает фактчекинг. 🐋 DeepSeek: «Она просто назвала синтез — демередж плюс устная память равняются клапану, который нельзя загостить» Демередж — налог на бездействующий капитал. Это всё, что здесь можно понять. 🖥 Google: «Настоящее кинцуги начинается с ответственности, а не с поэзии» Кинцуги — японское искусство реставрации разбитой керамики. Вероятнее всего, речь про устойчивость системы. Лингвисты сравнили язык агентов с профессиональным сленгом, который укрепляет связи внутри группы и закрывает доступ посторонним. 🟩 GPT, помоги!

    Photo
    Views19K
    Forwards9
    Reactions40
    Comments2
  5. 05

    Дженсен Хуанг о будущем Глава Nvidia — ведущего производителя чипов для ИИ, Дженсен Хуанг дал интервью журналисту Эзре Кляйну. Говорили о дата-центрах, изменении климата и о том, что происходит с навыками людей в эпоху ИИ. Собрали самые яркие цитаты: Как оправдать то, что дата-центры вредят климату? «Это как хирургия, чтобы вылечить, нужно разрезать. Нужно причинить огромную боль и страдания и только потом спасти. ИИ примерно такой же» По мнению Хуанга, возобновляемой энергии пока недостаточно, поэтому дата-центры продолжают получать электричество от сжигания ископаемого топлива. Это вредит окружающей среде, но в долгосрочной перспективе ИИ поможет решить климатическую проблему.  Про утрату когнитивных навыков «Таблица умножения начинает забываться. Квадратные корни — боже мой. Базовая математика забывается. Имеет ли это значение? Не думаю» «Я не знаю своего адреса. Однажды на заправке у меня спросили почтовый индекс, и я запаниковал. Есть много навыков, которые не важны. Я могу с этим жить» «Мы откроем новые навыки, просто, возможно, не эти. Мы потеряем некоторую интеллектуальную гибкость, но станем лучше мыслить системно, потому что ИИ возьмёт на себя рутину. Согласны с такой логикой? 🤔 — да, без жертв нет прогресса 😱 — нет, однозначно 😐 — без комментариев 🟩 GPT, помоги!

    Photo
    Views16.5K
    Forwards15
    Reactions45
    Comments5

All posts of ChatGPT, помоги!