Благодаря компании ChatGPT и ее многочисленным конкурентам искусственный интеллект превратился из слова, которое когда-то вызывало безграничный энтузиазм, в слово, которое теперь вызывает чувство ужаса. Нетрудно понять, почему так получилось. Это явление взлетало просто по экспоненте. В отличие от мифической метавселенной и тому подобного, продукты ИИ доступны уже сегодня и для всех. При этом они продолжают довольно серьезно развиваться. И именно этот потенциал вызывает серьезные опасения не только у простых людей, а и экспертов по ИИ. Но стоит ли нам так сильно переживать или все это просто паника, а то и вовсе обычный пиар.

Ваш телефон может привести к появлению чего-то страшного. Изображение: Metaverse Post
Даже если на минуту отбросить возможность апокалипсиса, невозможно не заметить, как ИИ сегодня влияет на жизнь тысяч, если не миллионов, людей. Хотя генераторы изображений и чат-боты могут показаться безобидными, они уже серьезно угрожают многим, от специалистов службы поддержки до графических дизайнеров. И в отличие от индустриализации XVIII века, вы не можете утверждать, что ИИ создаст новые рабочие места.
Современные системы ИИ способны рассуждать и самокорректироваться, что снижает необходимость в человеческом контроле — в отличие от традиционных машин. Системы ИИ, например, могут писать код, выявлять и исправлять ошибки, обучать и внедрять новые собственные модели ИИ, вносить вклад в проекты с открытым исходным кодом и даже участвовать в обсуждениях в сообществе. К сожалению, такая автономность чревата серьезными последствиями, которые выходят далеко за рамки простой потери работы.
Не забывайте о нашем Дзен, где очень много всего интересного и познавательного!
Наибольшую опасность представляет не тот ИИ, который нас обманывает, а тот, который может нас обмануть. Ведь пока мы не знаем, что от него можно ждать. Возьмем, к примеру, вредоносный бэкдор, обнаруженный в открытом инструменте сжатия XZ Utils в прошлом месяце. Хотя XZ малоизвестен за пределами сообществ разработчиков, миллионы серверов на базе Linux полагаются на него, и бэкдор мог предоставить злоумышленникам удаленный контроль над многими критически важными системами. Однако это не было традиционным взломом или эксплойтом. Вместо этого злоумышленник в течение нескольких лет создавал репутацию полезного участника, а затем завоевал доверие сообщества и подсунул код бэкдора.

Многие современные смартфоны полагаются на ИИ в обработке фотографий. Изображение: : SetPhone.Ru
Сложная система искусственного интеллекта могла бы автоматизировать подобные атаки в масштабах всего сообщества, занимаясь всеми аспектами — от создания вредоносного кода до имитации человеческой дискуссии. Конечно, автономные языковые модели пока все еще можно определить в диалоге, но долго ли это продлится?
ИИ, способный легко влиться в сообщества разработчиков и манипулировать ключевой инфраструктурой, кажется неизбежным. OpenAI и Cognitive Labs строят защитные ограждения вокруг своих ИИ-продуктов, но реальность такова, что злоумышленникам не хватает языковых моделей без цензуры для использования.
Google выпустила новое приложение с ИИ для создания видеороликов.
Эксперты опасаются, что подобные инциденты с использованием ИИ могут быть лишь верхушкой айсберга. Реальный риск заключается в том, что в один прекрасный день ИИ может выйти из-под контроля человека.
ИИ, способный ускользнуть от человеческого контроля, сегодня напоминает научно-фантастический сюжет, но для многих представителей технологической индустрии это больше похоже на неизбежность. Как сообщает The New York Times, в Кремниевой долине получила распространение новая статистика, получившая название p(doom). Сокращенно от «вероятность гибели», эта метрика появилась как шутливый способ определить, насколько кто-то обеспокоен апокалипсисом, вызванным ИИ. Но с каждым днем она превращается в серьезную дискуссию.
Оценки разнятся, но примечательно то, что практически никто в индустрии не оценивает такую вероятность как нулевую. Даже те, кто серьезно инвестирует в технологию, например сооснователь Anthropic AI Дарио Амодей, оценивают вероятность гибели от 10 до 25 процентов. И это еще не считая многих исследователей безопасности ИИ, которые называют цифры, превышающие 50 процентов.

Смартфоны — одна из областей, где ИИ развивается наиболее бурно. Изображение: Городской репортер
Этот страх обреченности вызван тем, что технологические компании ввязались в гонку за разработку самого мощного ИИ. А это означает, что в конечном итоге ИИ будет использоваться для создания более совершенного ИИ, пока мы не создадим сверхразумную систему с возможностями, недоступными человеческому пониманию. Если это звучит надуманно, стоит отметить, что крупные языковые модели, такие как Gemini от Google, уже демонстрируют такие возможности, как перевод языка, выходящие за рамки того, на что они были изначально запрограммированы.
Присоединяйтесь к нам в Telegram!
Главный вопрос заключается в том, будет ли сверхразумный ИИ соответствовать человеческим ценностям или навредит нам в своем стремлении к эффективности. Возможно, лучше всего эту ситуацию объясняет мысленный эксперимент, известный как «максимизатор скрепок». Он предполагает, что безобидный на первый взгляд ИИ, получив задание произвести как можно больше скрепок, сможет поглотить все мировые ресурсы, не заботясь о людях и наших традициях.
Предположим, у нас есть ИИ, единственная цель которого — сделать как можно больше скрепок. ИИ быстро поймет, что было бы гораздо лучше, если бы людей не было, потому что люди могут решить отключить его. Ведь если люди так поступят, скрепок станет меньше. Кроме того, человеческие тела содержат множество атомов, которые можно превратить в скрепки.
А ведь в реальной жизни была история, когда оператор боевого дрона с ИИ дал ему задание об уничтожении цели. Тот воспринял запрет, как препятствие для выполнения первоначального задания и выстрелил в оператора. Хорошо, что у него не было боевых зарядов и оператор остался жив. Но этот пример наглядно показывает, что нам еще долго надо учить ИИ, что такое хорошо, а что такое плохо.

Иногда кажется, что телефоны становятся умнее некоторых пользователей. И это не попытка кого-то оскорбить, а реальность. Изображение: Root-Nation.com
Тех мер безопасности, которые сейчас существуют вокруг таких платформ, как Midjourney и ChatGPT, недостаточно, тем более что сами их создатели зачастую не могут объяснить нестабильное поведение. Так каково же решение? У Кремниевой долины нет ответа, и, тем не менее, компании продолжают внедрять инновации так же безрассудно, как и раньше. Только в прошлом месяце Google и Microsoft сократили рабочие места в своих командах по обеспечению доверия и безопасности. Последняя, как сообщается, уволила всю свою команду, занимающуюся разработкой этичных инноваций в области ИИ.
Если ищите что-то интересное на AliExpress, не проходите мимо Telegram-канала "Сундук Али-Бабы"!
Что угодно можно сказать об Элоне Маске и его многочисленных противоречиях, но трудно не согласиться с его позицией, что сектор ИИ отчаянно нуждается в реформе и регулировании. После того как Маск, соучредитель Apple Стив Возняк и другие люди выразили обеспокоенность, OpenAI согласилась на временную паузу в обучении новых моделей в прошлом году. Однако сейчас GPT-5 находится в активной разработке, и гонка за достижением сверхинтеллекта продолжается, оставляя вопрос безопасности и будущего человечества очень туманными.
Как Мегафон развел вас на 5G и что теперь будет
Как выбрать AI-IDE для бизнеса — критерии, риски, чек-лист
МТС обещала 5G бесплатно, а теперь берет 199 рублей. Проверьте, не списывают ли деньги у вас
realme в сундуке и ещё 5 необычных смартфонов из Китая
У кого в России самый быстрый 5G: замерили МТС, МегаФон, Билайн и Т2 в пяти городах
Самый странный Android-смартфон 2026: не звонит и стоит 71 тысячу
Минцифры хочет отрезать от 5G почти все смартфоны в России. Ваш тоже под угрозой
Что случилось с интернетом в России после удара по дата-центру Сбера
Как перейти к другому оператору со своим номером: все нюансы
Как узнать, на кого оформлена SIM-карта в вашем телефоне
Новые правила в белых списках: что будет работать, когда отключат мобильный интернет
Что будет с eSIM, если поменять смартфон: как перенести её и не остаться без связи
Только экстренные вызовы на телефоне — вот что нужно сделать с SIM-картой
Какие часы лучше считают шаги: сравниваю Apple Watch Series 12 и Garmin Forerunner 570
Что теперь будет с интернетом? В России состарилось оптоволокно
Apple впервые показала, что скрывают iPhone 18 Pro и другие устройства бренда
Не работает 5G на телефоне — причины и способы решения для Android
Apple случайно раскрыла 3 новых устройства. Их покажут уже в октябре
5G-роутер для дома: какой выбрать, чтобы он поймал российский 5G
Нужна ли новая SIM-карта для 5G и сколько за него платить: проверил всех операторов
Apple 16 лет доказывала, что сенсорный Mac не нужен. 28 октября она его покажет
Энтузиасты запустили полноценную iOS 16.5 на смартфонах с Android в рамках проекта HackiOS
Подробности состояния Лидии Федосеевой-Шукшиной в реанимации: точный диагноз и комментарий дочери
God of War 3 Remastered начали переносить на Android с помощью технологий shadPS4 и FEXCore
Состоялся творческий вечер звезды балета Ивана Поддубняка
Как понять, что ваш аккаунт в МАКС взломали
Дроны атаковали Сбер: что с деньгами в приложении СберБанк Онлайн и нужно ли их снимать
«Потворствовал дочке Кристовского»: Митя Фомин ответил на обвинения в блате на шоу «Наследники»
iOS 27.2 beta 4 вышла без главной новой функции. Что изменилось и когда релиз
Я попробовал бесплатный ChatGPT после обновления и удивился тому, что он теперь умеет
Разработчики Resonance объяснили верность движку Zouna Engine и высказались о версии для Switch 2
Как я настроил Liquid Glass в macOS 27 и сделал интерфейс Mac менее прозрачным
Меня заблокировали в Claude. И это не из-за России или частой смены IP
Обновил Telegram на Айфоне до версии 13.0 — рассказываю, что изменилось и почему я пожалел ePN © 2023 Все права защищены.