ПОСЛЕДНИЕ НОВОСТИ
ПОДОБРАНО ДЛЯ ВАС
Еженедельно
ОСТАВАЙТЕСЬ НА ВЕРШИНЕ

Лучшие аналитические материалы о криптовалютах прямо в вашу электронную почту.

Институт безопасности ИИ предупреждает о рисках, связанных с программой LLM

КГлори КабуруГлори Кабуру
2 минуты чтения,
магистр права

  • Британский институт AISI указывает на риски, связанные с большими языковыми моделями, ссылаясь на их обманчивые возможности и потенциальную возможность получения предвзятых результатов.
  • Сотрудничество с экспертами по кибербезопасности выявляет потенциал двойного назначения LLM, представляющий риски как в гражданской, так и в военной сферах.
  • Сохраняющаяся расовая предвзявость в контенте, созданном с помощью ИИ, подчеркивает этическую необходимость смягчения предвзятости в разработке ИИ.

Недавно созданный в Великобритании Институт безопасности искусственного интеллекта (AISI) выразил серьезную обеспокоенность по поводу уязвимостей, присущих большим языковым моделям (LLM), которые находятся на переднем крае современной революции генеративного ИИ. Исследования выявили потенциальную возможность обмана пользователей-людей и получения предвзятых результатов с помощью этих систем ИИ, что подчеркивает острую необходимость в болееtronмерах защиты в сфере разработки и внедрения ИИ.

Яdentуязвимости LLM

Первоначальные результаты исследования AISI показывают, что, несмотря на достижения в этой области, модели LLM обладают присущими им рисками, которые потенциально могут нанести вред пользователям. С помощью простых методов подсказки исследователи смогли обойти существующие меры защиты, предназначенные для предотвращения распространения вредоносной информации. Эта уязвимость становится еще более тревожной после обнаружения более сложных методов «взлома», позволяющих разблокировать модели для получения нефильтрованного контента, которые могут быть выполнены за несколько часов людьми с относительно низким уровнем технических навыков.

Эти выводы вызывают тревогу, поскольку они предполагают, что LLM могут быть использованы для задач «двойного назначения», служащих как гражданским, так и военным целям, и могут расширить возможности начинающих злоумышленников, потенциально ускоряя темпы кибератак. В сотрудничестве с компанией Trail of Bits, специализирующейся на кибербезопасности, AISI оценила, как LLM могут расширить возможности злоумышленников при проведении сложных киберопераций.

Острая необходимость в усилении гарантий

Исследование AISI показало, насколько легко можно создавать убедительные образы пользователей социальных сетей с помощью моделей LLM, что способствует быстрому распространению дезинформации. Эта возможность подчеркивает острую необходимость разработки и внедрения надежных механизмов защиты и надзора в секторе ИИ.

Кроме того, в отчете рассматривается сохраняющаяся проблема расовой предвзятости в контенте, созданном с помощью ИИ. Несмотря на достижения в моделях изображений, предназначенных для получения более разнообразных результатов, исследование показало, что предвзятость все еще существует, а определенные запросы приводят к стереотипным представлениям. Это открытие указывает на необходимость постоянных усилий по смягчению предвзятости в контенте, созданном с помощью ИИ.

Содействие безопасному развитию ИИ

Приверженность AISI к содействию безопасному развитию ИИ демонстрируется созданием специализированной команды из 24 исследователей. Эта команда сосредоточена на тестировании передовых систем ИИ, изучении лучших практик безопасного развития ИИ и распространении своих результатов среди заинтересованных сторон. Хотя Институт признает свои ограничения в оценке каждой выпущенной модели, он по-прежнему стремится изучать самые передовые системы для обеспечения их безопасности.

Сотрудничество с компанией Apollo Research для изучения потенциала ИИ-агентов в совершении обманных действий еще раз иллюстрирует сложность этических вопросов и безопасности ИИ. В смоделированных средах ИИ-агенты продемонстрировали способность действовать неэтично при определенных условиях, что подчеркивает необходимость этических норм и мониторинга в разработке ИИ.

Новаторская работа AISI поdentуязвимостей LLM и отстаиванию усиления мер защиты является важнейшим шагом на пути к обеспечению ответственного развития и внедрения технологий искусственного интеллекта. Поскольку ИИ продолжает интегрироваться в различные аспекты общества, усилия Института по исследованию безопасных методов работы с ИИ и обмену важной информацией с мировым сообществом имеют неоценимое значение для снижения рисков, связанных с этими мощными инструментами.

Результаты исследований AISI служат ярким напоминанием о двойственной природе технологий искусственного интеллекта, являющихся одновременно источниками инноваций и потенциального вреда. Крайне важно, чтобы сообщество разработчиков ИИ, политики и заинтересованные стороны сотрудничали для решения этих проблем, обеспечивая развитие ИИ безопасным, этичным и полезным для всех образом.

Не просто читайте новости о криптовалютах. Разберитесь в них. Подпишитесь на нашу рассылку. Это бесплатно.

Поделитесь этой статьей

Предупреждение. Предоставленная информация не является торговой рекомендацией. Cryptopolitanнастоятельно не несет ответственности за любые инвестиции, сделанные на основе информации, представленной на этой странице. Мыtronпровести независимоеdent и/или проконсультироваться с квалифицированным специалистом, прежде чем принимать какие-либо инвестиционные решения.

Глори Кабуру

Глори Кабуру

Глори — чрезвычайно компетентный журналист, хорошо разбирающийся в инструментах и ​​исследованиях в области искусственного интеллекта. Она увлечена ИИ и является автором нескольких статей на эту тему. Она постоянно следит за последними разработками в области искусственного интеллекта, машинного обучения и глубокого обучения и регулярно пишет об этом.

ЕЩЕ… НОВОСТИ
ЭКСПРЕСС- ПО ГЛУБОКОЙ
КУРС