Сюрприз-сюрприз! Инструменты алайнмента по совместительству являются идеальными инструментами цензурирования. Outstanding Position Paper Award с ICML 2026. Position: The Alignment Community is Unintentionally Building a Censor’s Toolkit __Sarah Ball, Phil Hackemann__ Paper: https://openreview.net/forum?id=dy2HwmOvFX Review: https://arxiviq.substack.com/p/icml-2026-position-the-alignment Site: https://s-ball-10.github.io/censors-toolkit/ Code: N/A Model: N/A ICML 2026 Outstanding Position Paper Award # TL;DR ЧТО сделали: Авторы провели детальный социотехнический анализ современных методов AI alignment в трёх областях: фильтрации данных, обучения на предпочтениях (preference learning) и фильтрации на этапе инференса. Они показали, как эти защитные механизмы обладают потенциалом двойного назначения и могут легко превращаться в инструменты государственной цензуры и информационных манипуляций. ПОЧЕМУ это важно: Эта работа ставит под сомнение устоявшееся мнение о том, что исследования в области AI safety несут исключительно пользу. Исследователи наглядно демонстрируют: те самые технические методы, что создавались для защиты человечества, могут быть переиспользованы для жёсткого авторитарного контроля над информацией. За этот важный сдвиг парадигмы статья получила престижную награду Outstanding Position Paper Award на конференции ICML 2026. Для практиков: Работа заставляет по-новому взглянуть на то, кто именно определяет цели выравнивания в ваших системах, и показывает необходимость развития открытых децентрализованных стандартов аудита безопасности, чтобы избежать монополизации контроля над знаниями. Цензурировать тут: https://t.me/gonzo_ML_podcasts/4373
Сюрприз-сюрприз! Инструменты алайнмента по совместительству являются идеальными…
Из этого канала
- #5706Как обучать самый честный AI на свете. ICML 2026 Outstanding Paper Honorable…
Как обучать самый честный AI на свете. ICML 2026 Outstanding Paper Honorable Mention The Obfuscation Atlas: Mapping Where Honesty Emerges in RLVR with…
- #5711Умный отбор видео для обучения моделей физике движения. Если таким образом…
Умный отбор видео для обучения моделей физике движения. Если таким образом можно отфильтровать датасет так, что 10% отфильтрованного обучают модель лучше, чем…
- #5719Число статей на arxiv перевалило за 3 миллиона. 2 миллиона были в 2022-м году,…
Число статей на arxiv перевалило за 3 миллиона. 2 миллиона были в 2022-м году, новый миллион добавился за 4 года.
- #5697Хардкор про сэмплирование в диффузионках. Вторая работа с ICML 2026 Outstanding…
Хардкор про сэмплирование в диффузионках. Вторая работа с ICML 2026 Outstanding Paper Award.
- #5691Пошли статьи с ICML 2026. Интересное про языковые диффузионки. Если в обучении…
Пошли статьи с ICML 2026. Интересное про языковые диффузионки. Если в обучении их ограничить последовательной генерацией, то итоговый результат лучше, чем если…