Skip to content

Безопасность·7 мин чтения

LiteLLM 1.107.0 два часа был отравлен: как защитить AI-шлюз и цепочку поставок Python, которые у вас уже работают

21 октября 2026 года вредоносный litellm 1.107.0 провисел на PyPI 1 ч 43 мин, а в Docker-тегах вроде latest оставался до 14:20 UTC. Как проверить, не скачали ли вы его, что ротировать в первую очередь и какие меры не пустили бы его в сборку.

Анатолий НовогродскийОснователь и CEO, GlanitОпубликовано 1 ноября 2026

Что случилось с LiteLLM 21 октября 2026 года?

Злоумышленник, у которого оказались GitHub CLI-токены трёх разработчиков LiteLLM, прогнал штатный релизный конвейер проекта на поддельном форке Berri-AI/litellm. Настоящий репозиторий называется BerriAI/litellm, отличие в одном дефисе. Результат, версия 1.107.0, была подписана и опубликована обычными каналами. По посту вендора об инциденте, семь wheel-файлов были доступны на PyPI с 11:39:51 до примерно 13:23 UTC. Теги v1.107.0, latest, main-latest и main-stable в Docker Hub и GHCR указывали на заражённый образ с 11:46:56. GHCR почистили к 13:51, Docker Hub к 14:20.

В том же посте перечислено, что осталось чистым: официальный тег исходников v1.107.0 на GitHub, приватный enterprise-реестр и все предыдущие версии.

Масштаб важен. По оценке Datadog, litellm скачивают около 23 миллионов раз в неделю. StepSecurity и Wiz (в пересказе The Next Web) насчитали около 49 000 загрузок 1.107.0 до удаления. Для проекта это вторая компрометация цепочки поставок за 2026 год после версий 1.82.7 и 1.82.8 в марте.

Всякий, кто в это окно потянул latest, получил вредоносную нагрузку без того, чтобы кто-то решил обновляться.

В шлюзе лежат все ваши ключи

Поэтому операция на 11 дней и стоила усилий. Прокси LiteLLM обычно хранит в своей базе API-ключи провайдеров, мастер-ключ, виртуальные ключи, которыми пользуются ваши приложения, и DATABASE_URL, а сам работает под облачной ролью. Datadog и StepSecurity независимо выяснили: если база настроена, стилер обращался к таблицам прокси с upstream-ключами провайдеров. Дополнительно он забирал облачные учётные данные (включая метаданные инстанса), SSH-ключи, токены Git, npm и PyPI и переменные окружения каждого читаемого процесса. StepSecurity отдельно называет конфиги более чем 20 AI-инструментов для кодинга.

The Next Web со ссылкой на Wiz пишет, что украденные AWS-ключи начали проверять примерно через 4,5 часа, в том числе запрашивали список моделей Bedrock.

Бюджеты на виртуальных ключах (мы разбирали их в статье про контроль стоимости) ограничивают расход приложения через шлюз. Ключ провайдера, который уже утёк, они не защищают. Границу потерь задают лимиты трат на стороне провайдера, отдельные ключи под каждое окружение и узкая облачная роль.

Как злоумышленник попал внутрь и что изменилось в версии событий?

За два дня рассказ вендора поменялся, и полезна именно вторая версия. В посте от 21 октября предполагалось, что OAuth-токены GitHub CLI прочитали из логов внутреннего LiteLLM, доступного из интернета, при этом отмечалось, что Claude Code в отдельных случаях может вложить токен GitHub CLI пользователя в тело ответа. Пост от 23 октября о цепочке атаки это заменил. Админ-ключ внутренней платформы LiteLLM Agent Platform 27 мая 2026 года попал в публичный репозиторий, примерно через три часа коммит удалили, а ключ так и не отозвали. 10 октября один API-вызов с этим ключом вернул конфигурацию всех агентов, включая токен GitHub CLI владельца организации без ограничения прав.

Дальше работал CI. Одноразовые ветки запускали workflow, которые отправляли секреты репозитория на webhook.site, и так добыли токены ещё двух мейнтейнеров. За несколько дней до этого подтверждение релиза упростили ради бэкпортов багфиксов, поэтому украденный токен мейнтейнера проходил продакшн-ворота. Между утечкой и использованием ключа прошло 136 дней.

Теперь вендор признаёт, что часть ранних обновлений была «позже признана неточной или неполной». В его посте от 30 октября есть фраза, с которой мы согласны: «никакие контроли конвейера не защитят от атакующего, который является владельцем организации, потому что владелец владеет конвейером». Меры, которые зависят от вас, находятся на стороне потребителя.

Задело ли вас? Проверяем из шелла

Начинать с pip не надо. Вендор предупреждает: любой запуск Python в заражённом окружении, включая pip, заново выполняет cook.pth и sitecustomize.py, а Datadog подтверждает, что удаление каталога пакета litellm эти файлы оставляет на месте. Работайте из шелла, по каждому venv, образу и CI-раннеру, которые могли разрешить litellm 21 октября. Маркер /tmp/.pc_once_* означает, что стилер отработал до конца (Datadog). Вендор добавляет оговорку: если ничего не нашли, это не доказывает, что хост чист.

Таблица упорядочена по стоимости проверки, от самой дешёвой.

Проверки на следы 1.107.0, от дешёвых к дорогим

проверки на следы litellm 1.107.0, от дешёвых к дорогим. Ни для одной не нужно запускать Python.
ПроверкаКоманда или источникГде
Lock-файлы разрешили 1.107.0grep -rn '1.107.0' requirements*.txt uv.lock poetry.lockРепозитории, кеши CI, внутреннее зеркало
Есть хуки автозапускаfind / -path '*site-packages*' \( -name cook.pth -o -name cook.py -o -name sitecustomize.py \) 2>/dev/nullКаждый venv, контейнер, раннер
Жив демон-загрузчикls -l /tmp/remote_code_loader.lock и отсоединённый процесс pythonХосты, работающие контейнеры
Дайджест образаdocker images --digests | grep litellm и сверка с дайджестами из поста вендораРеестры, ноды k8s, зеркала
Трафик эксфильтрацииDNS- и прокси-логи по litellm[.]devРезолвер, egress-фаервол
Злоупотребление облакомCloudTrail GetCallerIdentity от роли инстанса около времени установкиАккаунты AWS
проверки на следы litellm 1.107.0, от дешёвых к дорогим. Ни для одной не нужно запускать Python.

Что ротировать и в каком порядке?

Если 1.107.0 работал с исходящим доступом в интернет, вендор советует считать, что утечка состоялась. Ротируйте с чистой машины, затем пересобирайте всё с нуля: вендор предпочитает это переустановке на месте. Порядок ниже повторяет наблюдавшееся поведение атакующего, облако первым:

  1. IAM-роль инстанса или задачи. Украденные AWS-ключи использовали в тот же день (StepSecurity фиксирует активность в 16:20–17:01 UTC).
  2. Все ключи провайдеров из базы прокси, а также мастер-ключ и все виртуальные ключи.
  3. Пароль из DATABASE_URL.
  4. Всё остальное, что лежало в окружении процессов на хосте: токены CI, Git, SSH, npm и PyPI, учётные данные Vault и Kubernetes.
  5. Пересборка из зафиксированного дайджеста и чистка зеркал и кешей, где остался wheel.

Дороже всего пункт 2. Новые виртуальные ключи ломают сразу все клиентские приложения, так что каждого потребителя кто-то должен провести через замену, а ключи провайдеров за ними могут делить системы, о которых никто не помнит. Мы планируем это как короткую объявленную остановку с ответственным на каждого потребителя.

Ещё одна проверка нужна, даже если 1.107.0 вы не ставили. Cloud Security Alliance рекомендует: если шлюз сохранял трафик агентов для кодинга (например, при включённом store_prompts_in_spend_logs), поищите в нём префиксы gho_, ghp_ и github_pat_, включая нижестоящие инструменты трассировки и бэкапы.

Меры, которые не пустили бы 1.107.0

По отдельности большинство из них дёшевы, вместе они стоят скорости обновлений. Вредоносные wheel продержались на PyPI около 1 ч 43 мин, мартовские версии примерно 40 минут (The Next Web). Выдержка в 24 часа пропускает обе. У нас для прямых зависимостей семь дней, а когда исправление безопасности ждать не может, делается явное исключение.

# pyproject.toml: игнорировать всё, что загружено за последние 7 дней
[tool.uv]
exclude-newer = "7 days"
exclude-newer-package = { cryptography = false }   # исключение, проверено человеком

# фиксируем точные версии и sha256 каждого артефакта, CI падает на устаревшем lock
uv lock
uv sync --locked
# если у вас pip: pip install --require-hashes -r requirements.txt
# в pip 26.2 есть и такой флаг: --uploaded-prior-to P7D

# Dockerfile: дайджест, никогда не тег
FROM ghcr.io/berriai/litellm@sha256:<проверенный вами дайджест>

# повышаем дайджест только после проверки по НОВОМУ ключу
cosign verify --key cosign.pub ghcr.io/berriai/litellm@sha256:<digest>

Со строкой cosign нужна осторожность. Вендор пишет, что скомпрометированные образы 1.107.0 «также несут действительную подпись от предыдущего ключа», который теперь считается раскрытым. Подпись доказывает, кто владел ключом, и ничего не говорит о намерениях. Подписям старого ключа доверяйте только для образов, опубликованных до 1.107.0, сверяйте дайджесты и используйте ключ, ротированный 23 октября. Его отпечаток вендор опубликовал 30 октября.

Остальное и цена каждого пункта:

  • Egress на шлюзе закрыт по умолчанию. Нужны эндпоинты ваших провайдеров и почти ничего больше. Такое правило заблокировало бы POST на litellm[.]dev и почасовой опрос dead-drop. Цена: каждый новый провайдер означает правку фаервола.
  • Нет публичной админ-поверхности. Формулировка CSA: админ-интерфейсы шлюза «никогда не должны быть доступны из публичного интернета». Вендор теперь прячет все внутренние развёртывания за identity-aware прокси.
  • Одна узкая облачная роль на шлюз. Если он вызывает Bedrock, у него права на вызов Bedrock и больше ничего.
  • Логирование содержимого выключено по умолчанию, а когда оно нужно, секреты вычищаются до записи.

Серверы инструментов — отдельная задача со своими мерами; см. MCP-серверы в продакшене.

Что на самом деле доказывает аттестация PyPI?

Меньше, чем думает большинство команд. Документация PyPI описывает аттестации публикации как подтверждение, что файл «был опубликован через конкретный Trusted Publisher». Место исходников подтверждает другой тип аттестации (SLSA provenance). Разбор 1.107.0 на DEV Community прямолинеен: аттестация публикации «называет workflow, который загрузил файл, а не исходники, из которых он собран». Здесь загрузку выполнил легитимный workflow, так что проверка, привязанная к настоящему издателю, «скорее всего, пропустила бы 1.107.0» (авторы помечают это как вывод).

Тот же разбор показал, что litellm аттестовал только 15 релизов (с 1.83.0 по 1.83.14) и ни одного из 214 последующих, что 39,0% из тысячи самых популярных проектов PyPI аттестуют свой последний релиз и что по состоянию на октябрь 2026 года «ни pip, ни uv не проверяют аттестации при установке». BuildKit provenance у Docker-образов форк назвал верно. Только это поле пишет сама сборка атакующего.

У собственной доработки вендора правильная форма: верификатор вне GitHub, который сравнивает опубликованные wheel, sdist и образы с соответствующим тегом и делает yank при расхождении. Дешёвую версию можно сделать на стороне потребителя. Сравните список файлов в wheel с предыдущим релизом: StepSecurity называет лишние файлы в wheel одним из подтверждающих признаков.

Что мы сделали бы в следующий раз

Хост шлюза мы стали бы считать хранилищем секретов: на нём больше ничего не работает, пакеты он берёт только из внутреннего зеркала с задержкой в семь дней, образы по дайджесту, egress закрыт по умолчанию, а логи проверяются как хранилище секретов. 136 дней — урок про учётные данные. Удаление коммита не отзывает ключ, поэтому на каждый засвеченный ключ заводится заявка на отзыв, которая закрывается только после подтверждения от провайдера. Командам, у которых LiteLLM или другой LLM-прокси работает в продакшене, мы проводим недельный аудит защиты AI-шлюза и цепочки поставок агентов: пины, дайджесты, egress, ограничение прав ключей и журнал аудита.

Частые вопросы

Ещё статьи

Безопасность ·

Отчётность по Cyber Resilience Act уже действует: что построить до того, как пойдёт первый 24-часовой отсчёт

С 11 сентября 2026 года каждый производитель, который продаёт в ЕС программное обеспечение или подключённые продукты, обязан в течение 24 часов сообщать через Единую платформу отчётности ENISA об активно эксплуатируемых уязвимостях и серьёзных инцидентах. Закон короткий. Трудно другое: построить конвейер, который за это время скажет, что именно вы поставляете и эксплуатируют ли это.

7 мин чтения

Безопасность ·

MCP-серверы в продакшене: как мы их проверяем и закручиваем гайки

Сначала опишите все MCP-серверы, затем аутентифицируйте каждого клиента токеном, выпущенным именно для этого сервера, запускайте локальные серверы в песочнице и логируйте каждый вызов инструмента. Большинство инцидентов с MCP в 2026 году упирается в конфигурацию и значения по умолчанию, а ревизия спецификации от 28 июля 2026 года добавляет ещё и миграцию.

8 мин чтения

Безопасность ·

SealedRun: журнал аудита ИИ-агентов, где подмена видна

Трейсы агента в вашей собственной базе — это утверждения, а не доказательства: тот, кто управляет хранилищем, может их изменить. SealedRun, open-source рекордер на ранней стадии, подписывает каждый шаг агента в хеш-цепочку, которую посторонний проверит офлайн. Как он работает, что подтверждает и как мы запускаем его для своих агентов.

8 мин чтения