basforge

Ищем по названиям, тексту и разборам «Если не работает».

    EN
    ОбзорHomelabProxmox

    Виртуальная машина или контейнер LXC в Proxmox: что под какой сервис

    Машина — отдельный компьютер со своим ядром: любая ОС, полная изоляция, переезд на другой узел без остановки. Контейнер LXC — Linux на ядре хоста: стартует за секунду и ест десятки мегабайт, но делит с хостом ядро и его уязвимости. Сервис из пакетов Linux ставим в контейнер; Docker, чужой код и любую другую ОС — в машину.

    Как устроена машина

    Виртуальная машина в Proxmox — процесс kvm на хосте. Внутри него QEMU изображает компьютер целиком: BIOS или UEFI, диски, сетевую карту, видео. Код гостя выполняет сам процессор через VT-x или AMD-V, а модуль ядра kvm следит, чтобы гость не вышел за свою память.

    хост: ядро Linux + kvm
      └─ процесс kvm (машина 101)          ограничен своей памятью и своими ядрами
          ├─ виртуальное железо: VirtIO-диск, VirtIO-сеть, UEFI, TPM
          └─ ядро гостя: Linux, Windows, FreeBSD, RouterOS
              └─ процессы гостя

    Гость не знает о хосте ничего, кроме того, что ему показали. Своё ядро значит: любая ОС, свои модули ядра, свой фаервол, свой Docker — всё как на отдельном компьютере. Платим памятью и временем: ядро и система гостя занимают сотни МБ, загрузка — десятки секунд.

    Как устроен контейнер

    Контейнер LXC — группа процессов на ядре хоста. Ядро показывает им только их файлы, их сеть и их процессы (namespaces), отмеряет им память и процессор (cgroups v2) и запрещает опасное (AppArmor, seccomp). Внутри — обычный Debian или Ubuntu с systemd, SSH и apt, как на маленьком сервере. Ядра своего нет: uname -r в контейнере показывает ядро хоста.

    хост: ядро Linux
      ├─ процессы хоста
      └─ контейнер 201: namespaces + cgroups + AppArmor
          └─ systemd → sshd, nginx …      свой корень, своя сеть, uid сдвинуты на 100000

    По умолчанию Proxmox создаёт непривилегированные контейнеры: пользователи внутри сдвинуты. root контейнера (uid 0) на хосте — uid 100000, пользователь 1000 — uid 101000. Выбрался процесс из контейнера — на хосте он никто. Привилегированный контейнер (галочку Unprivileged сняли) видит uid как есть, и его root — это root хоста с ограничениями AppArmor. Такие контейнеры Proxmox советует только для гостей, которым доверяем.

    Чем отличаются на деле

    Машина Контейнер LXC
    Ядро своё хоста
    Система внутри любая только Linux
    Старт десятки секунд секунда-две
    Память выдаём целиком; система гостя — сотни МБ лимит cgroups; Debian в покое — десятки МБ
    Изоляция граница процессора и QEMU граница ядра: уязвимость ядра хоста — общая
    Переезд на другой узел живая миграция без остановки только с перезапуском
    Снимки на LVM-thin, ZFS, qcow2 на LVM-thin и ZFS
    Бэкап без остановки да, с гостевым агентом — с заморозкой файловой системы да, режим snapshot
    Проброс устройств PCIe целиком: видеокарта, контроллер, сетевая карта устройство из /dev, например /dev/dri для перекодирования видео
    Docker внутри как на обычном сервере работает с nesting=1, ломается от обновлений
    Ядро обновили гостя не касается меняется у всех контейнеров сразу

    Перекодирование видео — сильная сторона контейнера. Медиасервер в LXC получает /dev/dri/renderD128 встроенной графики строкой dev0: в конфиге, и та же графика остаётся доступна хосту и другим контейнерам. Машине видеокарту пробрасывают целиком, через IOMMU, и хост её больше не видит.

    Что куда

    Если… Берём
    сервис есть в пакетах Debian или Ubuntu: Pi-hole, nginx, Samba, небольшой сайт контейнер («Первый контейнер LXC»)
    Docker и compose-стеки машина с Ubuntu («Шаблон VM с cloud-init», «Docker — в машину»)
    другая ОС: Windows, Home Assistant OS, OPNsense, RouterOS машина
    чужой код, сервис, открытый в интернет, или пользователи с root внутри машина
    медиасервер с перекодированием на встроенной графике контейнер с /dev/dri
    живая миграция между узлами кластера машина
    тестовый сервер под мануалы с ufw, Docker и правками ядра машина: в контейнере часть команд не сработает

    Последняя строка — частая ловушка. В контейнере не загружаются модули ядра, не меняются sysctl уровня ядра, а свой nftables поверх хоста без особых прав не работает. Мануал для VPS в контейнере ломается на полпути, а в машине идёт как на настоящем сервере.

    Docker: почему в машину

    Proxmox прямо пишет в FAQ: Docker на самом хосте не ставим, а контейнеры приложений, которым нужны миграция или изоляция, держим в машине. Docker внутри LXC работает — это контейнер в контейнере, — но держится на разрешениях, которые меняются вместе с ядром, AppArmor и самим Docker:

    • нужна опция nesting=1, а для части образов ещё keyctl=1;
    • overlayfs поверх ZFS заработал только с ZFS 2.2;
    • в ноябре 2025-го исправление уязвимости в containerd 1.7.29 перестало запускать любые контейнеры Docker внутри непривилегированного LXC — до исправлений с обеих сторон.

    Машина с Ubuntu ест на 300–500 МБ больше, зато Docker в ней — как на любом VPS, и все материалы про Docker на сайте («Docker») работают в ней без оговорок. Подробно — «Docker — в машину».

    С 9.1 Proxmox умеет и третий вариант: контейнер LXC из образа OCI — того же, что Docker скачивает с Docker Hub. Хранилище › CT Templates › Pull from OCI registry, и образ становится контейнером Proxmox: свои сеть, бэкап, снимки. Пока это технологическое превью: compose-стеков нет, обновление образа — пересоздание контейнера.

    Если не работает

    Docker в контейнере LXC: open sysctl net.ipv4.ip_unprivileged_port_start file: reopen fd 8: permission denied

    Причина
    В ноябре 2025-го containerd 1.7.29 закрыл уязвимость CVE-2025-52881 и стал проверять доступ к /proc строже. Внутри непривилегированного LXC эта проверка не проходит, и Docker перестал запускать контейнеры после обычного apt upgrade в госте.
    Делаем
    Обновляем хост до свежей 9.x и пакеты в госте. Не помогло — закрепляем containerd.io версии 1.7.28 через apt-mark hold. Чтобы такое не повторялось, Docker переносим в машину («Docker — в машину»).

    В каталоге хоста, подключённом к контейнеру, файлы принадлежат nobody, запись — Permission denied

    Причина
    Контейнер непривилегированный: root внутри — это uid 100000 на хосте, пользователь 1000 — uid 101000. Файлы хоста с владельцем 1000 внутри видны как чужие.
    Делаем
    На хосте отдаём каталог тому uid, под которым пишет сервис в контейнере: chown -R 101000:101000 /srv/share для пользователя 1000 («Первый контейнер LXC»).

    Миграция контейнера на другой узел останавливает его

    Причина
    Живой миграции у LXC нет: процессы и память контейнера не переносятся, только диск и конфиг.
    Делаем
    Миграция с --restart — остановка, перенос, запуск, простой в секунды. Сервис, которому простой недопустим, держим в машине.

    Контейнер Debian не запускается после обновления хоста: systemd в госте падает или висит

    Причина
    Свежему systemd в госте нужен доступ, который даёт опция nesting=1. У контейнеров, созданных в старых версиях Proxmox, её может не быть.
    Делаем
    У контейнера Options › Features › Nesting — включаем, контейнер перезапускаем. В конфиге это features: nesting=1.