basforge

Ищем по названиям, тексту и разборам «Если не работает».

    EN
    Путь · Linux, Docker, Homelab

    Свой сервер

    От пустого VPS до сервера, который сам ставит обновления, банит перебор, сообщает о сбоях, держит бэкапы за пределами сервера и переезжает на новый VPS из git и бэкапа. Сервер один на весь путь: каждый уровень начинается там, где закончился предыдущий.

    Уровни

    1. База

      Вход только по ключу, фаервол, обновления ставятся сами, у памяти и журнала есть предел, Docker готов к сервисам.

      РецептНовый сервер: первый час
      Советы уровня
    2. Сервисы

      Приложения в контейнерах, по имени и с HTTPS; снаружи открыт только Traefik.

      РецептСервис по HTTPS: Traefik и первый сервис
    3. Наблюдаемость

      Видно, что происходит, и сервер сам сообщает, когда плохо.

      РецептМетрики, доступность и уведомления
      Советы уровня
      • Сигнал, когда задача не выполнилась
      • OnFailure= у служб systemd
      • WAF на CrowdSec AppSec
    4. Переезд

      Сервер целиком или часть стеков поднимается на новом VPS из git и бэкапа — после сбоя, при смене хостера или когда сервер не тянет.

      РецептПереезд на новый сервер
      Советы уровня
    5. Автоматизация

      Обновления и деплой идут сами, без ручного входа по SSH.

      РецептДеплой без SSH
      Советы уровня
      • Образ собирает CI, сервер забирает из реестра
      • Renovate следит за версиями образов
      • Таймеры systemd вместо cron
      • Скрипт, который git меняет на ходу
      • Почему не SSH из GitHub Actions

    Пунктир — то, чего ещё нет: карта показывает всё, что бывает на своём сервере, а не только написанное. Белый совет — есть, пунктирный — будет.

    Сервер уже есть: откуда продолжать

    Проверки «Готово, если» из рецептов. Запускаем на своём сервере и отмечаем, что проходит, — внизу появится уровень, с которого продолжать. Отметки — только в этом браузере.

    1База
    sudo sshd -T | grep -E '^(permitrootlogin|passwordauthentication) '→ permitrootlogin no и passwordauthentication no
    sudo ufw status | head -1→ Status: active
    apt-config dump | grep -E 'Automatic-Reboot(-Time)? '→ Automatic-Reboot "true" и Automatic-Reboot-Time "04:00"
    swapon --show→ /swapfile file 2G
    sudo docker run --rm hello-world | grep Hello→ Hello from Docker!
    2Защита
    sudo docker exec crowdsec cscli bouncers list→ firewall-bouncer, в Last API pull — секунды назад
    sudo nft list table ip crowdsec | grep hook→ две строки: hook input и hook forward
    sudo docker exec crowdsec cscli metrics show acquisition→ строка file:/var/log/auth.log, числа в ней не нули
    sudo ss -tlnH | awk '{print $4}' | grep -v -e '^127\.' -e '^\[::1\]'→ только :22; после уровня 3 — ещё :80 и :443
    3Сервисы
    sudo docker ps --filter name=traefik --format '{{.Names}} {{.Status}}'→ traefik Up …
    curl -sI http://whoami.example.org | head -1→ HTTP/1.1 308 Permanent Redirect
    echo | openssl s_client -connect whoami.example.org:443 -servername whoami.example.org 2>/dev/null | openssl x509 -noout -issuer→ в issuer — Let's Encrypt
    curl -m 5 -s http://203.0.113.10:5230 || echo закрыт→ закрыт: memos открывается только по имени
    4Наблюдаемость
    sudo docker ps --format '{{.Names}} {{.Status}}' | grep -E '^(beszel|beszel-agent|gatus) '→ три строки, у каждой Up …
    curl -s -o /dev/null -d 'Проверка с web1' ntfy.sh/$(sudo cat /srv/secrets/ntfy/topic)→ на телефоне — «Проверка с web1»
    cd /opt/memos && sudo docker compose stop→ через 3–4 минуты — тревога Gatus про memos; после sudo docker compose start — что он снова отвечает
    sudo ss -tlnH | awk '{print $4}' | grep -v -e '^127\.' -e '^\[::1\]'→ по-прежнему только :22, :80 и :443: мониторинг наружу ничего не открыл
    5Резервирование
    systemctl list-timers 'kopia-*'→ два таймера, kopia-backup.timer и kopia-verify.timer, у обоих заполнен NEXT
    sudo kopia snapshot list --all→ root@web1:/opt и root@web1:/srv/secrets, у каждого — снимки за последние ночи
    sudo systemctl start kopia-verify.service→ через несколько минут возвращается без ошибки, проверка web1-verify в Healthchecks.io — up
    Healthchecks.io, проверка `web1-backup`→ up, последний пинг — сегодня около 03:00
    6Переезд
    sudo git -C /opt status --short→ пусто: всё, что должно быть в git, закоммичено
    sudo git -C /opt ls-files host scripts→ host/bootstrap.sh, host/authorized_keys, файлы в host/etc/ и scripts/restore.sh
    curl -s -o /dev/null -w '%{http_code}\n' --resolve memos.example.org:443:203.0.113.20 https://memos.example.org→ 200 от сервера, поднятого из git и бэкапа: на учениях — с временного VPS
    7Автоматизация
    systemctl list-timers deploy.timer→ один таймер, в NEXT — не позже чем через 10 минут
    curl -s https://whoami.example.org | grep Name→ Name: from-git: правка с компьютера дошла до сервера без входа по SSH
    sudo grep -h 'image:' /opt/*/docker-compose.yaml→ у каждого образа @sha256:…: версии ведёт Renovate
    Продолжаем с уровня 1 «База»Рецепт «Новый сервер: первый час» начинается с пустого VPS.
    К рецепту уровня 1

    Профиль сервера

    Рецепты пути пишутся по этим правилам, поэтому уровни сходятся: бэкап знает, где лежат данные и сертификаты, мониторинг — какие сервисы проверять, а git на уровне «Переезд» забирает те же пути.

    ЧтоГде и как
    Стек/opt/<стек>/docker-compose.yaml — свой каталог на каждый сервис
    Имяодно на всё: каталог /opt/memos, контейнер memos, роутер Traefik memos, адрес memos.example.org
    Данные/opt/<стек>/data/, в compose — ./data:…
    Секретыфайлом в /srv/secrets/<стек>/ (Docker secret) или в /opt/<стек>/.env с правами 600; в git — только .env.example с именами
    Сетьproxy, внешняя: создаём один раз, в ней Traefik и все сервисы, которые он открывает
    Наружутолько 22, 80 и 443; у сервисов нет ports:, они открываются через Traefik по имени
    Пользовательexample-user с sudo, вход по ключу; root по SSH не входит; команды рецептов — с sudo
    Журнал запросов/opt/traefik/data/logs/access.log, JSON
    Скриптыдля всего сервера — /opt/scripts/, для одного стека — в его каталоге
    Свои значенияпочта [email protected], домен example.org, адрес сервера 203.0.113.10, пользователь example-user, имя сервера web1, адрес сервера бэкапов 198.51.100.20Можно вписать свои
    Почему так и как проверить свой сервер