Proxmox på Gigahost

publisert:

tags: [ #proxmox, #linux ]

Jeg kjøpte en server på auksjon fra gigahost. En beskjeden sak med følgende specs:

  • HP 6200 Elite SFF
  • Intel Core i5-3470 3.2GHz
  • 16 GB (DIMM DDR3 Synchronous 1333 MHz (0.8 ns))
  • 1TB SSD

Den koster 321 kr i mnd. På sikt ønsker jeg at denne skal kjøre norge.chat. Jeg provisjonerte hosten, og la inn min public ssh nøkkel. Jeg fikk deretter en IP jeg kunne logge inn mot, med min private SSH nøkkel.

Proxmox helper scripts

Jeg har etterhvert blitt veldig glad i Proxmox community scritps. Jeg startet med å kjøre PVE Post Install scriptet.

Disk

Jeg misstenker Gigahost først provisjonerer Debian på hosten, deretter installerer Proxmox på toppen. Det er iallefall noen spor etter det. Blant annet finnes ikke filen /etc/pve/storage.cfg, som vanligvis finnes etter installasjon. Om man kjører et install-script fra community-scripts.org, f.eks installere debian, så får man denne feilen:

✖️  /etc/pve is mounted, but /etc/pve/storage.cfg is missing.
🔧  The cluster configuration looks damaged. Check: pvecm status and journalctl -u pve-cluster -n 50

Men Proxmox hosten min har en disk. Den heter local:

root@server:~# pvesm status
Name         Type     Status     Total (KiB)      Used (KiB) Available (KiB)        %
local         dir     active       942926048         7102880       887851432    0.75%

Helper scripts ser etter storage.cfg filen før den lager containeren. Derfor må vi manuelt lage den.

cat > /etc/pve/storage.cfg <<'EOF'
dir: local
	path /var/lib/vz
	content backup,images,iso,rootdir,snippets,vztmpl
	prune-backups keep-all=1
EOF

Nettverk

Gigahost gir meg en statisk IPv4 og et subnet med IPv6. vmbr0 kommer ferdig satt opp, bridget rett inn i gigahost sitt lag 2 nettverk. Her finnes ei DHCP eller plass til flere IPv4 addresser (om man ikke kjøper flere eksterne IPv4 addresser da).

Vi er allerede koblet til br0 (webgrensesnittet), så jeg lar det stå som det er. Min server har ikke noe ILO, så her gjelder det å holde tunga rett i munnen så vi ikke blir sperret ute.

ipv4

Jeg ønsker meg et lokalt subnet 192.168.30.xx /24. Som jeg kan bruke så VMer og containere kan snakke med hverandre på. Proxmox har en feature som heter SDN, som vi kan bruke til dette. Jeg forsøkte meg med å opprette følgende i GUIet:

  1. Datacenter → SDN → Zones → Add
  • ID: lan30
  • Type: Simple
  • IPAM: leave empty (or pve, harmless)
  • DHCP: leave empty for now (see below if you want DHCP)
  • Nodes: leave empty = all nodes
  1. Datacenter → SDN → VNets → Add
  • ID: vnet30 (max 8 chars, must start with a letter — this becomes the bridge name)
  • Zone: lan30
  • Alias: container lan
  1. Select vnet30 → Subnets → Add
  • Subnet: 192.168.30.0/24
  • Gateway: 192.168.30.1
  • SNAT: ✔ checked ← this is the masquerade; it's all you need for outbound NAT
  • DHCP range: leave empty for static IPs
  1. Datacenter → SDN → Apply (button in the top bar)

Når jeg forsøkte å kjøre Apply under Datacenter -> SDN -> Apply. Fikk jeg error, og i task history på noden, kunne jeg se:

WARN: missing source /etc/network/interfaces.d/sdn directive for SDN support!

Jeg sjekket /etc/network/interfaces.d/sdn, og den var generert, men interfaces.d var ikke sourcet i /etc/ntework/interfaces. Det fiksa jeg slikt:

echo 'source /etc/network/interfaces.d/*' >> /etc/network/interfaces
ifreload -a

I tillegg måtte jeg slå på ipv4 forwarding:

sysctl -w net.ipv4.ip_forward=1
echo 'net.ipv4.ip_forward=1' > /etc/sysctl.d/99-ip-forward.conf
sysctl --system

ipv6

Jeg sjekket gigahost sitt webgui. Der lå det inne et ipv6 subnet som ikke var rutet. Jeg skrev til support og ba de rute det til serveren. De fikset det på fem minutter.

Så la jeg til en del av subnettet til SDNet slik:

  1. Datacenter → SDN → VNets → vnet30 → Subnets → Add
  • Subnet: 2a03:94e0:1875:30::/64
  • Gateway: 2a03:94e0:1875:30::1
  • SNAT: off
  • Apply.
  1. Forwarding:

cat >>/etc/sysctl.d/99-ip-forward.conf <<'EOF' net.ipv6.conf.all.forwarding=1 EOF sysctl --system

Provisjonere LXC container

Vi kan nå provisjonere LXC containere f.eks slik:

mode=generated var_hostname='debian' var_brg='vnet30' \
var_net='192.168.30.11/24' var_gateway='192.168.30.1' \
var_ipv6_method='static' \
IPV6_ADDR='2a03:94e0:1875:30::11/64' \
IPV6_GATE='2a03:94e0:1875:30::1' \
var_ns='1.1.1.1 8.8.8.8' var_ssh='yes' \
var_container_storage='local' var_template_storage='local' \
var_ssh_authorized_key='ssh-ed25519 AAAAC3NzaC1lZDI1NTE5AAAAIFdW7RQ4Rs2GftJJ9OL8tmc/TX8PixIx449u3m6wd+w7 fyksen@gigahost-1' \
bash -c "$(curl -fsSL https://raw.githubusercontent.com/community-scripts/ProxmoxVE/main/ct/debian.sh)""