Jahresrückblick 2025 – unser neuer Blogbeitrag ist online! ✨

[crunchip]

@homoran sagte in Proxmox spinnt - brauche Hilfe - auch mit Unifi:

Ich kann jetzt diese VM weder rebooten noch stoppen.

Per shell auch nicht?

qm unlock 123
qm stop 123

[JLeg]

@homoran worauf laufen denn die beiden VMs? Also z.B LVM-Volumes, LVM-Thin etc? Nodeseitig evtl. Snapshots aktiv? Die Meldung "I/O-Error" innerhalb einer VM oder LXC kenne ich eigentlich nur vom Fall, dass z.B. ein LV bzw. Snapshot "vollgelaufen" ist... (zumindest wenn man defekte Platten ausschliessen kann)

[JLeg]

@homoran sagte in Proxmox spinnt - brauche Hilfe - auch mit Unifi:

[Mon Apr 25 12:47:49 2022] device-mapper: thin: 253:4: reached low water mark for data device: sending event.

schau' mal, was

lsblk

sagt - da kannst du sehen, zu was "253:4" gehört...

[Homoran]

@jleg

Ich habe es mir mal ganz einfach gemacht:

@crunchip
wie du siehst komme ich nur noch auf das PVE

dort in der PVE-Shell ausführen?

[crunchip]

@jleg wäre dann der Hinweis

Apr 25 12:47:49 2022] device-mapper: thin: 253:4: switching pool to out-of-data-space (queue IO) mode
[Mon Apr 25 12:48:50 2022] device-mapper: thin: 253:4: switching pool to out-of-data-space (error IO) mode

[Homoran]

@jleg sagte in Proxmox spinnt - brauche Hilfe - auch mit Unifi:

sagt - da kannst du sehen, zu was "253:4" gehört...

ich sicher nicht :-)

root@pve-neu:~# lsblk
NAME                         MAJ:MIN RM   SIZE RO TYPE MOUNTPOINT
sda                            8:0    0 223.6G  0 disk 
├─sda1                         8:1    0  1007K  0 part 
├─sda2                         8:2    0   512M  0 part /boot/efi
└─sda3                         8:3    0 223.1G  0 part 
  ├─pve-swap                 253:0    0     7G  0 lvm  [SWAP]
  ├─pve-root                 253:1    0  55.8G  0 lvm  /
  ├─pve-data_tmeta           253:2    0   1.4G  0 lvm  
  │ └─pve-data-tpool         253:4    0 141.4G  0 lvm  
  │   ├─pve-data             253:5    0 141.4G  1 lvm  
  │   ├─pve-vm--100--disk--0 253:6    0   140G  0 lvm  
  │   └─pve-vm--101--disk--0 253:7    0    32G  0 lvm  
  └─pve-data_tdata           253:3    0 141.4G  0 lvm  
    └─pve-data-tpool         253:4    0 141.4G  0 lvm  
      ├─pve-data             253:5    0 141.4G  1 lvm  
      ├─pve-vm--100--disk--0 253:6    0   140G  0 lvm  
      └─pve-vm--101--disk--0 253:7    0    32G  0 lvm 

[crunchip]

@homoran ja

[JLeg]

@homoran jo, sind thin pools - und der 253:4 ist voll - was sagt denn

vgdisplay -v pve

[Homoran]

@crunchip sieht nicht gut aus:

[Homoran]

@jleg

root@pve-neu:~# vgdisplay -v pve
  --- Volume group ---
  VG Name               pve
  System ID             
  Format                lvm2
  Metadata Areas        1
  Metadata Sequence No  15
  VG Access             read/write
  VG Status             resizable
  MAX LV                0
  Cur LV                5
  Open LV               3
  Max PV                0
  Cur PV                1
  Act PV                1
  VG Size               <223.07 GiB
  PE Size               4.00 MiB
  Total PE              57105
  Alloc PE / Size       53010 / 207.07 GiB
  Free  PE / Size       4095 / <16.00 GiB
  VG UUID               QxE0vt-KnKS-Z92t-L53i-YOyT-4PEr-9THeBz
   
  --- Logical volume ---
  LV Path                /dev/pve/swap
  LV Name                swap
  VG Name                pve
  LV UUID                u0kopG-fi9N-sqEn-YgpO-u82L-mAQp-RHpd38
  LV Write Access        read/write
  LV Creation host, time proxmox, 2021-12-13 15:30:10 +0100
  LV Status              available
  # open                 2
  LV Size                7.00 GiB
  Current LE             1792
  Segments               1
  Allocation             inherit
  Read ahead sectors     auto
  - currently set to     256
  Block device           253:0
   
  --- Logical volume ---
  LV Path                /dev/pve/root
  LV Name                root
  VG Name                pve
  LV UUID                k8bNxN-ss4P-V1vf-Zeqm-reIp-9cRj-B2AnfY
  LV Write Access        read/write
  LV Creation host, time proxmox, 2021-12-13 15:30:10 +0100
  LV Status              available
  # open                 1
  LV Size                55.75 GiB
  Current LE             14272
  Segments               1
  Allocation             inherit
  Read ahead sectors     auto
  - currently set to     256
  Block device           253:1
   
  --- Logical volume ---
  LV Name                data
  VG Name                pve
  LV UUID                AP1yuy-r0H8-jsq0-rvy9-DBnu-K0TB-5Qkt0M
  LV Write Access        read/write (activated read only)
  LV Creation host, time proxmox, 2021-12-13 15:30:15 +0100
  LV Pool metadata       data_tmeta
  LV Pool data           data_tdata
  LV Status              available
  # open                 0
  LV Size                <141.43 GiB
  Allocated pool data    100.00%
  Allocated metadata     5.40%
  Current LE             36206
  Segments               1
  Allocation             inherit
  Read ahead sectors     auto
  - currently set to     256
  Block device           253:5
   
  --- Logical volume ---
  LV Path                /dev/pve/vm-100-disk-0
  LV Name                vm-100-disk-0
  VG Name                pve
  LV UUID                yVqmMo-lQFx-zeIW-VpEB-aC52-FQR9-dbjNZI
  LV Write Access        read/write
  LV Creation host, time pve-neu, 2021-12-13 17:44:06 +0100
  LV Pool name           data
  LV Status              available
  # open                 1
  LV Size                140.00 GiB
  Mapped size            95.47%
  Current LE             35840
  Segments               1
  Allocation             inherit
  Read ahead sectors     auto
  - currently set to     256
  Block device           253:6
   
  --- Logical volume ---
  LV Path                /dev/pve/vm-101-disk-0
  LV Name                vm-101-disk-0
  VG Name                pve
  LV UUID                RZsqpX-CwHp-Obe9-nQYE-78F3-Jva5-lYRlRY
  LV Write Access        read/write
  LV Creation host, time pve-neu, 2021-12-13 18:05:41 +0100
  LV Pool name           data
  LV Status              available
  # open                 0
  LV Size                32.00 GiB
  Mapped size            24.30%
  Current LE             8192
  Segments               1
  Allocation             inherit
  Read ahead sectors     auto
  - currently set to     256
  Block device           253:7
   
  --- Physical volumes ---
  PV Name               /dev/sda3     
  PV UUID               AY1yhR-LBud-ZdQO-hN5N-n05P-Yrhd-zjt1Ii
  PV Status             allocatable
  Total PE / Free PE    57105 / 4095

[crunchip]

@homoran ist doch gestoppt

[Homoran]

@crunchip jepp gerade eben

und jetzt auch die ander

[Homoran]

@crunchip jetzt habe ich auch beide wieder starten können....
101 hängt schon wieder

[JLeg]

@homoran tja, dein lvm-thin-metadata-Storage ist vollgelaufen. Gründe für sowas gibt's einige, wenn du keine Snapshots benutzt, sind's vielleicht zu kleine Chunk-Sizes (beim Einrichten gewählt) oder so...
Schnellste Abhilfe wäre, das tmeta-LV zu vergrössern - blöderweise ist deine Volumegroup (pve) aber auch schon bis fast zum Anschlag ausgereizt (ich würde da immer bissel Luft lassen), du hast nur noch 6GB zur Verfügung. Das könnte aber schonmal helfen, zumindest für ein paar Wochen oder so..
Hier steht der Aufruf zum Vergrössern: https://pve.proxmox.com/wiki/LVM2#Resize_metadata_pool

[crunchip]

@homoran mein handy hängt die ganze Zeit, kann nicht scrollen in dem Thread.
Aber wenn ich es richtig sehe ist deine VM 140Gb?
Und dein LVM ebenfalls

[Homoran]

Danke euch beiden - keine Panik - die habe ich.

@crunchip sagte in Proxmox spinnt - brauche Hilfe - auch mit Unifi:

Aber wenn ich es richtig sehe ist deine VM 140Gb?
Und dein LVM ebenfalls

passt wahrscheinlich zu

@jleg sagte in Proxmox spinnt - brauche Hilfe - auch mit Unifi:

dein lvm-thin-metadata-Storage ist vollgelaufen.

und ich nutze keine Snapshots

Habe schon den nächsten NUC vorbereitet gehabt, der 5PPYH sollte nur den Neuaufbau des i3 überbrücken.
und wie das so ist dauert ein Provisorium zu lange

[Homoran]

@jleg sagte in Proxmox spinnt - brauche Hilfe - auch mit Unifi:

(ich würde da immer bissel Luft lassen), du hast nur noch 6GB zur Verfügung. Das könnte aber schonmal helfen, zumindest für ein paar Wochen oder so..

wenn ich wüsste wovon du redest :-) würde ich das wohl auch

@jleg sagte in Proxmox spinnt - brauche Hilfe - auch mit Unifi:

du hast nur noch 6GB zur Verfügung. Das könnte aber schonmal helfen, zumindest für ein paar Wochen oder so..

reicht :-)

@jleg sagte in Proxmox spinnt - brauche Hilfe - auch mit Unifi:

Hier steht der Aufruf zum Vergrössern: https://pve.proxmox.com/wiki/LVM2#Resize_metadata_pool

DANKE
sehe ich mir an

[Homoran]

@jleg sagte in Proxmox spinnt - brauche Hilfe - auch mit Unifi:

Hier steht der Aufruf zum Vergrössern

Könntest du so nett sein und das für mich übersetzen?
lvresize --poolmetadatasize +<size[M,G]> <VG>/<LVThin_pool>

[JLeg]

@homoran müsste sowas wie hier sein:

lvresize --poolmetadatasize +5G pve/data

[Homoran]

@crunchip sagte in Proxmox spinnt - brauche Hilfe - auch mit Unifi:

Aber wenn ich es richtig sehe ist deine VM 140Gb?
Und dein LVM ebenfalls

ich glaube das ist bei der Installation passiert. Ich wollte das LVM-thin viel kleiner haben, damit mehr übrigbleibt.
Irgendwie ist das schiefgegangen - und dann hatte ich gedacht, dass es reicht