[technique] Intervention sur le cluster ce vendredi

[Ludovic Pouzenc]

Merci bcp :)

Dans le dmesg de la VM piou :

[ven. mai 27 07:25:09 2022] INFO: task jbd2/sdb1-8:132 blocked for more 
than 120 seconds.
[ven. mai 27 07:29:11 2022] INFO: task jbd2/sdb1-8:132 blocked for more 
than 362 seconds.
[ven. mai 27 07:29:39 2022] systemd[1]: systemd-journald.service: State 
'stop-watchdog' timed out. Killing.
[ven. mai 27 07:29:40 2022] systemd[1]: systemd-journald.service: 
Killing process 171 (systemd-journal) with signal SIGKILL.
[ven. mai 27 07:40:11 2022] systemd[1]: systemd-journald.service: State 
'final-sigterm' timed out. Killing.
[ven. mai 27 07:40:12 2022] systemd[1]: systemd-journald.service: 
Killing process 637641 (systemd-journal) with signal SIGKILL.
[ven. mai 27 07:41:42 2022] systemd[1]: Failed to start Journal Service.
[ven. mai 27 07:41:42 2022] systemd[1]: Dependency failed for Flush 
Journal to Persistent Storage.
[ven. mai 27 07:50:43 2022] systemd[1]: systemd-journald.service: start 
operation timed out. Terminating.
[ven. mai 27 07:51:52 2022] systemd[1]: systemd-journald.service: Failed 
with result 'timeout'.
[ven. mai 27 07:51:52 2022] systemd[1]: Failed to start Journal Service.
[ven. mai 27 07:51:52 2022] systemd[1]: Starting Journal Service...
[ven. mai 27 07:51:52 2022] systemd[1]: Started Journal Service.
(puis rien jusqu'à 14h29)
[ven. mai 27 14:29:25 2022] clocksource: timekeeping watchdog on CPU0: 
Marking clocksource 'tsc' as unstable because the skew is too large:
[ven. mai 27 14:29:25 2022] clocksource: 'kvm-clock' wd_now: 
74f85a62d4109 wd_last: 74f8587a8c587 mask: ffffffffffffffff
[ven. mai 27 14:29:25 2022] clocksource: 'tsc' cs_now: 1bc7c5b03f4ae6 
cs_last: 1bc7c53cb29988 mask: ffffffffffffffff
[ven. mai 27 14:29:25 2022] tsc: Marking TSC unstable due to clocksource 
watchdog

Je l'ai reboot. J'ai retrouvé l'ordre initial des disques sda/sdb qui 
s'étaient inversés le mois passé.

(ttn)root at piou:~# mount | grep ^/
/dev/sda1 on / type ext4 (rw,noatime,discard)
/dev/sdb on /mnt/sdb type ext4 (rw,noatime,discard)

Ludo

Le 27/05/2022 à 19:28, Aymeric via technique a écrit :
>
> L’intervention est terminé. Le cluster de stockage est actuellement en 
> train de déplacer les données pour remettre tout dans l’ordre, cela va 
> probablement durer 24 heures.
>
> Nous avons du migrer des VM et il y’a eu visiblement quelques VM qui 
> ont mal supporté les migrations et les changements de disques.
>
> Si votre VM ne répond pas, merci de nous faire signe.
>
> Aymeric pour tetaneutral.net
>
>
> On 26/05/2022 10:00, Aymeric via technique wrote:
>>
>> Bonjour,
>>
>> Ce vendredi nous allons intervenir sur les machines du cluster de 
>> machine virtuelle.
>>
>> Toujours pas d'interruption prévu... sauf fausse manip.
>>
>> Ralentissement possible au niveau des accès disques.
>>
>> Aymeric pour tetaneutral.net.
>>
>> -- 
>> Aymeric
>>
>> _______________________________________________
>> technique mailing list
>> technique at lists.tetaneutral.net
>> http://lists.tetaneutral.net/listinfo/technique
> -- 
> Aymeric
>
> _______________________________________________
> technique mailing list
> technique at lists.tetaneutral.net
> http://lists.tetaneutral.net/listinfo/technique

-- 
Ludovic Pouzenc
www.pouzenc.fr