mirror of
https://github.com/Alkatrazz24/Funk-lab.git
synced 2026-07-13 02:44:42 +02:00
alkatrazz
0cb886acf7
Service systemd local sur gpu-01 qui sonde une vraie génération sur :1234 (pas juste /health, qui ment quand le slot d'inférence est figé). Sur N échecs consécutifs → systemctl restart llama-server en local (root, sans SSH/sudo distant). Gère le 503 "Loading model" post-restart sans le compter comme échec. Complète le llm-heartbeat (rôle litellm) : le heartbeat empêche la péremption par inactivité de la connexion ; le watchdog répare le figeage du serveur lui-même. Co-Authored-By: Claude Opus 4.8 <noreply@anthropic.com>
19 lines
383 B
YAML
19 lines
383 B
YAML
---
|
|
- name: Reload systemd
|
|
ansible.builtin.systemd:
|
|
daemon_reload: true
|
|
|
|
- name: Restart llama-server
|
|
ansible.builtin.systemd:
|
|
name: llama-server
|
|
state: restarted
|
|
|
|
- name: Restart llama-embed
|
|
ansible.builtin.systemd:
|
|
name: llama-embed
|
|
state: restarted
|
|
|
|
- name: Restart llama-watchdog
|
|
ansible.builtin.systemd:
|
|
name: llama-watchdog
|
|
state: restarted
|