Funk-lab/stt/server/stt_server/tools.py
ALI YESILKAYA 73b52cde2c
feat(stt): recherche web (SearXNG in-cluster) + fix cluster_status (#49)
Phase 2 d'Asa agentique : nouvel outil web_search adossé à un SearXNG
self-host in-cluster, + correction du faux positif de cluster_status.

- SearXNG (k8s/apps/searxng/) : Deployment + Service + ConfigMap settings.yml
  + IngressRoute searxng.lab.local, Application ArgoCD. Namespace ai, interne
  (l'outil tape http://searxng:8080). use_default_settings + search.formats
  inclut json (sinon API JSON 403) ; limiter/image_proxy off ; image pinnée ;
  conf copiée dans un emptyDir via initContainer (contourne le mount RO) ;
  PodSecurity restricted.
- Outil web_search (tools._web_search) ajouté au contexte asa + STT_SEARXNG_URL.
- fix(cluster_status) : les pods de CronJob TERMINÉS (Succeeded/Failed, ex.
  sacrifice-assign-renfort) comptaient comme « non prêts » → fausse alarme.
  Join kube_pod_status_phase{phase=~"Running |Pending"} (3 faux positifs → 0,
  validé in-cluster).
- Serveur 0.8.0 ; doc stt.md + journal mis à jour.

Co-authored-by: Claude Opus 4.8 <noreply@anthropic.com>
2026-06-22 22:10:59 +02:00

262 lines
10 KiB
Python

"""Outils appelables par Asa (function calling) — Phase 1 : LECTURE SEULE.
Chaque outil = un schéma OpenAI (exposé au LLM) + un exécuteur async qui renvoie un
**texte court** réinjecté dans la boucle (`brain.ask_with_tools`). Tout est best-effort :
un exécuteur n'élève jamais d'exception fatale — il renvoie une note d'erreur lisible que
le modèle peut relayer à l'utilisateur.
Les outils réutilisent l'infra existante (Prometheus via `sources`, RAG via `knowledge`).
Aucune action d'écriture ici : le volet « agir sur le homelab » passe par `agent.py`
(hermes-exec, avec confirmation) et sera branché comme outil en Phase 3.
"""
from __future__ import annotations
from dataclasses import dataclass
import httpx
from stt_server import sources
from stt_server.config import settings
# job Prometheus du node_exporter par hôte hors-cluster (cf. sources.cluster_block).
_HOST_JOBS = {"gpu-01": "gpu-01-node", "storage-01": "storage-01"}
@dataclass
class ToolDeps:
"""Dépendances injectées aux exécuteurs (client HTTP partagé, RAG, vecteur de requête)."""
client: httpx.AsyncClient
knowledge: object | None = None # stt_server.knowledge.Knowledge | None
qvec: list[float] | None = None # embedding de la requête (réutilisé par search_docs)
# --- Exécuteurs -----------------------------------------------------------------
async def _search_docs(args: dict, deps: ToolDeps) -> str:
query = (args.get("query") or "").strip()
if not query:
return "Aucune requête fournie."
if deps.knowledge is None:
return "La recherche documentaire est désactivée."
# Réutilise le vecteur déjà calculé si la requête de l'outil == requête utilisateur.
docs = await deps.knowledge.search(query, deps.qvec)
if not docs:
return "Aucun passage pertinent dans la documentation Funk."
return "\n\n".join(docs[:4])
def _fmt_series(rows: list[tuple[dict, float]], label_key: str | None = None, limit: int = 10) -> str:
out = []
for metric, val in rows[:limit]:
v = int(val) if float(val).is_integer() else round(val, 3)
if label_key and metric.get(label_key):
out.append(f"{metric[label_key]}={v}")
elif metric:
ident = metric.get("__name__") or next(iter(metric.values()), "")
out.append(f"{ident}={v}")
else:
out.append(str(v))
return ", ".join(out)
async def _host_health(args: dict, deps: ToolDeps) -> str:
host = (args.get("host") or "").strip()
job = _HOST_JOBS.get(host)
if not job:
return f"Hôte inconnu : {host!r} (attendu : {', '.join(_HOST_JOBS)})."
try:
up = await sources._prom_query(deps.client, f'up{{job="{job}"}}')
load = await sources._prom_query(deps.client, f'node_load1{{job="{job}"}}')
mem = await sources._prom_query(
deps.client,
f'100*node_memory_MemAvailable_bytes{{job="{job}"}}'
f'/node_memory_MemTotal_bytes{{job="{job}"}}',
)
except httpx.HTTPError:
return "Données indisponibles : Prometheus injoignable."
if not up:
return f"{host} : aucune métrique (cible Prometheus absente ou hôte éteint)."
online = up[0][1] == 1
parts = [f"{host} : {'en ligne' if online else 'HORS LIGNE'}"]
if load:
parts.append(f"charge 1 min {round(load[0][1], 2)}")
if mem:
parts.append(f"RAM libre {round(mem[0][1])}%")
if host == "gpu-01":
try:
llama = await sources._prom_query(deps.client, 'up{job="llama-server-gpu"}')
if llama:
parts.append("llama-server " + ("up" if llama[0][1] == 1 else "DOWN"))
except httpx.HTTPError:
pass
return ", ".join(parts) + "."
async def _cluster_status(args: dict, deps: ToolDeps) -> str:
# Réutilise le résumé déjà éprouvé (nœuds joignables, pods prêts / non prêts).
return await sources.cluster_block(deps.client)
async def _prometheus_query(args: dict, deps: ToolDeps) -> str:
expr = (args.get("expr") or "").strip()
if not expr:
return "Aucune expression PromQL fournie."
try:
rows = await sources._prom_query(deps.client, expr)
except httpx.HTTPError:
return "Données indisponibles : Prometheus injoignable."
except Exception as e: # noqa: BLE001 — PromQL invalide, etc.
return f"Requête refusée par Prometheus : {e}"
if not rows:
return "La requête ne renvoie aucune série (résultat vide)."
return _fmt_series(rows)
async def _web_search(args: dict, deps: ToolDeps) -> str:
query = (args.get("query") or "").strip()
if not query:
return "Aucune requête de recherche fournie."
url = settings.searxng_url.rstrip("/") + "/search"
try:
r = await deps.client.get(
url,
params={"q": query, "format": "json", "safesearch": 0, "language": "fr"},
timeout=settings.web_search_timeout,
)
r.raise_for_status()
data = r.json()
except httpx.HTTPError:
return "Recherche web indisponible : SearXNG injoignable."
except ValueError:
return "Recherche web indisponible : réponse SearXNG inattendue (API JSON activée ?)."
results = data.get("results") or []
if not results:
answers = data.get("answers") or []
if answers:
return " ".join(str(a) for a in answers[:2])
return "Aucun résultat web pour cette recherche."
lines = []
for res in results[: settings.web_search_results]:
title = (res.get("title") or "").strip()
content = (res.get("content") or "").strip()
src = res.get("url") or ""
lines.append(f"- {title} : {content} ({src})" if content else f"- {title} ({src})")
return "\n".join(lines)
# --- Registre : nom → (schéma OpenAI, exécuteur) --------------------------------
_TOOLS: dict[str, tuple[dict, object]] = {
"search_docs": (
{
"type": "function",
"function": {
"name": "search_docs",
"description": "Recherche dans la documentation du homelab Funk "
"(machines, services, configuration, procédures). À utiliser pour toute "
"question sur la conception ou la config du homelab.",
"parameters": {
"type": "object",
"properties": {
"query": {"type": "string", "description": "Question ou mots-clés"}
},
"required": ["query"],
},
},
},
_search_docs,
),
"host_health": (
{
"type": "function",
"function": {
"name": "host_health",
"description": "État de santé LIVE d'une machine hors-cluster "
"(en ligne ?, charge CPU, RAM libre ; pour gpu-01 aussi l'état de llama-server). "
"À utiliser pour « est-ce que gpu-01 / storage-01 tourne bien ? ».",
"parameters": {
"type": "object",
"properties": {
"host": {
"type": "string",
"enum": list(_HOST_JOBS),
"description": "Nom de la machine",
}
},
"required": ["host"],
},
},
},
_host_health,
),
"cluster_status": (
{
"type": "function",
"function": {
"name": "cluster_status",
"description": "État LIVE du cluster Kubernetes Funk : hôtes joignables, "
"nombre de pods prêts et liste des pods non prêts. À utiliser pour "
"« est-ce que le cluster va bien ? ».",
"parameters": {"type": "object", "properties": {}},
},
},
_cluster_status,
),
"prometheus_query": (
{
"type": "function",
"function": {
"name": "prometheus_query",
"description": "Exécute une requête PromQL arbitraire (lecture seule) contre "
"Prometheus et renvoie les séries. À utiliser pour une métrique précise non "
"couverte par les autres outils.",
"parameters": {
"type": "object",
"properties": {
"expr": {"type": "string", "description": "Expression PromQL"}
},
"required": ["expr"],
},
},
},
_prometheus_query,
),
"web_search": (
{
"type": "function",
"function": {
"name": "web_search",
"description": "Recherche sur INTERNET (méta-moteur SearXNG) : actualité, faits "
"généraux, documentation externe, sujets hors du homelab Funk. À utiliser quand "
"l'information n'est ni dans le homelab ni dans ta connaissance, ou pour vérifier "
"un fait récent.",
"parameters": {
"type": "object",
"properties": {
"query": {"type": "string", "description": "Termes de recherche"}
},
"required": ["query"],
},
},
},
_web_search,
),
}
def schemas_for(names: tuple[str, ...]) -> list[dict]:
"""Schémas OpenAI des outils demandés (ignore les inconnus)."""
return [_TOOLS[n][0] for n in names if n in _TOOLS]
async def run(name: str, args: dict, deps: ToolDeps) -> str:
"""Exécute un outil ; ne lève jamais — renvoie une note d'erreur lisible."""
entry = _TOOLS.get(name)
if entry is None:
return f"Outil inconnu : {name}."
try:
return await entry[1](args or {}, deps)
except Exception as e: # noqa: BLE001 — robustesse : la boucle ne doit jamais casser
return f"Erreur de l'outil {name} : {e}"