WP15 #9

Lars · 2025-12-13T06:39:36+01:00

Lars commented

2025-12-13 06:39:36 +01:00

MERGE: WP-15 Smart Edge Allocation & Traffic Control (v2.6.0)

Zusammenfassung:
Dieses Merge Request schließt das Workpackage WP-15 ab. Die Kernziele – präzisere Kanten-Zuweisung und System-Stabilität unter LLM-Last – wurden erreicht. Die Implementierung der LLM-basierten Smart Edges ist damit produktionsreif.

Kern-Features:

Smart Edge Allocation: Kanten werden nun LLM-geprüft und nur an die spezifischen Chunks gebunden, in denen der verlinkte Inhalt relevant ist. Das reduziert "Beifang" im Retrieval und erhöht die Präzision.
- Steuerung: Über types.yaml (enable_smart_edge_allocation).
Traffic Control & Resilienz: Der LLMService implementiert Prioritäts-Warteschlangen (priority="realtime" vs. "background").
- Ergebnis: Chat-Anfragen haben Vorfahrt und das System stürzt während rechenintensiver Importe nicht mehr mit Timeouts ab. Die Parallelität des Imports ist über MINDNET_LLM_BACKGROUND_LIMIT konfigurierbar.
UI Robustheit: Der "Healing Parser" im Frontend (ui.py) repariert automatisch kaputte YAML-Frontmatter in LLM-generierten Drafts.

Betroffene Komponenten:

app/services/llm_service.py (Traffic Control / Semaphore)
app/core/chunker.py / app/services/semantic_analyzer.py (Smart Edge Logik / Retry)
app/routers/chat.py (Hybrid Router v5 / Question Detection)
app/frontend/ui.py (Healing Parser / API-Timeouts)
config/types.yaml (Neue Profile & Smart Edge Flag)

Aktionen nach Merge:

Admins: MINDNET_LLM_BACKGROUND_LIMIT in der Produktions-.env prüfen und ggf. anpassen.
Initialisierung: Bei Änderung der Chunking-Profile ist ein Full Rebuild notwendig.

### MERGE: WP-15 Smart Edge Allocation & Traffic Control (v2.6.0) **Zusammenfassung:** Dieses Merge Request schließt das Workpackage WP-15 ab. Die Kernziele – präzisere Kanten-Zuweisung und System-Stabilität unter LLM-Last – wurden erreicht. Die Implementierung der LLM-basierten Smart Edges ist damit produktionsreif. **Kern-Features:** 1. **Smart Edge Allocation:** Kanten werden nun LLM-geprüft und nur an die spezifischen Chunks gebunden, in denen der verlinkte Inhalt relevant ist. Das reduziert "Beifang" im Retrieval und erhöht die Präzision. * Steuerung: Über `types.yaml` (`enable_smart_edge_allocation`). 2. **Traffic Control & Resilienz:** Der `LLMService` implementiert Prioritäts-Warteschlangen (`priority="realtime"` vs. `"background"`). * **Ergebnis:** Chat-Anfragen haben Vorfahrt und das System stürzt während rechenintensiver Importe nicht mehr mit Timeouts ab. Die Parallelität des Imports ist über `MINDNET_LLM_BACKGROUND_LIMIT` konfigurierbar. 3. **UI Robustheit:** Der "Healing Parser" im Frontend (`ui.py`) repariert automatisch kaputte YAML-Frontmatter in LLM-generierten Drafts. **Betroffene Komponenten:** * `app/services/llm_service.py` (Traffic Control / Semaphore) * `app/core/chunker.py` / `app/services/semantic_analyzer.py` (Smart Edge Logik / Retry) * `app/routers/chat.py` (Hybrid Router v5 / Question Detection) * `app/frontend/ui.py` (Healing Parser / API-Timeouts) * `config/types.yaml` (Neue Profile & Smart Edge Flag) **Aktionen nach Merge:** * **Admins:** `MINDNET_LLM_BACKGROUND_LIMIT` in der Produktions-.env prüfen und ggf. anpassen. * **Initialisierung:** Bei Änderung der Chunking-Profile ist ein Full Rebuild notwendig.

Lars added 54 commits 2025-12-13 06:39:36 +01:00

smarter chunker initial a1cd0741c9

pfad auf types.yaml angepasst 714763f92f

chunker mit LLM initial 13ab2b7d68

neuer chunker und smart test 8436f4192d

chunker angepasst 2d58220a3c

WP15 Chunker 2bcf1930fe

neues testscript für smart chunker e5bc77b93e

WP15 - Chunker 9a38daafc0

WP15-Chunker und Test f6d8751f23

WP15 testscript d59bd1885d

testscript 69ad7bc823