Lars
b1a897e51c
Verbesserung des Chunking-Parsers zur Unterstützung aller Überschriften (H1-H6) und Optimierung der Block-Trennung für atomares Sektions-Chunking. Aktualisierung der Sektions-Chunking-Strategie mit striktem Look-Ahead und präziserer Token-Schätzung für eine verbesserte Handhabung von großen Blöcken.
2025-12-29 21:26:05 +01:00
Lars
e5a34efee9
Verbesserung des Chunking-Parsers zur Gewährleistung der Integrität von Callouts und Listen sowie Anpassungen an der Blockverarbeitung. Aktualisierung der atomaren Sektions-Chunking-Strategie mit Block-Aware-Flushing und optimierter Token-Schätzung für eine präzisere Handhabung von großen Blöcken.
2025-12-29 21:15:03 +01:00
Lars
f9ac4e4dbf
Verbesserung der atomaren Sektions-Chunking-Strategie durch Einführung strikter Look-Ahead-Logik und präventiven Flush zur Gewährleistung von Sektionsgrenzen. Anpassungen an der Token-Schätzung und Umbenennung von Funktionen zur besseren Lesbarkeit.
2025-12-29 21:05:42 +01:00
Lars
1b40e29f40
Optimierung des Chunking-Parsers zur Unterstützung atomares Chunking und verbesserte Block-Trennung. Anpassungen an der Sektions-Chunking-Strategie zur Wahrung von Sektionsgrenzen und Vermeidung von Überhängen.
2025-12-29 20:57:07 +01:00
Lars
7eba1fb487
Aktualisierung des Chunking-Parsers zur Unterstützung aller Überschriften im Stream und Verbesserung der Metadatenverarbeitung. Anpassungen an der atomaren Sektions-Chunking-Strategie zur besseren Handhabung von Blockinhalten und Token-Schätzungen.
2025-12-29 20:45:04 +01:00
Lars
838083b909
Verbesserung des Chunking-Parsers zur Unterstützung von H1-Überschriften und Anpassung der Metadatenlogik. Implementierung einer atomaren Sektions-Chunking-Strategie, die Überschriften und deren Inhalte zusammenhält.
2025-12-29 20:33:43 +01:00
Lars
8f5eb36b5f
neuer Chunking parser, der Headings mitführt und nicht mitten im Abschnitt schneidet
2025-12-29 20:16:23 +01:00
Lars
b7d1bcce3d
Rücksprung zur Vorwersion, in der 2 Kantentypen angelegt wurden
2025-12-29 18:04:14 +01:00
Lars
03d3173ca6
neu deduplizierung für callout-edges
2025-12-29 12:42:26 +01:00
Lars
38a61d7b50
Fix: Semantische Deduplizierung in graph_derive_edges.py
2025-12-29 12:21:57 +01:00
Lars
0a429e1f7b
anpassungen Kantenvergeleich
2025-12-29 11:45:25 +01:00
Lars
857ba953e3
bug fix
2025-12-29 11:00:00 +01:00
Lars
e180018c99
Anpassung gui
2025-12-29 10:31:51 +01:00
Lars
ac9956bf00
Index und Anlage neues Feld in qdrant
2025-12-29 10:16:51 +01:00
Lars
62b5a8bf65
Anpassung payload für neues Feld in edges
2025-12-29 08:40:05 +01:00
Lars
303efefcb7
bug fix
2025-12-29 08:19:40 +01:00
Lars
feeb7c2d92
Initial WP4d
2025-12-29 07:58:20 +01:00
Lars
ea9a54421a
ui_fraph.old Version
2025-12-29 07:51:07 +01:00
Lars
fdf99b2bb0
bug fix
Deploy mindnet to llm-node / deploy (push) Successful in 3s
2025-12-28 18:53:11 +01:00
Lars
c7cd641f89
bug fix
Deploy mindnet to llm-node / deploy (push) Successful in 3s
2025-12-28 18:51:44 +01:00
Lars
18b90c8df3
bug fix
Deploy mindnet to llm-node / deploy (push) Successful in 3s
2025-12-28 18:16:29 +01:00
Lars
8d3bc1c2e2
next try
Deploy mindnet to llm-node / deploy (push) Successful in 3s
2025-12-28 12:00:31 +01:00
Lars
079d988034
bug fix
Deploy mindnet to llm-node / deploy (push) Successful in 4s
2025-12-28 11:57:49 +01:00
Lars
aa9d388337
ui_update
Deploy mindnet to llm-node / deploy (push) Successful in 3s
2025-12-28 11:54:44 +01:00
Lars
92bd3d9a47
bug fix
Deploy mindnet to llm-node / deploy (push) Successful in 4s
2025-12-28 11:52:49 +01:00
Lars
53058d1504
bug fix
Deploy mindnet to llm-node / deploy (push) Successful in 3s
2025-12-28 11:49:41 +01:00
Lars
3fe8463a03
bug fix
Deploy mindnet to llm-node / deploy (push) Successful in 3s
2025-12-28 11:44:04 +01:00
Lars
5c4ce5d727
neuer test
Deploy mindnet to llm-node / deploy (push) Successful in 4s
2025-12-28 11:41:47 +01:00
Lars
459193e7b1
test ui
Deploy mindnet to llm-node / deploy (push) Successful in 3s
2025-12-28 11:38:51 +01:00
Lars
98f21323fb
bug fix
Deploy mindnet to llm-node / deploy (push) Successful in 4s
2025-12-28 11:35:18 +01:00
Lars
515248d438
kanten mit #Abschnitt finden
Deploy mindnet to llm-node / deploy (push) Successful in 3s
2025-12-28 11:30:22 +01:00
Lars
b0c69ad3e0
UI test
Deploy mindnet to llm-node / deploy (push) Successful in 3s
2025-12-28 11:23:46 +01:00
Lars
c5f29ab4ae
Erweiterung der Kanten um Abschnittsinformationen
Deploy mindnet to llm-node / deploy (push) Successful in 4s
2025-12-28 11:20:30 +01:00
Lars
876ee898d8
Ui_Update_cytos
Deploy mindnet to llm-node / deploy (push) Successful in 3s
2025-12-28 11:15:11 +01:00
Lars
e93bab6ea7
Fassadenauflösung unter app/core
Deploy mindnet to llm-node / deploy (push) Successful in 4s
2025-12-28 11:04:40 +01:00
Lars
5225090490
Dokumentationsaupdate
Deploy mindnet to llm-node / deploy (push) Successful in 3s
2025-12-28 10:56:34 +01:00
Lars
e9532e8878
script_Überprüfung und Kommentarheader
Deploy mindnet to llm-node / deploy (push) Successful in 4s
2025-12-28 10:40:28 +01:00
Lars
23b1cb2966
Merge pull request 'WP15b' ( #15 ) from WP15b into main
...
Deploy mindnet to llm-node / deploy (push) Successful in 4s
Reviewed-on: #15
#### PR-Zusammenfassung: WP-14 Modularisierung & WP-15b Two-Pass Ingestion
Dieser Merge schließt die technische Konsolidierung der Architektur (WP-14) und die Optimierung der Ingestion-Pipeline (WP-15b) ab. Das System wurde von einer monolithischen Struktur in eine domänengesteuerte Paket-Hierarchie überführt.
**Kernänderungen:**
* **WP-14 (Modularisierung):**
* Aufteilung von `app/core/` in spezialisierte Pakete: `database/`, `ingestion/`, `retrieval/` und `graph/`.
* Einführung von Proxy-Modulen (z.B. `graph_adapter.py`, `retriever.py`) zur Sicherstellung der Abwärtskompatibilität.
* Zentralisierung neutraler Logik in `app/core/registry.py` zur Beseitigung von Zirkelbezügen.
* **WP-15b (Intelligence 2.0):**
* Umstellung der Ingestion auf einen **Two-Pass Workflow**.
* **Pass 1:** Globaler Pre-Scan zur Befüllung des `LocalBatchCache`.
* **Pass 2:** Binäre semantische Validierung von Kanten gegen den Kontext des Caches zur Eliminierung von Halluzinationen.
**Betroffene Komponenten:**
* `app.core.database`: Qdrant-Infrastruktur & Point-Mapping.
* `app.core.retrieval`: Scoring-Engine (WP-22) & Orchestrierung.
* `app.core.graph`: Subgraph-Modell & Traversierung.
* Sämtliche Dokumentations-Module (v2.9.1 Update).
**Teststatus:** ✅ Inkrementelle Ingestion (Pass 2 Skip) verifiziert.
✅ Hybrid-Scoring (WP-22) via isolated package verifiziert.
✅ Circular Import Audit erfolgreich abgeschlossen.
2025-12-27 22:15:27 +01:00
Lars
fa909e2e7d
Dokumentation WP14&WP15b
2025-12-27 22:13:11 +01:00
Lars
7fa9ce81bd
letzte anpassungen
2025-12-27 20:30:24 +01:00
Lars
8490911958
modularisierung
2025-12-27 20:26:00 +01:00
Lars
19d899b277
Große Modularisierung WP19b
2025-12-27 19:47:23 +01:00
Lars
37ec8b614e
bug fix
2025-12-27 19:12:14 +01:00
Lars
e045371969
Anpassung der Textausgabe zur Filterung der Steuerzeichen
2025-12-27 18:59:38 +01:00
Lars
cd5383432e
Parametrisierung der wesentliche Einstellwerte in der types.yaml
2025-12-27 18:45:15 +01:00
Lars
8b8baa27b3
W19b flexible Level Überschriften
2025-12-27 18:31:00 +01:00
Lars
386fa3ef0c
WP15b vollständieg chunking strategien
2025-12-27 18:17:13 +01:00
Lars
19c96fd00f
graph refacturiert
2025-12-27 14:44:44 +01:00
Lars
ecb35fb869
parser refactured WP15b
2025-12-27 14:31:12 +01:00
Lars
21cda0072a
refacturing parser
2025-12-27 14:26:42 +01:00
Lars
e3858e8bc3
aufräumen und löschen von Alt-Scripten WP19b
2025-12-27 14:15:22 +01:00
Lars
f08a331bc6
herstellung vollständiger Kompaitibilität
2025-12-27 13:20:37 +01:00
Lars
cfcaa926cd
WP19a Refacturierung - Edgedefaults
2025-12-27 13:14:10 +01:00
Lars
8ade34af0a
WP19b- chunk_payload an neue Struktur
2025-12-27 10:50:15 +01:00
Lars
a6d37c92d2
Integration von payload modulen in die neue Struktur
2025-12-27 10:40:44 +01:00
Lars
1b7b8091a3
bug Fix
2025-12-27 10:30:09 +01:00
Lars
94e5ebf577
WP13b Refactoring ingestion und Chunker
2025-12-27 10:25:35 +01:00
Lars
cf302e8334
Import und ingestion auf den neuen Prozess umgestellt
2025-12-27 09:52:17 +01:00
Lars
82c7752266
richtige Filename für den pool Lookup
2025-12-27 06:31:57 +01:00
Lars
c676c8263f
Import Script und Logging für WP15b
2025-12-26 22:07:25 +01:00
Lars
f6b2375d65
WP15b - Initial
2025-12-26 21:52:08 +01:00
Lars
d1a065fec8
WP20a Dokumentation
Deploy mindnet to llm-node / deploy (push) Successful in 4s
2025-12-26 17:21:58 +01:00
Lars
f686ecf947
anpassung an variable Kontextgrenzen für Ollama
Deploy mindnet to llm-node / deploy (push) Successful in 5s
2025-12-26 11:15:13 +01:00
Lars
6ac1f318d0
max retries eingeführt
Deploy mindnet to llm-node / deploy (push) Successful in 4s
2025-12-26 10:33:40 +01:00
Lars
cbaf664123
Die Context-Drossel (10.000 Zeichen), die Deaktivierung der Retry-Kaskaden (max_retries=0) für den Echtzeit-Chat und eine robustere Fehlerbehandlung für die LLM-Aufrufe.
Deploy mindnet to llm-node / deploy (push) Successful in 6s
2025-12-26 07:19:51 +01:00
Lars
470e653da6
Umstellung auf Openrouter für Interview und Empathy
Deploy mindnet to llm-node / deploy (push) Successful in 6s
2025-12-26 05:35:15 +01:00
Lars
43d3d8f7f3
debug für chat
Deploy mindnet to llm-node / deploy (push) Successful in 4s
2025-12-26 05:21:15 +01:00
Lars
83c0c9944d
angepasst an die neue LLM Logik
Deploy mindnet to llm-node / deploy (push) Successful in 4s
2025-12-26 05:11:48 +01:00
Lars
f6f3213b84
WP20final
Deploy mindnet to llm-node / deploy (push) Successful in 5s
2025-12-25 22:21:41 +01:00
Lars
e5db7011f3
WP20 final
Deploy mindnet to llm-node / deploy (push) Successful in 4s
2025-12-25 22:17:46 +01:00
Lars
b0bc8518ed
WP20 final update
Deploy mindnet to llm-node / deploy (push) Successful in 4s
2025-12-25 22:16:19 +01:00
Lars
046b648286
docs/03_Technical_References/03_tech_chat_backend.md aktualisiert
Deploy mindnet to llm-node / deploy (push) Successful in 5s
2025-12-25 22:05:54 +01:00
Lars
e04aecb0c5
docs/03_Technical_References/03_tech_ingestion_pipeline.md aktualisiert
Deploy mindnet to llm-node / deploy (push) Successful in 4s
2025-12-25 22:04:34 +01:00
Lars
d64ba06809
docs/00_General/00_glossary.md aktualisiert
Deploy mindnet to llm-node / deploy (push) Successful in 5s
2025-12-25 22:02:43 +01:00
Lars
b0d73cb053
app/core/ingestion.py aktualisiert
Deploy mindnet to llm-node / deploy (push) Successful in 3s
2025-12-25 21:46:40 +01:00
Lars
5213d262a2
app/core/ingestion.py aktualisiert
Deploy mindnet to llm-node / deploy (push) Successful in 4s
2025-12-25 21:28:54 +01:00
Lars
2985f5288b
Merge branch 'WP20'
Deploy mindnet to llm-node / deploy (push) Successful in 7s
2025-12-25 19:52:44 +01:00
Lars
27b404560c
Dokumentation WP20
2025-12-25 19:39:16 +01:00
Lars
16e128668c
Mistral sichere Parser implemntierung
2025-12-25 17:17:55 +01:00
Lars
ecfdc67485
neue Version mit Wartezeit bei externen LLM Fehler
2025-12-25 13:03:42 +01:00
Lars
c9cf1b7e4c
WP20 - Chat Interface auf neue Struktur der decision.yaml
2025-12-25 11:50:08 +01:00
Lars
fa6eb0795a
Config Anpassungen WP20
2025-12-25 09:58:25 +01:00
Lars
4ac504a4ae
Anpassung der prompts für openrouter
2025-12-25 09:43:47 +01:00
Lars
56dd1bcd84
WP20 Abschluss
2025-12-25 08:45:32 +01:00
Lars
b4a07a05af
Nachzügler für Config mit abgleich auf die neue .env
2025-12-25 08:41:33 +01:00
Lars
5c55229376
bereinigung Code Basis, wegfall von Platzhaltern und Annahmen. Volle Kofigurierbarkeit
2025-12-25 08:38:08 +01:00
Lars
f3fd71b828
WP20 - Planung WP15b
2025-12-25 08:25:56 +01:00
Lars
079cf174d4
überarbeitet mit Gemini
2025-12-24 08:07:48 +01:00
Lars
4ab44e36a2
Mit ChatGBT Überarbeitetes Modell WP20
2025-12-24 07:47:45 +01:00
Lars
5278c75ac1
bug fix
2025-12-23 22:02:32 +01:00
Lars
a908853c30
weitere Anpassungen WP20
2025-12-23 21:57:50 +01:00
Lars
867a7a8b44
bug fix Wp20
2025-12-23 21:44:49 +01:00
Lars
2c073c7d3c
bug Fix
2025-12-23 19:05:43 +01:00
Lars
0157faab89
komplett neues WP20 deployment
2025-12-23 18:51:12 +01:00
Lars
f1bfa40b5b
semantic semantic_analyzer angepasst
2025-12-23 18:17:34 +01:00
Lars
dcc3083455
pfad Anpassung
2025-12-23 18:11:05 +01:00
Lars
a5b4dfb31f
edge_registry
2025-12-23 18:07:24 +01:00
Lars
a733212c0f
neue Wp20
2025-12-23 17:56:44 +01:00
Lars
49b454d2ec
edge_registry hergestellt
2025-12-23 16:05:40 +01:00
Lars
18780e5330
Anpassung WP20
2025-12-23 15:57:50 +01:00